Cette version du forum n'est désormais accessible que pour lire les passionants échanges et partage de techniques qui ont déjà été rédigées ici.
Pour participer aux échanges interscouts, merci d'utiliser
Aller à 1|2|3 Page suivante |
Auteur | Serveur surchargé |
Webmestre Administrateur
Nous a rejoints le : 25 Oct 2004 Messages : 1 261 |
Bonjour à tous,
bien que peu présent sur le forum ces derniers mois, je m'occupe toujours de son bon fonctionnement technique (traitant les alertes si nécessaire, et autres problèmes remontés). L'hébergeur (Infomaniak) me signale que le site consomme trop de ressources. Ils nous ont mis en serveur dédiés le temps que je trouve une solution. La solution consiste à réduire le nombre de requêtes à la base, ce qui signifie que je vais certainement devoir supprimer quelques fonctionnalités présentes d'emblée sur les pages (je ne sais pas encore lesquelles). Elles resteront présentes, mais uniquement si sollicités, d'où un temps de chargement plus long pour ces fonctionnalités. De plus, je vais réduire le nombre d'affichage de posts par page. Avec toutes mes excuses. Le Webmestre |
buffle_m Bovidae
Nous a rejoints le : 13 Fév 2008 Messages : 4 251 Réside à : ROANNE |
Ca veut dire quoi: "réduire le nombre d'affichage de posts par page"? |
Akela NDE Akela
Nous a rejoints le : 01 Avr 2005 Messages : 4 922 Réside à : Dijon |
Ça veut dire qu'il y aura moins de posts affichés sur chaque page de fuseau.
Un post, c'est un message posté sur le forum ... - Posté depuis mon mobile - |
Webmestre Administrateur
Nous a rejoints le : 25 Oct 2004 Messages : 1 261 |
Et donc plus de pages pour un fuseau... |
buffle_m Bovidae
Nous a rejoints le : 13 Fév 2008 Messages : 4 251 Réside à : ROANNE |
Ok, je viens de comprendre.
Donc, en ayant moins de posts sur une page, mais plus de pages en définitive, on allège le serveur? Pas tout compris, moi.... |
Akela NDE Akela
Nous a rejoints le : 01 Avr 2005 Messages : 4 922 Réside à : Dijon |
Voilà, parce que la page envoie une requête vers la base de données pour chaque message qu'elle doit afficher. Une page avec 15 messages, c'est 15 requêtes, une page avec 40 messages, 40 requêtes.
Ainsi, on n'allège pas la quantité de données présentes sur le serveur (ce qui voudrait dire supprimer des messages), mais on réduit la charge de calculs nécessaire pour afficher une page. Comme les gens ne lisent en général que la dernière page du fuseau qui les intéresse, ça devrait faire l'affaire. Il serait aussi sans doute intéressant de supprimer ou modifier l'affichage des points et tops. Mais c'est quand même marrant que ça arrive maintenant, alors qu'on n'a pas changé d'hébergement depuis un moment, mais que la fréquentation est en baisse. Est-ce qu'il n'y aurait pas un problème de robots ? Ou une DDOS à petite échelle ? Infomaniak, c'est quand même pas des infras de rigolos normalement, en tout cas c'est plus réputé que la petite boîte clermontoise qu'on avait à un moment ... - Posté depuis mon mobile - |
mendu1 Membre honoré
Nous a rejoints le : 22 Janv 2007 Messages : 6 678 Réside à : ar vro vigoudenn |
Tout ça, c'est de l'hébreu, je n'ai rien vu, tout semble bien fonctionner, et mieux que les affaires du gouvernement ! |
irdnael Membre confirmé
Nous a rejoints le : 10 Janv 2006 Messages : 1 323 Réside à : paris |
Avis partagé. Je valide et tamponne. |
Akela NDE Akela
Nous a rejoints le : 01 Avr 2005 Messages : 4 922 Réside à : Dijon |
Moi y en a penser problèmes cachés sous le capot du forum peut-être dus à d'autres machines.
Moi y en a aussi venir de finir dr relire Obélix et compagnie Chichi est extra en Saugrenus - Posté depuis mon mobile - |
mendu1 Membre honoré
Nous a rejoints le : 22 Janv 2007 Messages : 6 678 Réside à : ar vro vigoudenn |
S'il y a peu de gens qui écrivent, je suis surpris du nombre de lecteurs sur certains fuseaux ? |
Gribouille Bouille de Grib'
Nous a rejoints le : 23 Sept 2009 Messages : 3 081 Réside à : Isère |
Citation: Toi y'en a aimer les voitures aussi, non ? |
Akela NDE Akela
Nous a rejoints le : 01 Avr 2005 Messages : 4 922 Réside à : Dijon |
Et les ordinateurs, et les bateaux, et les voyages, et les meubles anciens, et les vieux bouquins, et la musique classique, et le ciel étoilé, et le vin, et le whisky, et les cocktails, et la saucisse de morteau, et les sushis, et le brie bien fait, et ... - Posté depuis mon mobile - |
Old GIlwellian Membre honoré
Nous a rejoints le : 09 Juin 2004 Messages : 10 027 Réside à : Paris |
Attention hein, pas n'importe quel whisky quand même, ya des blends qui sont vraiment beuark ! |
Fauvette Bxl Cisticolidae
Nous a rejoints le : 02 Juil 2009 Messages : 4 300 Réside à : Bruxelles |
C'est qu'il a l'estomac ... blindé ... |
Webmestre Administrateur
Nous a rejoints le : 25 Oct 2004 Messages : 1 261 |
Pour information,
je viens de modifier les scripts qui font les statistiques mensuelles (et je modifierai sans doute les autres ensuite). Désormais, seuls les passage vraiment humains sont comptabilisé (un navigateur qui accepte les cookies), les robots d'indexations et autres genre ne seront donc pas comptés. Cela signifie que les données seront plus fiables (avec 5% d'erreur dus aux paranos qui n'acceptent pas les cookies), mais qu'elle vont baisser drastiquement. Cela ne signifiera nullement que le forum est moins fréquenté, juste que les chiffres ne comptabliseront plus les robots. Et ça devrait alléger les requêtes. |
mendu1 Membre honoré
Nous a rejoints le : 22 Janv 2007 Messages : 6 678 Réside à : ar vro vigoudenn |
Si je comprends bien, il y aurait des robots qui liraient ce forum ( comme les services de renseignements ?) |
izard Membre confirmé
Nous a rejoints le : 25 Juin 2008 Messages : 936 Réside à : Grenoble |
Oui, et (pour faire simple) c'est grâce à eux que tu tombes ici quand tu cherches "fraternité du scoutisme" dans un moteur de recherche. |
trident Membre confirmé
Nous a rejoints le : 28 Fév 2009 Messages : 1 494 Réside à : Montréal, Québec |
Citation:Parano? Rhoo! Cette modif est très bien, car elle reflétera le véritable achalandage du site par des vrai humains L'avantage de bloquer Wysistat, Statcounter, Googleanalytic et analytics live, en plus de garder un "certain anonymat", c'est que ça accélère le chargement de la page, car à l'occasion, la requête DNS peut ramer. Vois-tu une grande différence entre ces 4 services de stats? Un seul ne serait-il pas amplement suffisant? |
Webmestre Administrateur
Nous a rejoints le : 25 Oct 2004 Messages : 1 261 |
Euh non, je ne bloque pas Wysistat Statcounter and Co, eux fonctionnent justement très bien, en en comptant que les utilisateurs ayant du java-script activé (donc pas les robot) et ça ne passe pas par nos serveurs.
En revanche ça passe par votre navigateur et ça peut rallentir d'un millième de seconde l'affichage de la page, s'il y a un problème. (vu que c'est en pied de page, si la requete DNS tarde, ça n'empêche pas l'afficga de la page, et pour Google, ils ont inventé un système asynchrone qui fait que même si le DNS est mort, la page chargée s'en moque). Pourquoi garder les 4 ? Euh, clairement il ne devrait y en avoir que 2 : Statcounter et GA (depuis que je n'ai pus accès à Wysistat et Analytics Live je ne sais pas ce que c'est -- Ah oui, c'étaient des test). Je vais nettoyer ça... |
Webmestre Administrateur
Nous a rejoints le : 25 Oct 2004 Messages : 1 261 |
A priori les modifs faites ont été suffisantes (d'autres apples à la base de données ont été optimisés) et nous sommes revenus sur notre serveur normal. |
Serviteur44 Membre actif
Nous a rejoints le : 01 Août 2012 Messages : 168 Réside à : Sur le chemin |
Bonjour,
Merci pour votre site. Je ne reçois pas de mail m'annonçant qu'une réponse à été donnée à mes messages, j'ai été vérifier dans "fuseau que vous surveillez" et c'est inscrit : "aucun". Je ne comprends pas comment surveiller un fuseau. Est-ce lié à la surcharge du serveur décrite ici ? Merci d'avance. |
Cyrano Modérateur
Nous a rejoints le : 17 Oct 2005 Messages : 2 002 Réside à : Bergerac |
Bonjour,
il est normal de ne pas recevoir de mail si tu ne suis pas de fuseau … Pour suivre un fuseau, il faut cliquer sur le lien «Suivre ce fuseau», présent en haut à droite de la liste des messages. |
Serviteur44 Membre actif
Nous a rejoints le : 01 Août 2012 Messages : 168 Réside à : Sur le chemin |
Citation: Merci ! Je viens de voir où il fallait cliquer pour surveiller un fuseau et je voulais dire que ce n'était plus la peine de répondre à mon mail précédent, mais j'ai été devancé ^^ |
Webmestre Administrateur
Nous a rejoints le : 25 Oct 2004 Messages : 1 261 |
Salut à tous,
vous avez remarqué que le forum était fermé ce jour. Mon hébergeur a voulu me faire réagir, il menace de fermer le site internet si je ne trouve pas une solution au problème suivant. Le forum repose sur une base de donnée de 1,5 millions de lignes (max par table), et en hébergement standard (mutualisé), aucun serveur ne peut consommer les ressources nécessaires à lire ces 1,5 millions de lignes toutes les 3 minutes (à chaque fois que quelqu'un se connecte. C'est bien, cela veut dire que le forum est un succès, dont il est victime. L'hébergeur menace aujourd'hui de fermer le site (ce qu'il a fait quelques heures pour me faire peur) si je ne supprime pas les bases (ou ne prend pas un compte dédié). Il m'a même déjà mis en résiliation parce que je ne répondais pas à ses mails (trop occupé), mais j'ai pu négocier l'abandon de cette résiliation forcée en montrant ma bonne volonté (en plus c'est un ancien scout alors il tolère). MAIS, il va bien falloir trouver une solution. les solutions sont les suivantes : • créer un nouveau forum et fermer l'actuel (mais le nouveau n'aura aucune fonctionnalité propre à ce forum) je ne le souhaite pas, et on perd toutes les ressources propres au forum actuel • supprimer un bon paquet de sujets de ce forum (un très gros paquet) • optimiser les requêtes SQL : à ce stade, l'optimisation relève du miracle : trouver la formule magique qui permet de demander à SQL de n'interroger qu'un nombre limité de ligne • acheter un serveur dédié à 1000 € / an. |
Webmestre Administrateur
Nous a rejoints le : 25 Oct 2004 Messages : 1 261 |
Pour les doués en programmation, j'aimerais bien trouver la formule magique qui permet de limiter le nombre de requête SQL. Si quelqu'un la connait...
Voici des exemple de rapport de requetes trop longues (>5 secondes) Citation: |
laricio Membre confirmé
Nous a rejoints le : 16 Déc 2008 Messages : 1 445 |
Bonsoir WM, tu pourrais supprimer tous les sujets délires et insouciances, ça ne nuirait pas a la qualité du Forum, tout au contraire! |
Old GIlwellian Membre honoré
Nous a rejoints le : 09 Juin 2004 Messages : 10 027 Réside à : Paris |
Mais à la fréquentation si ! |
Akela NDE Akela
Nous a rejoints le : 01 Avr 2005 Messages : 4 922 Réside à : Dijon |
Laricio, je pense que ça serait complètement contre-productif.
L'heure est au web social et aux interactions entre utilisateurs, et c'est ce que permet la section délires & insouciances. C'est grâce à elle que nous pouvons attirer et conserver des jeunes (i.e. des scouts en activité) sur le forum, et leur proposer le service que constituent les autres sections. Sans scouts actifs pour y poser des questions ou y chercher des réponses, le forum ne sert à rien. Et sans section délires et insouciances, il n'y aurait pas de scouts actifs. Donc la section délires et insouciances est vitale pour le forum. Webmestre, dans tes requêtes, le LIMIT sert déjà à limiter le nombre d'enregistrements examinés. Le problème est le nombre de requêtes par secondes, je pense, pas la taille des résultats de requête. Je me demande si le forum n'envoie pas énormément de requêtes pour un résultat qu'on pourrait obtenir en moins de requêtes, mais il faudrait que je me replonge dans le code pour voir ce qu'il en est. Et je suis beaucoup moins calé aujourd'hui qu'il y a 2 ou 3 ans, ce qui n'était déjà pas la panacée donc je ne te raconte pas |
Cyrano Modérateur
Nous a rejoints le : 17 Oct 2005 Messages : 2 002 Réside à : Bergerac |
Je pense aussi qu'on touche aux limites de ce qu'il est possible de faire en hébergement bon marché.
Aujourd'hui, Webmestre paye de sa poche le coût de l'hébergement du forum. Comme il ne s'appelle pas Crésus, on est limités à des solutions adaptées à des petits sites, et pas vraiment à un gros forum comme le nôtre. Avec plus de budget, nous pourrions disposer d'une infrastructure adaptée à la taille du forum. Donc, je pense qu'une question importante à se poser est : les forumeurs sont-ils prêts à payer pour continuer à utiliser le forum, et si oui combien ? |
technique | |
bonne humeur |