Mardi 23 Oct 2018
11:59
[S'inscrire]  [Mon Profil]  [Messages privés
[Liste des Membres] [FAQ] [ Connexion ]

Recherche avancée
 
Ecussons
Autocollants
Polos
Retour au site
Retour au forum

Cette version du forum n'est désormais accessible que pour lire les passionants échanges et partage de techniques qui ont déjà été rédigées ici.

Pour participer aux échanges interscouts, merci d'utiliser
le nouveau forum

 

          
Aller à 1|2|3 Page suivante
Auteur
Serveur surchargé
Webmestre
Administrateur

Nous a rejoints le : 25 Oct 2004
Messages : 1 261
Patientez...

Bonjour à tous,

bien que peu présent sur le forum ces derniers mois, je m'occupe toujours de son bon fonctionnement technique (traitant les alertes si nécessaire, et autres problèmes remontés).

L'hébergeur (Infomaniak) me signale que le site consomme trop de ressources. Ils nous ont mis en serveur dédiés le temps que je trouve une solution.
La solution consiste à réduire le nombre de requêtes à la base, ce qui signifie que je vais certainement devoir supprimer quelques fonctionnalités présentes d'emblée sur les pages (je ne sais pas encore lesquelles). Elles resteront présentes, mais uniquement si sollicités, d'où un temps de chargement plus long pour ces fonctionnalités.

De plus, je vais réduire le nombre d'affichage de posts par page.
Avec toutes mes excuses.

Le Webmestre
0
Infos sur le membre et actions possibles
  Profil de Webmestre  Message privé      Répondre en citant
buffle_m
Bovidae
  
TECHNIQUE: 33 points
BONNE HUMEUR: 38 points
Forêt : Trappeur
Nous a rejoints le : 13 Fév 2008
Messages : 4 251

Réside à : ROANNE
Patientez...

Ca veut dire quoi: "réduire le nombre d'affichage de posts par page"?
1
Infos sur le membre et actions possibles
  Je suis FSE  Profil de buffle_m  Voir le site web de buffle_m  Message privé      Répondre en citant
Fauvette Bxl
Cisticolidae
  
TECHNIQUE: 34 points
BONNE HUMEUR: 102 points
Église : Rapporteur de la foi
Nous a rejoints le : 02 Juil 2009
Messages : 4 300

Réside à : Bruxelles
2
Patientez...

tout simplement qu'il te faudra temporairement écrire tes messages sur des post-it et délicatement les poser sur ton écran ivre taré Je sors
2
Infos sur le membre et actions possibles
  Je suis FSC & GCB  Profil de Fauvette Bxl  Voir le site web de Fauvette Bxl  Message privé      Répondre en citant
Akela NDE
Akela

Nous a rejoints le : 01 Avr 2005
Messages : 4 922

Réside à : Dijon
Patientez...

bla bla bla Ça veut dire qu'il y aura moins de posts affichés sur chaque page de fuseau.

intello Un post, c'est un message posté sur le forum ...
- Posté depuis mon mobile -
3
Infos sur le membre et actions possibles
  Je suis ma route en solitaire.  Profil de Akela NDE  Message privé      Répondre en citant
Webmestre
Administrateur

Nous a rejoints le : 25 Oct 2004
Messages : 1 261
Patientez...

Et donc plus de pages pour un fuseau...
4
Infos sur le membre et actions possibles
  Profil de Webmestre  Message privé      Répondre en citant
buffle_m
Bovidae
  
TECHNIQUE: 33 points
BONNE HUMEUR: 38 points
Forêt : Trappeur
Nous a rejoints le : 13 Fév 2008
Messages : 4 251

Réside à : ROANNE
Patientez...

Ok, je viens de comprendre.

Donc, en ayant moins de posts sur une page, mais plus de pages en définitive, on allège le serveur?

Pas tout compris, moi....
5
Infos sur le membre et actions possibles
  Je suis FSE  Profil de buffle_m  Voir le site web de buffle_m  Message privé      Répondre en citant
Akela NDE
Akela

Nous a rejoints le : 01 Avr 2005
Messages : 4 922

Réside à : Dijon
Patientez...

Voilà, parce que la page envoie une requête vers la base de données pour chaque message qu'elle doit afficher. Une page avec 15 messages, c'est 15 requêtes, une page avec 40 messages, 40 requêtes.

Ainsi, on n'allège pas la quantité de données présentes sur le serveur (ce qui voudrait dire supprimer des messages), mais on réduit la charge de calculs nécessaire pour afficher une page. Comme les gens ne lisent en général que la dernière page du fuseau qui les intéresse, ça devrait faire l'affaire.

Il serait aussi sans doute intéressant de supprimer ou modifier l'affichage des points et tops.

Mais c'est quand même marrant que ça arrive maintenant, alors qu'on n'a pas changé d'hébergement depuis un moment, mais que la fréquentation est en baisse. Euuuh... Est-ce qu'il n'y aurait pas un problème de robots ? Ou une DDOS à petite échelle ? Infomaniak, c'est quand même pas des infras de rigolos normalement, en tout cas c'est plus réputé que la petite boîte clermontoise qu'on avait à un moment ...
- Posté depuis mon mobile -
6
Infos sur le membre et actions possibles
  Je suis ma route en solitaire.  Profil de Akela NDE  Message privé      Répondre en citant
mendu1
Membre honoré
 



  
TECHNIQUE: 12 points
BONNE HUMEUR: 74 points
Forêt : Campeur
Nous a rejoints le : 22 Janv 2007
Messages : 6 678

Réside à : ar vro vigoudenn
1
Patientez...

Tout ça, c'est de l'hébreu, je n'ai rien vu, tout semble bien fonctionner, et mieux que les affaires du gouvernement !
7
Infos sur le membre et actions possibles
  Je suis SDF avant la révolution cutt  Profil de mendu1  Voir le site web de mendu1  Message privé      Répondre en citant
irdnael
Membre confirmé
  
TECHNIQUE: 33 points
BONNE HUMEUR: 42 points
Forêt : Trappeur
Nous a rejoints le : 10 Janv 2006
Messages : 1 323

Réside à : paris
1
Patientez...

Avis partagé. Je valide et tamponne.
8
Infos sur le membre et actions possibles
  Je suis  ancien scout de france  Profil de irdnael  Message privé      Répondre en citant
Akela NDE
Akela

Nous a rejoints le : 01 Avr 2005
Messages : 4 922

Réside à : Dijon
Patientez...

intello Moi y en a penser problèmes cachés sous le capot du forum peut-être dus à d'autres machines.

Moi y en a aussi venir de finir dr relire Obélix et compagnie belebleb
Chichi est extra en Saugrenus Mort de Rire
- Posté depuis mon mobile -
9
Infos sur le membre et actions possibles
  Je suis ma route en solitaire.  Profil de Akela NDE  Message privé      Répondre en citant
mendu1
Membre honoré
 



  
TECHNIQUE: 12 points
BONNE HUMEUR: 74 points
Forêt : Campeur
Nous a rejoints le : 22 Janv 2007
Messages : 6 678

Réside à : ar vro vigoudenn
1
Patientez...

S'il y a peu de gens qui écrivent, je suis surpris du nombre de lecteurs sur certains fuseaux ?
10
Infos sur le membre et actions possibles
  Je suis SDF avant la révolution cutt  Profil de mendu1  Voir le site web de mendu1  Message privé      Répondre en citant
Gribouille
Bouille de Grib'

Nous a rejoints le : 23 Sept 2009
Messages : 3 081

Réside à : Isère
Patientez...

Citation:
Le 2012-06-28 22:07:00, Akela NDE a écrit :

sous le capot du forum peut-être dus à d'autres machines.

Toi y'en a aimer les voitures aussi, non ? belebleb
11
Infos sur le membre et actions possibles
  Je suis GSE  Profil de Gribouille  Voir le site web de Gribouille  Message privé      Répondre en citant
Akela NDE
Akela

Nous a rejoints le : 01 Avr 2005
Messages : 4 922

Réside à : Dijon
1
Patientez...

Grand sourire
Et les ordinateurs, et les bateaux, et les voyages, et les meubles anciens, et les vieux bouquins, et la musique classique, et le ciel étoilé, et le vin, et le whisky, et les cocktails, et la saucisse de morteau, et les sushis, et le brie bien fait, et ... hi hi
- Posté depuis mon mobile -
12
Infos sur le membre et actions possibles
  Je suis ma route en solitaire.  Profil de Akela NDE  Message privé      Répondre en citant
Old GIlwellian
Membre honoré
 
  
TECHNIQUE: 103 points
BONNE HUMEUR: 62 points
Cité : Serviteur
Nous a rejoints le : 09 Juin 2004
Messages : 10 027

Réside à : Paris
Patientez...

Attention hein, pas n'importe quel whisky quand même, ya des blends qui sont vraiment beuark !
13
Infos sur le membre et actions possibles
  Je suis Ancien SdF et FEEUF  Profil de Old GIlwellian  Voir le site web de Old GIlwellian  Message privé      Répondre en citant
Fauvette Bxl
Cisticolidae
  
TECHNIQUE: 34 points
BONNE HUMEUR: 102 points
Église : Rapporteur de la foi
Nous a rejoints le : 02 Juil 2009
Messages : 4 300

Réside à : Bruxelles
Patientez...

C'est qu'il a l'estomac ... blindé ... à se rouler par terre
14
Infos sur le membre et actions possibles
  Je suis FSC & GCB  Profil de Fauvette Bxl  Voir le site web de Fauvette Bxl  Message privé      Répondre en citant
Webmestre
Administrateur

Nous a rejoints le : 25 Oct 2004
Messages : 1 261
Patientez...

Pour information,

je viens de modifier les scripts qui font les statistiques mensuelles (et je modifierai sans doute les autres ensuite).
Désormais, seuls les passage vraiment humains sont comptabilisé (un navigateur qui accepte les cookies), les robots d'indexations et autres genre ne seront donc pas comptés.

Cela signifie que les données seront plus fiables (avec 5% d'erreur dus aux paranos qui n'acceptent pas les cookies), mais qu'elle vont baisser drastiquement.
Cela ne signifiera nullement que le forum est moins fréquenté, juste que les chiffres ne comptabliseront plus les robots.

Et ça devrait alléger les requêtes.
15
Infos sur le membre et actions possibles
  Profil de Webmestre  Message privé      Répondre en citant
mendu1
Membre honoré
 



  
TECHNIQUE: 12 points
BONNE HUMEUR: 74 points
Forêt : Campeur
Nous a rejoints le : 22 Janv 2007
Messages : 6 678

Réside à : ar vro vigoudenn
Patientez...

Si je comprends bien, il y aurait des robots qui liraient ce forum ( comme les services de renseignements ?)
16
Infos sur le membre et actions possibles
  Je suis SDF avant la révolution cutt  Profil de mendu1  Voir le site web de mendu1  Message privé      Répondre en citant
izard
Membre confirmé

Nous a rejoints le : 25 Juin 2008
Messages : 936

Réside à : Grenoble
Patientez...

Oui, et (pour faire simple) c'est grâce à eux que tu tombes ici quand tu cherches "fraternité du scoutisme" dans un moteur de recherche.
17
Infos sur le membre et actions possibles
  Je suis SGDF  Profil de izard  Voir le site web de izard  Message privé      Répondre en citant
trident
Membre confirmé

Nous a rejoints le : 28 Fév 2009
Messages : 1 494

Réside à : Montréal, Québec
Patientez...

Citation:
Le 2012-07-04 18:51:00, Webmestre a écrit :

Cela signifie que les données seront plus fiables (avec 5% d'erreur dus aux paranos qui n'acceptent pas les cookies), mais qu'elle vont baisser drastiquement.
Parano? Rhoo! Grand sourire

Cette modif est très bien, car elle reflétera le véritable achalandage du site par des vrai humains Sourire

L'avantage de bloquer Wysistat, Statcounter, Googleanalytic et analytics live, en plus de garder un "certain anonymat", c'est que ça accélère le chargement de la page, car à l'occasion, la requête DNS peut ramer.

Vois-tu une grande différence entre ces 4 services de stats? Un seul ne serait-il pas amplement suffisant?
18
Infos sur le membre et actions possibles
  Je suis ex-ASC, ex-FSE  Profil de trident  Message privé      Répondre en citant
Webmestre
Administrateur

Nous a rejoints le : 25 Oct 2004
Messages : 1 261
Patientez...

Euh non, je ne bloque pas Wysistat Statcounter and Co, eux fonctionnent justement très bien, en en comptant que les utilisateurs ayant du java-script activé (donc pas les robot) et ça ne passe pas par nos serveurs.

En revanche ça passe par votre navigateur et ça peut rallentir d'un millième de seconde l'affichage de la page, s'il y a un problème.
(vu que c'est en pied de page, si la requete DNS tarde, ça n'empêche pas l'afficga de la page, et pour Google, ils ont inventé un système asynchrone qui fait que même si le DNS est mort, la page chargée s'en moque).

Pourquoi garder les 4 ?
Euh, clairement il ne devrait y en avoir que 2 : Statcounter et GA (depuis que je n'ai pus accès à Wysistat et Analytics Live je ne sais pas ce que c'est -- Ah oui, c'étaient des test).
Je vais nettoyer ça...
19
Infos sur le membre et actions possibles
  Profil de Webmestre  Message privé      Répondre en citant
Webmestre
Administrateur

Nous a rejoints le : 25 Oct 2004
Messages : 1 261
Patientez...

A priori les modifs faites ont été suffisantes (d'autres apples à la base de données ont été optimisés) et nous sommes revenus sur notre serveur normal.
20
Infos sur le membre et actions possibles
  Profil de Webmestre  Message privé      Répondre en citant
Serviteur44
Membre actif
  
TECHNIQUE: 20 points
BONNE HUMEUR: 20 points
Église : Lecteur
Nous a rejoints le : 01 Août 2012
Messages : 168

Réside à : Sur le chemin
Patientez...

Bonjour,

Merci pour votre site.

Je ne reçois pas de mail m'annonçant qu'une réponse à été donnée à mes messages, j'ai été vérifier dans "fuseau que vous surveillez" et c'est inscrit : "aucun".

Je ne comprends pas comment surveiller un fuseau. confus

Est-ce lié à la surcharge du serveur décrite ici ?

Merci d'avance.
21
Infos sur le membre et actions possibles
  Je suis SGDF  Profil de Serviteur44  Voir le site web de Serviteur44  Message privé      Répondre en citant
Cyrano
Modérateur

Nous a rejoints le : 17 Oct 2005
Messages : 2 002

Réside à : Bergerac
Patientez...

Bonjour,

il est normal de ne pas recevoir de mail si tu ne suis pas de fuseau …

bla bla bla Pour suivre un fuseau, il faut cliquer sur le lien «Suivre ce fuseau», présent en haut à droite de la liste des messages.
22
Infos sur le membre et actions possibles
  Je suis cadet de Gascogne  Profil de Cyrano  Voir le site web de Cyrano  Message privé      Répondre en citant
Serviteur44
Membre actif
  
TECHNIQUE: 20 points
BONNE HUMEUR: 20 points
Église : Lecteur
Nous a rejoints le : 01 Août 2012
Messages : 168

Réside à : Sur le chemin
Patientez...

Citation:
Cyrano a écrit :

bla bla blaPour suivre un fuseau, il faut cliquer sur le lien «Suivre ce fuseau», présent en haut à droite de la liste des messages.


Merci !

Je viens de voir où il fallait cliquer pour surveiller un fuseau et je voulais dire que ce n'était plus la peine de répondre à mon mail précédent, mais j'ai été devancé ^^
23
Infos sur le membre et actions possibles
  Je suis SGDF  Profil de Serviteur44  Voir le site web de Serviteur44  Message privé      Répondre en citant
Webmestre
Administrateur

Nous a rejoints le : 25 Oct 2004
Messages : 1 261
Patientez...

Salut à tous,

vous avez remarqué que le forum était fermé ce jour.
Mon hébergeur a voulu me faire réagir, il menace de fermer le site internet si je ne trouve pas une solution au problème suivant.

Le forum repose sur une base de donnée de 1,5 millions de lignes (max par table), et en hébergement standard (mutualisé), aucun serveur ne peut consommer les ressources nécessaires à lire ces 1,5 millions de lignes toutes les 3 minutes (à chaque fois que quelqu'un se connecte.

C'est bien, cela veut dire que le forum est un succès, dont il est victime.

L'hébergeur menace aujourd'hui de fermer le site (ce qu'il a fait quelques heures pour me faire peur) si je ne supprime pas les bases (ou ne prend pas un compte dédié). Il m'a même déjà mis en résiliation parce que je ne répondais pas à ses mails (trop occupé), mais j'ai pu négocier l'abandon de cette résiliation forcée en montrant ma bonne volonté (en plus c'est un ancien scout alors il tolère).

MAIS, il va bien falloir trouver une solution.

les solutions sont les suivantes :
créer un nouveau forum et fermer l'actuel (mais le nouveau n'aura aucune fonctionnalité propre à ce forum) je ne le souhaite pas, et on perd toutes les ressources propres au forum actuel
supprimer un bon paquet de sujets de ce forum (un très gros paquet)
optimiser les requêtes SQL : à ce stade, l'optimisation relève du miracle : trouver la formule magique qui permet de demander à SQL de n'interroger qu'un nombre limité de ligne
acheter un serveur dédié à 1000 € / an.
24
Infos sur le membre et actions possibles
  Profil de Webmestre  Message privé      Répondre en citant
Webmestre
Administrateur

Nous a rejoints le : 25 Oct 2004
Messages : 1 261
Patientez...

Pour les doués en programmation, j'aimerais bien trouver la formule magique qui permet de limiter le nombre de requête SQL. Si quelqu'un la connait...

Voici des exemple de rapport de requetes trop longues (>5 secondes)

Citation:
# Time: 130218 3:53:50
# Query_time: 11 Lock_time: 0 Rows_sent: 60 Rows_examined: 1 476 075
SELECT u.user_id, f.forum_id, p.topic_id, p.post_id, pt.post_text, u.username, p.post_time, t.topic_title, t.topic_poster, t.connexes, f.forum_name FROM posts p
LEFT JOIN posts_text pt ON pt.post_id = p.post_id
LEFT JOIN users u ON u.user_id = p.poster_id
LEFT JOIN forums f ON f.forum_id = p.forum_id
LEFT JOIN topics t ON t.topic_id = p.topic_id WHERE !(f.forum_type = 1 ) AND f.forum_id !=58 ORDER BY p.post_time DESC, p.post_time DESC, t.topic_title DESC LIMIT 60;

# Time: 130218 8:25:30
# Query_time: 7 Lock_time: 0 Rows_sent: 10 Rows_examined: 873 636
SELECT f.forum_id, f.forum_type, f.forum_name, t.topic_id, t.topic_title, t.topic_status, t.topic_replies, p.poster_id, p.post_time, u.username
FROM posts p, forums f, topics t, users u
WHERE t.topic_id = p.topic_id AND f.forum_id = t.forum_id AND u.user_id = p.poster_id AND f.forum_access != 3 AND f.forum_type = 0 AND f.forum_id != 58
ORDER BY p.post_id DESC LIMIT 10;
25
Infos sur le membre et actions possibles
  Profil de Webmestre  Message privé      Répondre en citant
laricio
Membre confirmé
Église : Lecteur
Nous a rejoints le : 16 Déc 2008
Messages : 1 445
Patientez...

Bonsoir WM, tu pourrais supprimer tous les sujets délires et insouciances, ça ne nuirait pas a la qualité du Forum, tout au contraire!
26
Infos sur le membre et actions possibles
  Je suis FSE puis SUF  Profil de laricio      Répondre en citant
Old GIlwellian
Membre honoré
 
  
TECHNIQUE: 103 points
BONNE HUMEUR: 62 points
Cité : Serviteur
Nous a rejoints le : 09 Juin 2004
Messages : 10 027

Réside à : Paris
Patientez...

Mais à la fréquentation si !
27
Infos sur le membre et actions possibles
  Je suis Ancien SdF et FEEUF  Profil de Old GIlwellian  Voir le site web de Old GIlwellian  Message privé      Répondre en citant
Akela NDE
Akela

Nous a rejoints le : 01 Avr 2005
Messages : 4 922

Réside à : Dijon
1
Patientez...

Laricio, je pense que ça serait complètement contre-productif.

L'heure est au web social et aux interactions entre utilisateurs, et c'est ce que permet la section délires & insouciances. C'est grâce à elle que nous pouvons attirer et conserver des jeunes (i.e. des scouts en activité) sur le forum, et leur proposer le service que constituent les autres sections.
Sans scouts actifs pour y poser des questions ou y chercher des réponses, le forum ne sert à rien.
Et sans section délires et insouciances, il n'y aurait pas de scouts actifs.
Donc la section délires et insouciances est vitale pour le forum.

Webmestre, dans tes requêtes, le LIMIT sert déjà à limiter le nombre d'enregistrements examinés. Le problème est le nombre de requêtes par secondes, je pense, pas la taille des résultats de requête. Je me demande si le forum n'envoie pas énormément de requêtes pour un résultat qu'on pourrait obtenir en moins de requêtes, mais il faudrait que je me replonge dans le code pour voir ce qu'il en est. Et je suis beaucoup moins calé aujourd'hui qu'il y a 2 ou 3 ans, ce qui n'était déjà pas la panacée donc je ne te raconte pas Mort de Rire
28
Infos sur le membre et actions possibles
  Je suis ma route en solitaire.  Profil de Akela NDE  Message privé      Répondre en citant
Cyrano
Modérateur

Nous a rejoints le : 17 Oct 2005
Messages : 2 002

Réside à : Bergerac
1
Patientez...

Je pense aussi qu'on touche aux limites de ce qu'il est possible de faire en hébergement bon marché.
Aujourd'hui, Webmestre paye de sa poche le coût de l'hébergement du forum. Comme il ne s'appelle pas Crésus, on est limités à des solutions adaptées à des petits sites, et pas vraiment à un gros forum comme le nôtre.

Avec plus de budget, nous pourrions disposer d'une infrastructure adaptée à la taille du forum.

Donc, je pense qu'une question importante à se poser est : les forumeurs sont-ils prêts à payer pour continuer à utiliser le forum, et si oui combien ?
29
Infos sur le membre et actions possibles
  Je suis cadet de Gascogne  Profil de Cyrano  Voir le site web de Cyrano  Message privé      Répondre en citant
Aller à 1|2|3 Page suivante
Signaler
Patientez...
>>Le fuseau a été fermé par un modérateur

 

  technique
  bonne humeur
RSS 

 

 

Semper Parati Scoutopedia, l'encyclopédie scoute

© Fraternite.net | contact
webmestre@fraternite.net