Le blog de l'administrateur

J'ai refait mercredi 15/07 après midi, entre 14h30 et 18h30 le brassage et la reconfiguration des commutateurs de la plateforme, donc tous les services ont été impactés durant cette période. ça a permis de récupérer des câbles de plus de 7m qui servaient pour le brassage (quand on a pas le choix...), et de câbler correctement les serveurs IBM, avec leurs cartes de management intégrée.

Reste deux problèmes en suspens :

 - arwen, dont le ventilateur de processeur est mort.
 - legolas qui a tendance à surchauffer.

Plusieurs problèmes ont été identifiés :

• Un disque dur s'est planté sur legolas et a réussi à planter le serveur qui sert d'annuaire pour le SSO et de base de données pour certains sites
• Un problème de routage a empêché la quasi-totalité des site d'utiliser leurs bases de données

Les problèmes viennent d'être réglés.

Le ventilateur a commencé à donner des signes de faiblesse hier, je viens de procéder à son remplacement. Les services d'hébergement web et de messagerie ont été impactés de temps à autres entre hier après midi et ce matin.

Suite à une erreur de manipulation, certaines bases de données ont été perdues sur le serveur sql.vienneinfo.org. Avec l'aide de la loi de Murphy, la dernière sauvegarde date de mi octobre... Les bases suivantes ont donc été restaurées à cette date :

• articlesgout03
• articles_gout_03
• webzine
• mmbm
• ecvilliers
• tennis
• publivi
• vienneinfo
• crici
• 0860381X
• distrib
• bleclerc
• 0860472W
• 0860121P
• education
• mariejo
• ien-l
• 0860710E

La seule bonne nouvelle du jour est que la réplication master-master entre les deux nouveaux serveurs fonctionne parfaitement bien...

L'un des deux disjoncteurs différentiels qui protègent l'alimentation du local a déclenché aujourd'hui vers 10h40, occasionnant quelques dizaines de minutes plus tard l'arrêt d'environ la moitié des serveurs de la plateforme. Certains services ont été impactés (lenteurs, etc.). Les serveurs éteints entre 10h40 et 21h sont :

 * sam (supervision & sauvegardes)
 * gandalf
 * sauron (vidéo)
 * legolas
 * arwen
 * merry (jeux)
 * frodon (jeux)

Suite aux orages de la nuit du samedi au dimanche 31 août, les deux circuit alimentant la plateforme ont disjoncté vers 5h30 dimanche matin. La plateforme a été redémarrée dimanche soir vers 20h30.

Suite à une coupure de courant, le disque de sauvegarde n'était plus disponible entre le 12/08 et le 17/08, donc aucune sauvegarde n'a été faite entre ces deux dates.

Suite aux orages de la nuit du 10 au 11 juin, un des deux disjoncteur a coupé le courant le 10 juin vers 20h40, impactant 6 des 10 serveurs et donc la quasi-totalité des services (DNS, web, messagerie, ...). La situation est revenue à la normale vers 11h ce matin.

Un problème de droits empêchait l'envoi de mél depuis PHP et les autres outils utilisant sendmail. problème réglé.

Suite à la découverte d'une faille de sécurité dans phpMyAdmin, j'ai effectué la mise à jour tout à l'heure vers la version 2.10.1.

sam, le serveur de supervision (nagios / cacti) et de sauvegardes s'est planté certainement suite à un problème d'alimentation et/ou de disque dur. Il est resté hors service entre le 14 et le 23 avril. Une sauvegarde complète des serveurs a été relancée aujourd'hui.

Le serveur sam s'était planté dans la nuit de mercredi 28 mars vers 23h30 suite à un problème de disque dur. Ce serveur de backoffice est chargé de la supervision et des sauvegardes, donc il n'y a pas eu de sauvegardes entre le 28 et le 30 mars 2007. Tout est rentré dans l'ordre depuis hier soir.

Suite à une surcharge due à un grand nombre de processus apache sur beren, quelques dysfonctionnement de la messagerie (smtp, relevé de courrier, webmail) ont pu être observés depuis quelques jours. Le problème est temporairement réglé.

Suite à un problème de sécurité sur les sites utilisant spip-eva (dans une version antérieure à la 2.2), certains sites web des écoles de la Vienne sont temporairement fermés le temps de la migration pour éviter que d'autres abus aient lieu. J'ai dénombré pas moins de 53 sites web concernés par ce défaut, sour l'arborescence alecole.educ.cg86.fr.

La migration des sites est en cours et sera terminée d'ici quelques jours.

Anciennement sur beren le système de sauvegarde a été déplacé hier vendredi 20 octobre sur sam, ce qui m'a obligé d'éteindre les deux serveurs pendant une durée de quelques minutes aux alentours de 15h30 hier. les services impactés par cet arrêt ont été nombreux puisque le serveur de bases de données sql.vienneinfo.org est sur beren.