Panne de 4 jours, explications
Publié : 27 avr. 2015, 00:14
Bonjour,
Vous avez pu constater que le forum a été en panne pendant 4 jours. Le serveur de mozfr a subi deux avaries matérielles, l'alimentation a lâché puis le disque dur est mort (les deux pannes sont probablement liées).
L'alimentation et le disque ont été changés par notre fournisseur, tout a été réinstallé, rien n'a été perdu à notre connaissance, tous les sites fonctionnent.
Nous avons été pris par l'urgence et n'avons pas eu le temps de réellement communiquer sur les problèmes, nous nous en excusons. Nous avons privilégié la sauvegarde des données dès que nous avons vu que les pannes matérielles et logicielles s'accumulaient jeudi matin et pendant 24 heures nous nous sommes focalisés à faire une sauvegarde à distance des données (via rsync pour ceux à qui ça parle) car nous n'avions plus confiance dans les sauvegardes se trouvant sur le disque, ce qui nous a conduit à mettre le disque en lecture seule pour éviter toute écriture dessus et potentiellement plus de plantages et à fermer tous les services, donc aussi nos moyens de communication.
C'est le problème le plus gros et le plus complexe que nous ayons jamais eu à résoudre pour ce serveur, il a fallu le travail en continu de quatre personnes dont trois admin-sys professionnels pour que tout revienne pratiquement à la normale ce dimanche soir. Il reste encore les listes de discussion qui ne sont pas fonctionnelles et certains de nos outils de monitoring, probablement aussi de petits bugs ici et là dans l'infrastructure que nous résoudrons progressivement quand nous les rencontrerons.
Nous allons évaluer pour l'avenir le changement du serveur pour un autre ayant les caractéristiques techniques (redondance des données) évitant une panne aussi longue.
A+
Pascal pour l'équipe admin-sys
Vous avez pu constater que le forum a été en panne pendant 4 jours. Le serveur de mozfr a subi deux avaries matérielles, l'alimentation a lâché puis le disque dur est mort (les deux pannes sont probablement liées).
L'alimentation et le disque ont été changés par notre fournisseur, tout a été réinstallé, rien n'a été perdu à notre connaissance, tous les sites fonctionnent.
Nous avons été pris par l'urgence et n'avons pas eu le temps de réellement communiquer sur les problèmes, nous nous en excusons. Nous avons privilégié la sauvegarde des données dès que nous avons vu que les pannes matérielles et logicielles s'accumulaient jeudi matin et pendant 24 heures nous nous sommes focalisés à faire une sauvegarde à distance des données (via rsync pour ceux à qui ça parle) car nous n'avions plus confiance dans les sauvegardes se trouvant sur le disque, ce qui nous a conduit à mettre le disque en lecture seule pour éviter toute écriture dessus et potentiellement plus de plantages et à fermer tous les services, donc aussi nos moyens de communication.
C'est le problème le plus gros et le plus complexe que nous ayons jamais eu à résoudre pour ce serveur, il a fallu le travail en continu de quatre personnes dont trois admin-sys professionnels pour que tout revienne pratiquement à la normale ce dimanche soir. Il reste encore les listes de discussion qui ne sont pas fonctionnelles et certains de nos outils de monitoring, probablement aussi de petits bugs ici et là dans l'infrastructure que nous résoudrons progressivement quand nous les rencontrerons.
Nous allons évaluer pour l'avenir le changement du serveur pour un autre ayant les caractéristiques techniques (redondance des données) évitant une panne aussi longue.
A+
Pascal pour l'équipe admin-sys
Mais comme on n'avait pas été mis au courant, j'avais des doutes ! 
