MAINTENANCE
MAINTENANCE
| Ouvert le | Jeudi 17 octobre 2019, 10:50 |
| Dernière édition | |
| Debut | - |
| Fin | - |
| Type | Incident |
| Etat | Terminé |
| Avancement | 100% |
Un incident impacte le serveur SQL-1 de l'offre mutualisé
Cette maintenance est maintenant terminée. Nous vous remercions de votre compréhension ainsi que de votre fidélité. Nous restons à votre écoute via le support ticket si vous rencontrez un soucis particulier. Merci encore. Team FH.
Le serveur SQL-1 utilise une version très ancienne de Mysql (5.1) qui est difficile à recompiler dans le cas d'un serveur dont les disques sont HS et le système corrompu (ce qui s'est produit au cours du déménagement).
Nous avons de plus constaté que les fichiers de bases sous moteur InnoDB étaient fortement corrompues et très liés à la version executé, ce qui empêchait tout upgrade de Mysql sur une version encore maintenu sous Debian.
Après de nombreuses tentatives de restaurations, la plupart des bases restaient illisible, voire en lecture seule dans le meilleurs des cas, ce qui n'était pas satisfaisant.
Nous avons alors pris la décision de travailler directement les données, de les exporter avec un mysqldump propre base par base (plus de 4400 bases à récupérer), de vérifier leur intégrité, et de les réimporter.
L'étape d'exportation est terminée, et l'intégrité des bases est confirmée pour 97% de celles ci.
Les bases corrompues sont cependant accessible en lecture seul et pourront être réparés au cas par cas. Elles sont anciennes et probablement plus utilisés.
L'importation des bases est en cours (on en est à la lettre i), et celle ci devrait durer entre 1 et 3 heures. A l'issue de celle ci, le serveur sera remis à la disposition des clients.
L'incident mutualisé sera alors terminé. Notre support reste à votre disposition pour toute demande d'informations complémentaires, ou de geste commercial.
Les restaurations sont en cours. Nous avons réussi à tout récupérer. Opérations en cours. Cela peut toujours prendre 48 à 72H. Merci de votre confiance.
Le serveur SQL-1 a été déménagé avec l'infrastructure mutualisé le 15/10.
Il semble que les disques SSD étaient en fin de vie, et le serveur n'a pas voulu redémarrer correctement.
Nous avons restauré un backup des données datant du 07/10. Cependant, le moteur innoDB du SQL-1 semble complètement HS.
Nous devons faire un mysqldump de l'ensemble des 4400 bases pour retrouver un fonctionnement nominal.
La récupération sera lancé ce jour et pourrait prendre 48/72h avant un retour à la normale.