Panne sur le toolserver

il y a environ 40 minutes (22h50 à GMT+1), un problème s’est produit au niveau du toolserver (TS).

Avant de continuer, petit apparté sur le stockage actuel des bases de données sur le TS. Les bases de données (BdD) sont reparties en « clusters » sur le même modèle que leur équivalent sur les serveurs de la WikiMedia Foundation (WMF).

• le cluster S1 contient la BdD de la Wikipédia (WP) anglophone
• le cluster S2 contient la BdD de la WP germanophone et de 18 autres.
• le cluster S3 contient la BdD de notre WP francophone et celle du reste des wikis de la WMF.

Sur le TS, S1 et S3 sont stockés sur le serveur « yarrow » et S2 sur le serveur « Zedler »

Vers 22h50, donc, un bug (du kernel apparement ?) a causé un crash du service MySQL du serveur yarrow. Alertés par mes soins vers 23h05, les administrateurs ont immédiatement fait le necessaire pour réactiver MySQL, qui est actuellement en train de « s’auto-réparer » (pour assurer la consistence des BdD).

Le tout devrait être de nouveau opérationnel d’ici une vingtaine de minutes (23H50 GMT+1)

Edit 23h48 : tout est de nouveau opérationnel