Mon Blog:
Humeur /
Panne de courant, c'est paaaas bieen
Aujourd'hui au boulot, on a vécu une panne de courant. Ca arrive. Mais le problème, c'est que ce cas de figure, assez rare tout de même, n'était aucunement préparé. Tellement pas préparé même que nous sommes rapidement devenus des spéctateurs devant nos serveurs qui vidaient les UPS en priant pour que le jus revienne.
Nombre de problèmes ont rapidement été soulevés:
Premier du nom, impossible d'avoir accès aux serveurs via le réseau puisque non seulement nos postes de travail ne sont pas sur UPS (mais on a bien un ou deux portables) et que le réseau (switchs d'étages et autres) non plus, ce qui est plus grave. De plus, pour couronner le tout, si un écran est bien secouru dans le local serveur, il est assez inutile dans son genre puisque le switch KVM relié aux serveurs ne l'est pas.
Deuxième du nom, aucune procédure n'est établie. On ne sait pas quels serveurs on peut descendre et lesquels on ne peut pas (en fonction des services qui tournent dessus). En tout cas, on ne descend pas à l'arrache mon serveur Linux qui tourne des bases de données à fond, parce que je sais pas si il remonte après.
Je sens que je vais devoir me pencher sur le problème assez rapidement.
Nombre de problèmes ont rapidement été soulevés:
Premier du nom, impossible d'avoir accès aux serveurs via le réseau puisque non seulement nos postes de travail ne sont pas sur UPS (mais on a bien un ou deux portables) et que le réseau (switchs d'étages et autres) non plus, ce qui est plus grave. De plus, pour couronner le tout, si un écran est bien secouru dans le local serveur, il est assez inutile dans son genre puisque le switch KVM relié aux serveurs ne l'est pas.
Deuxième du nom, aucune procédure n'est établie. On ne sait pas quels serveurs on peut descendre et lesquels on ne peut pas (en fonction des services qui tournent dessus). En tout cas, on ne descend pas à l'arrache mon serveur Linux qui tourne des bases de données à fond, parce que je sais pas si il remonte après.
Je sens que je vais devoir me pencher sur le problème assez rapidement.
Les commentaires
Déjà vu ?
Et bien ça me rappelle curieusement quelque chose cette histoire, n'est-ce pas ? Et maintenant on sait que l'on peut à deux descendre 12 serveurs Unix en moins de 15 minutes !
Mais l'image qu'il me reste, c'était celle du gars de la mécanique en train de trifouiller la serrure avec une pince à épiler, parce que la badgeuse était sur le secteur et on ne pouvait plus ouvrir... Et finalement l'intervention musclée du collègue avec le pied de biche pour forcer la porte, pendant que celui de la mécanique disait : "Mais vous êtes dingues, y'a pas le feu". Et ben si on l'avait attendu, on y serait encore, devant la porte !
Mais l'image qu'il me reste, c'était celle du gars de la mécanique en train de trifouiller la serrure avec une pince à épiler, parce que la badgeuse était sur le secteur et on ne pouvait plus ouvrir... Et finalement l'intervention musclée du collègue avec le pied de biche pour forcer la porte, pendant que celui de la mécanique disait : "Mais vous êtes dingues, y'a pas le feu". Et ben si on l'avait attendu, on y serait encore, devant la porte !
Publié le 26 septembre 2006 à 17h37 par neuschgu
Rien de tel que la bonne veille clé
En effet. Mais là, on avait quand même des consoles pour descendre les serveurs (celui du Fortef entre autres). Nous, ajourd'hui, on appuyait 5 sec sur le bouton power des serveurs "pas importants". Ceux qui n'ont pas de boutons power, on leur a tiré la prise (genre le BladeCenter IBM...). Et je me suis rendu compte aujourd'hui que mon serveur Xserve Macintosh n'était même pas sur l'UPS. Ces salauds de Windowsiens, je te jure....
Christian qui avait arraché la porte au pied de biche, c'était quand même un grand moment de la télé ;-)
Mais nous, à l'EPFL, on a une bonne vieille clé pour ouvrir notre local serveur. Rien de tel pour ne pas se faire chier avec un lecteur de badge...
Christian qui avait arraché la porte au pied de biche, c'était quand même un grand moment de la télé ;-)
Mais nous, à l'EPFL, on a une bonne vieille clé pour ouvrir notre local serveur. Rien de tel pour ne pas se faire chier avec un lecteur de badge...
Publié le 26 septembre 2006 à 19h24 par Nakan
Me réjouis de voir mon tour
Me réjouis de voir quand ça arrivera dans mon nouvel environnement.....
Une des salles serveur, c'est OK : 48heures d'autonomie, avec des groupes électrogènes. Je m'inquiète pas trop.
Par contre, l'autre, j'ai de sérieux doutes.
Et je parle pas de..la troisième salle, qui est en fait à la cave d'un... immeuble de Lausanne, parce qu'il n'a jamais pu être mis dans la nouvelle salle vu que tout le monde s'en foutait : Lui, critique comme pas 2 (on parlait de bases de données...?), je suis même pas s^'ur qu'il est ondulé.
Comme quoi, on pense jamais à tout.....
Une des salles serveur, c'est OK : 48heures d'autonomie, avec des groupes électrogènes. Je m'inquiète pas trop.
Par contre, l'autre, j'ai de sérieux doutes.
Et je parle pas de..la troisième salle, qui est en fait à la cave d'un... immeuble de Lausanne, parce qu'il n'a jamais pu être mis dans la nouvelle salle vu que tout le monde s'en foutait : Lui, critique comme pas 2 (on parlait de bases de données...?), je suis même pas s^'ur qu'il est ondulé.
Comme quoi, on pense jamais à tout.....
Publié le 27 septembre 2006 à 21h49 par Syklop
Poster un commentaire
Les commentaires ont été désactivés sur l'ancien blog. Pour afficher le nouveau blog de nakan.ch, rendez-vous ici
La discussion continue...
URL de rétrolien:
http://www.nakan.ch/blog/trackback.php?id=92