Intervention électrique chez Red bus

Sébastien le Lundi 27 Mars 2006

Red bus demande à tous les hébergeurs présents sur leur datacenter de Courbevoie de couper les machines à partir de 19h30 car il vont procéder à une coupure totale à 20h00. Ceci afin d'éviter les chocs électriques sur les serveurs du datacenter.

Depuis hier Redbus est alimenté par les groupes électrogènes. En effet le disjoncteur général est H.S depuis hier. C'est une pièce relativement dificile à trouver étant donné la puissance utilisée.
Le but de l'opération est de raccorder à nouveau le datacenter au réseaux EDF.

Nous n'allons pas couper complètement les machines à 19h30 pour diminuer au maximun le délais d'inactivité du service. Nous bloquerons seulement les gestions en écriture. En effet nos serveurs web supportent les coupures sans trop de problème. Cela n'est pas le cas des 3 serveurs SQL de base de données qui ne peuvent pas d'être coupé à chaud.

Nous espérons un retour à la normal vers 20h30, nous vous en tiendrons informé.




Vos commentaires

1.Posté par Jerome le 27/03/2006 18:44 | Alerter
Utilisez le formulaire ci-dessous pour envoyer une alerte au responsable du site concernant ce commentaire :
Annuler
Monday, 27 Mar 2006, 6:13pm

Redbus prevoit une intervention sur les installations ce soir vers 20H00.

Comme suite à notre email d'hier soir, nous confirmons que l'alimentation Clients est assurée en direct par les groupes électrogènes. Ceux-ci sont toujours en fonction dans des conditions stables de tension et fréquence. Les réservoirs de fuel sont pleins environ aux deux tiers et nous les rempliront cet après-midi.

Nous devons procéder à la reconnection des UPS sur les groupes électrogènes pour recharger les batteries, et à la maintenance du
Disjoncteur normal TGBT (alimenté par EDF). A la demande de nos Clients, nous avons retardé ces opérations jusqu'à ce soir. Elles commenceront à 20h00 et comporteront :

- Maintenance corrective du Disjoncteur normal TGBT
- Reconnexion des UPS sur les générateurs
- Passage de la charge Clients sur les UPS

Il faudra ensuite attendre la recharge des batteries UPS pour réalimenter les UPS par EDF Ces opérations comportent un risque de coupure électrique.

2.Posté par Jérôme le 27/03/2006 20:47 | Alerter
Utilisez le formulaire ci-dessous pour envoyer une alerte au responsable du site concernant ce commentaire :
Annuler
20h45, des nouvelles des opérations :

L'intervention de 20h va consister au demontage et à la réparation du disjoncteur EDF. Le disjoncteur étant isolé, il n'y aura normalement pas d'incident.

A 21h ou 22h environs, lorsque le disjoncteur sera reparré, les onduleurs seront basculés sur les generateurs qui fournissent actuellement le courant sur Redbus. Cette manipulation avait échouée à deux reprises hier suite à une defaillance d'un des onduleurs. L'onduleur en question a été reparré mais le risque existe tout de même.

Suite à cette manipulation, les onduleurs seront injecté dans le circuit entre les generateurs et les clients. Le courant sera donc régulé.

10h plus tard les batteries des onduleurs seront pleinement chargées. Il sera alors techniquement possible de repasser sur l'alimentation EDF. Le bascullement sera fait à une date et une heure non communiquée pour le moment.


Les backoffices restent inactifs tant que l'interventions citée n'est pas terminée.

3.Posté par Webzinemaker le 27/03/2006 23:20 | Alerter
Utilisez le formulaire ci-dessous pour envoyer une alerte au responsable du site concernant ce commentaire :
Annuler
Nous avons de tardives nouvelles :

à 22h30 :
La première partie a été realisée sans problème.
D'ici 15 minutes les techniciens attaquent la seconde phase qui consiste à brancher les onduleurs sur les groupes electrogene. C'est la partie qui est actuellement la plus dangeureuse.


à 23h15 :
La phase 2 prends finalement un peu plus de temps. Ils l'estiment à 45 minutes à partir de maintenant.

4.Posté par Webzinemaker le 27/03/2006 23:58 | Alerter
Utilisez le formulaire ci-dessous pour envoyer une alerte au responsable du site concernant ce commentaire :
Annuler
C'est fini pour aujourd'hui. La bonne nouvelle c'est qu'il n'y a pas eu de coupure de service :
Les onduleurs sont connectés.Les baies sont passées sur le réseau ondulé.On se retrouve donc alimentés par les generateurs mais en étant protegé par les onduleurs.Les onduleurs rechargent pendant 10h. Demain soir, à 20h, le basculement vers EDF sera fait.Au niveau des generateurs il y a actuellement 50 000 litres de fuel (le plein a été fait aujourd'hui à 17h). Demain matin 13 000 litres seront ajoutés (plus que la consommation prevue pour cette nuit).La situation reste comme ça jusque demain 20h.


Vos gestions ainsi que tous les webservices interactifs ont étés réactivés.

5.Posté par Jerome, Gillian & Sebatien le 28/03/2006 00:10 | Alerter
Utilisez le formulaire ci-dessous pour envoyer une alerte au responsable du site concernant ce commentaire :
Annuler
Voila c'est fini pour ce soir sans coupure :)

Les back office sont de nouveau ouvert, vous pouvez y aller ;)


6.Posté par Sébastien le 28/03/2006 00:55 | Alerter
Utilisez le formulaire ci-dessous pour envoyer une alerte au responsable du site concernant ce commentaire :
Annuler
Message posté par Octave sur l'intervention sur redbus de ce soir :

Bonjour,
Les maintenances viennent se finir. Redbus a répare le disjoncteur
d'arrivée électrique basse tension EDF (une pièce cassée, pas plus
d'information) et a répare l'un des 3 onduleurs. Cet onduleur cassé
a été à l'origine de 2 coupures électriques hier lorsque Redbus a
voulu mettre en charge les onduleurs à partir des groupes électrogènes.

Actuellement tout continue à fonctionner sur les groupes électrogènes
et les onduleurs ont été rajoutés dans le circuit avec succès. Il n'y
a pas eu de coupure dans l'alimentation électrique du datacentre.

Les groupes électrogènes vont recharger les onduleurs cette nuit et
demain Redbus va passer l'arrivée électrique vers EDF (ce qui permettra
d'arrêter les groupes électrogènes). Étant donné que les onduleurs vont
recharger les batteries des onduleurs cette nuit, il ne devrait pas y avoir
de nouvelle coupure lors de ce passage.

On espère que les groupes électrogènes vont tenir jusqu'à demain et
que la situation redeviendra stable courant de la journée.

Dans tous les cas, une expertise externe est nécessaire pour faire
l'audit des installations électrique de Redbus avec des solutions à la
clé pour ne plus revivre des moments de stresse qu'on vient de vivre.

Amicalement
Octave

7.Posté par Paoli le 28/03/2006 12:28 | Alerter
Utilisez le formulaire ci-dessous pour envoyer une alerte au responsable du site concernant ce commentaire :
Annuler

8.Posté par Luc Marchand le 28/03/2006 17:23 | Alerter
Utilisez le formulaire ci-dessous pour envoyer une alerte au responsable du site concernant ce commentaire :
Annuler
Pas trop crevé ?? ;-)
Vivement que cela soit passé tout ces soucis.... cela ralentit le développement !!! ;-)...
Bon courage..