Version complète: sur le forum Webmaster Hub : Panne de courant sur Redbus
Webmaster Hub > Accueil > Annonces du Hub
Pages: 1, 2, 3, 4, 5
Dan
édité le 26 mars 2006 ...
Pannes de courant à répétition !
La galère continue chez Redbus ...

suite à cette page


Depuis 14H30, certains auront remarqué que le serveur du Hub est très lent.
Le serveur va bien, mais le réseau n'est pas "au top".

Il y a eu une panne électrique sur Redbus vers 14H30 impactant tout ou une grosse partie du réseau, suivie d'une remise en service vers 15H et d'une seconde panne vers 15H30.

Tous les serveurs OVH sont de ce fait difficiles d'accès, comme d'autres (par exemple Nexen).

Merci pour votre patience !

Dan
Dan
J'ai supprimé temporairement le code de SpyWords, car il semble que leurs serveurs ne sont plus disponibles à l'intant.

Dan
steph13
Ah bah voila, j'ai ma réponse aux lenteurs de mon serveur.... ouf !!!
Merci Dan !!
Info très précieuse....

Comment ferait on sans le HUB, hein.. ??!! biggrin.gif
Dan
Cela semble être revenu à la normale... espérons que l'électricité tienne le coup.
Fupap
oui ca ramait pas mal sur mon serveur aussi et indisponibilité totale également, mais depuis quelques minutes ca semble redevenu normal
Arlette
CITATION(Dan @ mardi 28 février 2006, 15h54)
Il y a eu une panne électrique sur Redbus
*

C'est quoi un Redbus ?(Histoire de m'instruire au passage) Un autobus anglais ? wacko.gif
steph13
Un raide bus.... ne serait pas un bus qui est en panne des fois ??? whistling.gif

Je vais prendre l'air moi hein.... ca fera pas de mal laugh.gif
Dan
RedBus est un opérateur de centre d'hébergement, chez qui de nombreux hébergeurs louent de l'espace.
Une sorte d'hébergeur pour hébergeurs smile.gif
dièse
CITATION(steph13 @ mardi 28 février 2006, 16h13)
Comment ferait on sans le HUB, hein.. ??!! biggrin.gif

Un traceroute par exemple, ça permet déjà de t'assurer que le problème ne vient pas de ton serveur wink.gif

Ce qui est bizarre, c'est que je n'ai pas noté de coupure totale vers OVH par contre on a eu 2 grosses coupures de 5-10 minutes pour les serveurs se trouvant chez Ikoula...
Dan
CITATION
Ce qui est bizarre, c'est que je n'ai pas noté de coupure totale vers OVH par contre on a eu 2 grosses coupures de 5-10 minutes pour les serveurs se trouvant chez Ikoula...

Il n'y a eu que de forts ralentissements sur certains serveurs OVH, pas sur toutes les baies.
Mais d'autres hébergeurs ont eu moins de chance smile.gif
Dan
Pour Info, cette coupure a touché pratiquement tous les serveurs chez Sivit, Amen, Xooit, Nexen...

OVH a aussi des serveurs chez RedBus mais il semble qu'aucun des 65 serveurs dont j'ai l'infogérance n'ait été indisponible. Tout au plus de forts ralentissements probablement dûs au peering FreeIX qui est tombé lui aussi.

Une visualisation de ce peering sur cette page: http://www.freeix.net/mrtg/
Le gris représente "trafic interrompu"...

Dan

PS: comme le trafic va se rétablir progressivement, voici une image des MRTG de FreeIX à 17H15 aujourd'hui.
Cliquez pour voir le fichier joint
tom_sawyer
Tout s'explique merci pour l'info ! Ne comprennant pas d'où venait le problème j'ai rebooté mon pc sans succès bien sur...
Dan
CITATION(tom_sawyer @ mardi 28 février 2006, 17h37)
Tout s'explique merci pour l'info ! Ne comprennant pas d'où venait le problème j'ai rebooté mon pc sans succès bien sur...
*

C'est bien le réflexe d'un utilisateur de PC: <CTRL>-<ALT>-<DEL> laugh.gif
Arlette
CITATION(tom_sawyer @ mardi 28 février 2006, 17h37)
Tout s'explique merci pour l'info ! Ne comprennant pas d'où venait le problème j'ai rebooté mon pc sans succès bien sur...
*
CITATION(Dan @ mardi 28 février 2006, 17h50)
C'est bien le réflexe d'un utilisateur de PC: <CTRL>-<ALT>-<DEL> laugh.gif
*

Euh ! Des utilisateurs Mac aussi laugh.gif J'ai failli le faire whistling.gif J'ai d'ailleurs commencé par titiller la prise réseau, j'ai quitté Safari, et en désespoir de cause je suis passé à autre chose.
Franck
CITATION
Classique ... meme au Credit Agricole ils avaient des merdes et la guichetière s'est empressé de me dire que c'est un probleme informatique ... pfff ...


Tu y va trop souvent Gilbert et tu fait planter les pc ... laugh.gif fait comme nos grand-mère sous le matelas .. IMSTP6.gif

Merci Dan pour l'info wink.gif
Perrine
J'ai reçu deux alertes (merci OzMonitor wink.gif ) pour 2 sites que j'héberge sur mon dédié à 15h34.

Le temps de faire 3 / 4 refresh de la page, de me demander ce qui pouvait bien se passer et tout était rentré dans l'ordre tongue.gif
Dan
C'est tout de même une heure après le début de la panne.
OzMonitor doit avoir son serveur chez Redbus... smile.gif
tom555
Ouais, je sens que l'équipe de technicien chargé de l'entretien des UPS et groupes éléctrogènes va aller faire acte de présence à l'ANPE biggrin.gif

CITATION
Hier, à 14h40 et à 15h20 le Data Center Redbus InterHouse a connu deux coupures électriques intégrales d’une quinzaine de minutes. Même si nous n’avons pas plus de détails à l’heure actuelle quant aux causes de ces incidents, une erreur humaine serait à l’origine.

Ces évènements sont sans précédent.

Ces pannes ont impactés la grande majorité de nos équipements dont, votre service. Malgré toutes les protections mises en œuvre, la violence des coupures a grillé certains matériels de serveurs (alimentations, disques, ...). Aucun équipement structurel d’****** n’a subis de dysfonctionnement. Le fait que les pannes étaient généralisées et, touchées donc des opérateurs, à engendrer quelques variations au niveau du transit. Tout est rentré dans l’ordre.

En réponse, toute notre équipe de jour est restée pendant la nuit afin de traiter les interventions les plus urgentes. Aujourd’hui, les deux shifts sont présents pour continuer à vous répondre et vous dépanner.



CITATION
Cher client,

A cette heure, Redbus Interhouse n'a toujours pas jugé bon de nous fournir une explication
relative aux coupures générales électriques survenues hier après-midi dans le Data Center
de Courbevoie.

L'intégralité du bâtiment s'est retrouvé subitement sans alimentation et ce, par deux fois
à quelques minutes d'intervalles. 100% des clients du site ont été impactés.
Aucun circuit de secours n'a apparemment fonctionné. L'alimentation électrique est redondées
à de multiples niveaux et les normes de fonctionnement et de sécurité auxquels répondent
les Data Centers sont extrêmement élevées.

La raison d'être d'un Data Center comme Redbus est de nous protéger, de vous protéger
contre ce type évènement.

Quoiqu'il en soit, différentes mesures sont d'ores et déjà à l'étude au sein d'****** afin
de garantir que de tels incidents ne se reproduisent pas à l'avenir.

J'espère revenir vers vous dès demain avec une explication concrète de la part de Redbus
et vous tiendrai informé de l'évolution des solutions internes à ******.
Anonymus
D'un autre coté, c'est toujours plus facile de crier au scandale quand l'erreur vient des autres biggrin.gif
Cariboo
Nexenservices m'a communiqué l'explication qui leur a été communiquée par Redbus.

Un test du système de secours de l'alimentation électrique aurait été programmé pour mardi après-midi.

Suite à une erreur humaine dans la procédure de basculement, le test s'est transformé en catastrophe industrielle.

J'ai quand même l'impression, compte tenu du caractère très parcellaire des infos communiqués, que les clients de redbus n'ont pas eu toute l'information souhaitable.
Dan
Voici l'info complète:
CITATION
Courbevoie, le 02 mars 2006
Coupures de fourniture électrique durant une opération de maintenance préventive planifiée

·  Le 28 février 2006 à 14h00 notre prestataire de maintenance a débuté une intervention de maintenance préventive planifiée sur une unité de contrôle en
ourant continu DC, alimentée par deux sources électriques différentes. Cette unité agit au niveau du tableau Basse Tension principal sur le système de basculement entre EDF et nos groupes électrogènes de secours.

·  Durant le remplacement préventif des batteries de la partie DC de cette unité de contrôle, une coupure électrique s’est produite à 14h20 et a engendré l’ouverture et l’inhibition des disjoncteurs principaux (y compris ceux alimentés par les transformateurs EDF). Cette coupure électrique est due au fait que le prestataire de maintenance a dans un premier temps coupé l’alimentation secteur de l’unité de contrôle et a en même temps isolé l’alimentation redondante de l’arrivée batteries.
En conséquence, il n’y avait plus d’alimentation pour contrôler le système de basculement des disjoncteurs sur le tableau Basse Tension principal. Les groupes électrogènes ont alors démarré normalement, les UPS sont passés en mode batteries normalement et la BMS (système de surveillance du site) a reporté les alarmes. Nos équipes sont intervenues immédiatement pour diagnostic et à 14h43 nous avons pu rétablir la fourniture électrique des Clients, alimentée par les groupes électrogènes.

.  Néanmoins, entre-temps les UPS sont arrivés à cours de capacité batteries et l’alimentation électrique des clients n’a plus été assurée à 14h32, ce qui a causé le première interruption électrique pour une durée de 11 minutes. Si le prestataire de maintenance n’avait pas coupé l’alimentation secteur de l’unité de contrôle avant de débuter le remplacement des batteries cet incident ne serait pas survenu.

·  Les 3 groupes électrogènes ont pris en charge l’alimentation des clients. Les systèmes de contrôle automatique des groupes électrogènes ont fonctionné normalement et ont automatiquement arrêté le 3ème groupe en le gardant disponible en secours.

·  Après 43 minutes (à 15h26) alors que la charge clients était assurée par deux groupes électrogènes, un des deux groupes a eu un problème et s’est arrêté.
Comme un seul groupe n’était pas suffisant pour tenir la charge, les systèmes de contrôle automatique des groupes électrogènes ont fonctionné normalement en appelant le troisième groupe de secours. En ce cas, la charge est basculée sur les batteries UPS le temps que le générateur se synchronise, mais à cause de la première coupure ces batteries étaient déchargées et n’ont pu assurer la charge.
Une deuxième coupure est alors survenue pour une durée de 2 minutes. Si la première panne n’avait pas totalement déchargé les batteries UPS, le troisième groupe électrogène aurait pu remplir sa fonction secours et il n’y aurait pas eu de seconde coupure.

·  A 15h28, la fourniture EDF sur le tableau Basse Tension principal a été rétablie et l’ensemble des systèmes a été remis en configuration normale.
elscode
Arf, Ils ont remis ça . . . depuis bientot 1 heure maintenant ! ! ! ! ! ! ! ! ! ! ! ! ! ! ! !
glibre
grr c'est pas cool!

en tout cas, merci pour l'info!
Dan
On voit bien sur les MRTG de freeIX que la branche de gauche est à 0% ...

http://www.freeix.net/mrtg/
bigben
Je confirme!!!
J'ai 3 sites sur un serveur ikoula et ben depuis 11h, c dead!!!
1 fois tous les mois ça craint!!!!

C'est sympa aussi une petite recherche "redbus", y a pas la moitié des réponses qui sont joignables.

PS: bien sûr, les numéros ikoula & redbus sont "momentanément indisponibles".
Dan
Idem pour Sivit, Nexen.... et d'autres encore.

Un petit coucou en passant à tous les visiteurs de WRI qui sont venus chasser l'info sur le Hub wink.gif
bigben
pour moi ça vient de repartir!!!
Dan
Ca semble effectivement être reparti, comme le montrent les MRTG:
http://www.freeix.net/mrtg/
glibre
mon herbergeur est effectivement de retour, mais pas mon serveur :\
Dan
S'il s'agissait d'une panne de courant comme la dernière fois, il faut redémarrer toutes les machines... donc cela prend du temps parce qu'il y a une série de "fsck" (filesystem check) à effectuer, vu la coupure brutale.

Dan
Cariboo
Le problème de ces pannes électriques, c'est qu'elles occasionnent des dégâts irréversibles...

Les serveurs ont horreur des "à coups", la dernière panne à fait quelques morts parmi les serveurs des hébergeurs concernés...

Je croise les doigts pour que nous ne soyions pas concernés cette fois-ci non plus...

(quand mon avatar réapparaîtra, mes sites seront à nouveau up wink.gif )
glibre
la redondance / plan de secours meme en electricite, c'est pas la fin du monde quand meme!

ca commence a me contrarier ce genre de chose :\
Cariboo
Si j'ai bien suivi, il n'y a pas de problèmes de redondance d'alimentation chez Redbus... Ils ont un problème de configuration de leur installation électrique, qui fait que dans certains circonstances, tout disjoncte...

Ce type de défaut est grave, et moi aussi ça me gave qu'un mois après, ce ne soit toujours pas résolu...

(tiens mon site perso est "up!", mais toujours pas les sites de ma boîte)
Dan
Je signale tout de même à ceux qui ont des serveurs impactés par cette panne qu'il ne faut pas forcer de redémarrage "hardware" (comme par exemple avec la coupure OUAGO chez OVH)

Les serveurs mettront du temps à revenir en ligne à cause du "fsck" au redémarrage, et une coupure d'alimentation peut interrompre celui-ci ...

Soyez patients, et si votre serveur ne revient pas de lui-même, c'est à votre hébergeur de régler ce problème, pas à vous !
dragondz
Moi mes sites sont chez Amen et j'ai peur que le serveur qui heberge mes bases de données soit out! d'ailleurs leur site principal est noté comme etant en maintenance!

Mes sites avec BDD en localhost sont OK , masi ceux utilisant un seveur de BDD externe sont HS IMSTP5.gif

Il faut faire du yoga pour être webmaster!
offset
Ca serais donc encore une coupure generalisee ?

En tout cas, mon serveur n'a pas reboot tout seul comme la derniere fois sad.gif

Je sais pas pour vous, mais moi RedBus byebye
leditvalentin
Je déteste l'inormatique quand sa marche pas!!!!!! grrrrr
AlexisJ
Bonjour
Je vous ai trouvé en tapant "redbus coupure edf" dans google.

Ca vient à l'instant d'etre coupé à nouveau

Juste aujourd'hui ou on fait une démo à notre client

J'ai le droit de tuer quelqu'un ? unsure.gif
Scali
J'ai l'impression qu'il y a encore eu une panne depuis quelques minutes, non ?
elixir
CITATION(Scali @ dimanche 26 mars 2006, 14h42)
J'ai l'impression qu'il y a encore eu une panne depuis quelques minutes, non ?
*


C'est exact ca a recoupé.
offset
CITATION(Alexis @ dimanche 26 mars 2006, 13h41)
J'ai le droit de tuer quelqu'un ?  unsure.gif
*


Je crois en faite que ca va etre une lapidation sur la place publique angry.gif
Scali
Ok, merci de confirmer parce que je vois que phpbb-fr.com est indisponible aisni que bon nombre d'autres sites importants.
Là, ça sent très mauvais pour Redbus.
glibre
:@

me faut vraiment faire un mirroir de mes sites... on peut meme plus faire
confiance aux "gros" dans le domaine.
Scali
C'est clair, là ils ont perdu toute crédibilité. Qui sont les autres gros dans ce domaine ? Y a-t-il vraiment une concurrence ?
offset
CITATION(Scali @ dimanche 26 mars 2006, 14h01)
C'est clair, là ils ont perdu toute crédibilité. Qui sont les autres gros dans ce domaine ? Y a-t-il vraiment une concurrence ?
*


Bien sur, il a plusieurs Datacenter sur Paris : TH2, Telecity, ...

Redbus est le seul ayant autant de problemes. Et dire qu'il y a pas si longtemps, c'etait bien ...
AlexisJ
Est-ce que vous auriez une liste d'hebergeurs dont les serveurs ne sont pas hébergés par Redbus ?
OVH ? 1and1 ?
Merci smile.gif

EDIT : On ne montre pas du doigt. Merci de rester respectueux des autres smile.gif
Portekoi
Bonjour,

Je suis moi même affecté par cette panne mais attention à ne pas montrer du doigt.

Les pannes sont aléatoires. Parfois on peut les prévoirs mais pas toujours.

Je suis sur que l'équipe de Redbus fait tout ce qu'elle peut pour résoudre ce problème.


Portekoi
zimounet
CITATION(Dan @ dimanche 26 mars 2006, 11h58)
Idem pour Sivit, Nexen.... et d'autres encore.

Un petit coucou en passant à tous les visiteurs de WRI qui sont venus chasser l'info sur le Hub wink.gif
*



Salut a tous, salut à toi dan, je suis un visiteurs de WRI, j'était un membre plutot tres actif de WRI... J'étais.

Sinon, c'est vrai que c'est bien la mizère ces plantages, on ne peux plus naviguer 5 minutes sur le net sans tomber sur un site HS...

Vive RedBus, merci Redbus, je saurais chez qui ne pas aller maintenant! happy.gif

Par contre, je viens de voir qu'il ont fusionné avec telecity... Alors bon jusqu'ici ils n'étaient pas polio du slipe chez telecity, donc il faut pas que ça vienne...

Me voila donc partit pour continuer ma vie forumidale-webmasterique ici...
elscode
Attendons des infos officielles émanant de chez RedBus avant de montrer du doigts . . . même si pour le coup je comprend que ca aggace du monde. Nous avons des serveurs de clients en infogérence là-bas ainsi que toute notre platerforme mutualisés . . . et dimanche ou pas, les clients expriment leur mécontentement. Pas forcement évident de leur faire réaliser que nous ne sommes pas directement en cause . . .
AlexisJ
CITATION(Portekoi @ dimanche 26 mars 2006, 14h05)
Bonjour,

Je suis moi même affecté par cette panne mais attention à ne pas montrer du doigt.


Euh.... désolé je n'ai pas compris huh.gif
Je voulais juste quels hebergeurs n'ont pas de serveurs chez redbus, c'est pas bien?
Ceci est une version "bas débit" de notre forum. Pour voir la version complète avec plus d'information, la mise en page et les images, veuillez cliquer ici.