OVHcloud Network Status

Current status
Legend
  • Operational
  • Degraded performance
  • Partial Outage
  • Major Outage
  • Under maintenance
p19-63-n5
Incident Report for Network & Infrastructure
Resolved
Ce nexus ne répond plus, tout le trafic de cette infra passe par p19-64-n5.
Nous investiguons.

Update(s):

Date: 2014-09-29 16:38:51 UTC
Les 6 fexs sont UP:

FEX FEX FEX FEX Fex
Number Description State Model Serial
------------------------------------------------------------------------
100 fex100|salle5-1|T06 Online N2K-C2148T-1GE FOX1343GPE6
101 fex101|salle5-1|T03 Online N2K-C2248TP-1GE SSI14200M3B
103 fex103|salle5-1|T06 Online N2K-C2148T-1GE FOX1343GPAT
104 fex104|salle5-1|T12 Online N2K-C2148T-1GE FOX1340GDT0
105 fex105|salle5-1|T12 Online N2K-C2148T-1GE FOX1344G3QQ
106 fex106|salle5-1|T18 Online N2K-C2148T-1GE FOX1343GP67


Date: 2014-09-29 16:37:02 UTC
Le switch a beaucoup reflechit puis finalement il a
accepter les FEX dans les 6 baies. Le service est en
train de remonter.

Date: 2014-09-29 16:18:27 UTC
p19-63-n5 a redemarré, il met à jour les 6 FEX
impactés. le service revient dans 2 à 5 minutes.

Date: 2014-09-29 16:16:23 UTC
Le 1er switch de spare est maintenant up, les modules FEX sur lesquels sont connectés les machines vont passer up sous quelques secondes.

Date: 2014-09-29 16:06:33 UTC
Un module de climation dans la salle 5.1 est tombé en
panne. Suite à cette panne, il a produit un peu d'eau
qui a gouté sur 2 baies. Le switch p19-63 et p19-64
sont hébergés dans 2 baies differentes mais sous ce
même module de la clim. D'où la panne malgré les
redonances mis en place. On remplace les switchs.
Il n'y a pas d'autre impacts.

Dans 2 semaines, on enleve ces 2 switchs pour reconnecter
l'ensemble de baies sur un nouveau systeme central en
40G. A 2 semaines près on n'aurait pas été impactés du
tout.

Date: 2014-09-29 15:58:07 UTC
Le reste de l'infra fonctionne sans probleme. Pour
les sites hébergés sur les filers impactés par la
panne, tout devrait revenir dans 5 à 10 minutes

Date: 2014-09-29 15:51:28 UTC
p19-63-n5 et p19-64-n5 sont toujours down suite
à un problème de climatisation de l'infra d'hébergement
mutualisé à Paris P19 (salle 5.1). Cette paire de
switch gere 6 baies avec les filers soit environ 30%
des filers.

Nos équipes sont en train de remplacer l'un des switchs
de cette paire par un spare avec une config minimale
afin de rétablir le service le plus tot possible.



Date: 2014-09-29 15:11:37 UTC
p19-64-n5 vient de tomber également.
Posted Sep 29, 2014 - 15:07 UTC
This incident affected: Infrastructure || SBG (SBG1, SBG3, SBG4).