Graves problemas en el datacenter H1 de The Planet 2°

En la tarde del sábado ha explotado un transformador con incendo incluido y han tenido que cortar totalmente el suministro eléctrico a unos 9,000 servidores y ha afectado a unos 7,5000 clientes, no ha habido daños personales afortunadamente.

El fuego no ha afectado a ninguno de los servidores de clientes, el poner en marcha todo es complicado y actualmente están haciendo una inspección de seguridad.

Calculan que todo estará Ok, para el domingo a la tarde, sin hora concreta.

A nosotros nos ha afectado sólo en uno de los DNS secundarios, pero sin efecto para los usuarios

Sería bueno que si algún integrante del foro tiene problemas con sus sitios lo publique por aquí para notificarlo a sus clientes.

P.D.: Por favor abstenerse de comentarios que no estén relacionados con la restauración de los servicios.

 

Ya se está empezando a poner la potencia en algunas zonas del datacenter, pero todavía faltan horas para que se pueda asegurar el fluido electrico.

Ya se ha reruteado los valores de los IP antiguos de los DNS y junto con los nuevos están empezando a responder, pero hay que tener en cuenta que hay muenvos valores para propagarse.

 

Para hoy, pero lo de la tarde parece que será bien tarde, pero hay que tener en cuenta lo que costará arrancar todos los servidores y cuantos pediran fsck

Normalmente no hay nadie por esa zona y menos en domingo, para entrar necesitas tener privilegios especiales.

 

Saludos

Parece que estaban listos para conectar los servidores con los generadores de emergencia pero el Dpto. de Bomberos no los dejó por precaución

 

Humm estaba leyendo el otro tema referente a este mismo asunto y veo mucho desconocimiento en el área de datacenters (ojo no es que sea un experto en la materia) pero los transformadores tienen que estar en el mismo edificio, esto aplica para cualquier edificación que necesite cantidades masivas de energía (metros, industrias, etc) esto es debido a que las lineas normales de la calle no tienen la tensión requerida, por esto estas edificaciones cuentan con líneas de alta tensión que llegan hasta el edificio y uno o varios transformadores deben transformarla a baja tensión

La única forma de evitar esto es que el datacenter este colocado al lado de alguna planta de distribución o generación eléctrica.

Los sitios preferidos para la colocación de transformadores son sótanos, techos o en planta baja.

Quizás el único error atribuible a ThePlanet fue haber dejado sus servidores dns primarios y secundarios en el mismo edificio, esto fue ingenuo de su parte, tomando en cuenta que poseen varios Datacenters.

En cuanto a servidores apilados, este es el negocio de los datacenters, poner una gran cantidad de servidores en el menor espacio posible, sino nadie hubiera inventado los servidores en rack o el que se asombra de ver servidores apilados nunca ha visto un rack de 50U full de servidores.

 

Por curiosidad, The Planet asegura el 100% de uptime por lo que he visto en su video, aunque es más valioso los datos de los servers que el propio uptime o los propios servers. The Planet, ¿Ha comentado algo acerca de las indemnizaciones?

¿Hay algún comunicado directo de The Planet que no sea en sus propios foros?


Respecto lo de apilar, comente yo hace unas horas algo al respecto, lo decia por el sentido de que si una sala tan grande la llenas de maquinas y esta proximo algo que remotamente, aunque sea 0,0001 puede explotar pues es mucho riesgo no?
No sería mejor hacer salas más pequeñas, y mayor número de salas? evidentemente saldría más caro, pero igual es más seguro?
y bueno, me gustaría saber si alguien puede aportar más datos acerca de donde tenian colocado el transformador y a que distancia de los servidores, que medidas tenian para distanciarse de este peligro (muros, distancia,...)
Sería interesante el dato y que un experto nos comentase más acerca de esto, seguramente haya normativa respecto al asunto en cuestión.

Creo que después de este lamentable accidente, tendremos mucho más en cuenta estos aspectos técnicos.

 

Probablemente no aplica en este caso... en su contrato (no lo he visto) probablemente tenga una clausula de fuerza mayor, ellos estaban listos para arrancar el servicio pero el Dpto. de Bomberos (la fuerza mayor) se los impidió.

Por otro lado es una compañía que cuida muy bien su imagen y les gusta ir siempre un paso adelante de la competencia, por lo que seguramente se cuidarán de compensar adecuadamente a sus clientes.

Ojalá por el bien de todos los afectados logren solventar este problema pronto.

 

Andaina, sigues insistiendo con las salas de los servidores, en ninguna de ellas ha pasado nada, lo he dicho desde el principio, a ningún servidor le ha pasado nada, todo el problemas es simplemente de falta de energía electríca por que los bomberos han pedido un análisis de las instalaciones antes de que puedan encender los grupos.

Últimas noticias:
ServerCommand está funcionando (pueden haber todavía problemas de propagación DNS) https://www.servercommand.net.

<corregido>The Planet ahora garantiza el 100% de operatividad de red con SLA para servidores normales (con contrato mensual). </corregido>.

Cuando garantiza SLA sólo lo hace hasta un máximo de 1 mes de abono, pero siempre cumple con demasía cuendo ellos originan el problema.

Pueden verlo en http://www.theplanet.com/about-us/legal_docs/Planet Service Level Agreement SLA.pdf

En cuanto a la garantia, como todos están totalmente cubiertos:

 

Recibido hace unos minutos,

Traducción: inglés » español

 

Se pueden seguir las noticias en directo, en inglés, desde http://service-update.theplanet.com/

 

Ya están empezando a funcionar los servidores.

 

El 90% de los servidores de la segunda planta ya está activo, el resto lo están activando manualmente.

 

Para los que utilicen los DNS de The Planet, es necesario que compruebe que las modificaciones/altas de las últimas 3 semanas están correcta.

Han recuperado una copia de seguridad de los datos bastante antigua.

 

Pa eso estamos ;-)

Ya ha finalizado la activación en la planta 2 y ya están trabajando en las pruebas de potencia en la planta 1.

Si alguien tiene problemas y su server está en la planta 2 debe de abrir un ticket.

 

La planta 1 ya tiene energía y están empezando a encender los servers por grupos.

 

Ya están activos tambien todos los server de la planta 1 el que tenga algún problema que abra un ticket.

 

Saludos,

Parece que continúan los problemas, de acuerdo a esta nota, un generador de backup ha fallado también