40 000 servrar nere

Explosion hos ThePlanet/Ev1servers.
40 000 servrar nere, 2.8+ miljoner webbsidor nere.

On Saturday, May 31st at 4:55pm CDT in our H1 data center, electrical gear shorted, creating an explosion and fire that knocked down three walls surrounding our electrical equipment room. Thankfully, no one was injured. In addition, no customer servers were damaged or lost.

We have just been allowed into the building to physically inspect the damage. Early indications are that the short was in a high-volume wire conduit. We were not allowed to activate our backup generator plan based on instructions from the fire department.

As a result ServerCommand is currently not available and we are working to bring it back online as quickly as possible. In the meantime, please call support 866.325.0045 for any issues. Additional support technicians are on staff to help. Status updates will be made available via the phone system as well on our forums at http://forums.theplanet.com/index.php?showtopic=90185

We are sorry for the incident and sincerely apologize for the impact.

Jobbigt kör viss DNS genom dom och nu försvinner inläggen globalt.

Telia har inga A records för tv.nu etc :/

Trodde verkligen det var en av världens stabilaste DNS-infrastruktur dom hade.

Illa, nån som har koll på några andra svenska sidor än tv.nu som ligger där?

Vi köper bara DNS där, servrarna står i sthlm :/

Jag trodde inte dom hade ns1 & ns2 i samma datacenter.

Man brukar säga att ThePlanet (Ev1servers) är en av dom största leveratörerna i världen.

Saxat från WebmasterWorld.
Dom har aldrig tidigare varit nere så det är ju ändå godkänt, har testat endel andra leveratörer hrä i sverige som haft massor med nertid på sina dns'er.

Ojoj oj må jag säga.
Nått man märker att de kan vara bra att köra backuper till separat del.
Såväl om det är en explosion eller en raid hos prq så blir det samma problem.

Någon form av offsite backup, slangas över till annan platts.

Bra att dom hade redundans i kraftförsörjningen med diesel. (OBS, ironi)

Dom verkar inte ha byggt det med redundant el, eller inte beräknat med kraften om något skulle hända i ena elcentralen.

Att dom kör sina dns servrar i samma datacenter låter verkligen idiotiskt, inte ens jag kör dns på samma platser.

We were not allowed to activate our backup generator plan based on instructions from the fire department.

Jag använder endast nsmadeeasy för DNS. De har 100% SLA uptime med DNS-servrar på bl.a. dessa platser:
Har aldrig haft några problem med dem och deras gränssnitt för hantering av DNS-inlägg mha templates osv är överlägsen alla andra tjänster jag provat för administrering av många domäner.