26. november hadde vi et avbrudd ved serverne våre i Stockholm. Dette gjelder VPN02, VPN03 og VPN04.
Årsaken til avbruddet var at transformatoren i UPS i datasenteret brøt sammen. Datasenteret mistet 80% av strømmen, noe som førte til at flertallet av serverne i datasenteret ble stengt. Dette påvirket oss, og alle serverne våre ble stengt.
Siden det ikke var maskinvaren som var ødelagt, kunne vi ikke gjøre noe for å bringe serverne raskt opp igjen, i stedet var det Internett-leverandøren som måtte løse problemet. De jobbet raskt, og fikk strømmen tilbake til datasenteret innen en time.
Da strømmen kom tilbake startet VPN03 & VPN04 av seg selv og ble tilgjengelig for bruk. VPN02 var imidlertid fremdeles utilgjengelig.
Det ser ut til at VPN02 ble offer for en slags kjernefeil som fikk hele systemet til å henge - og startet de vanlige debiankjernene i stedet for de som brukte Tresor. Vi måtte derfor jobbe med å gjenopprette serveren, og sørge for at de riktige kjernene ble brukt. Den totale nedetiden for VPN02 var omtrent 6 timer.
Hele infrastrukturen vår er tilbake i normal drift, og vi beklager det som har skjedd dypt. Hvis det viser seg at vi ikke klarer å opprettholde garantien for oppetid på 99,5% i november, får alle brukere med et aktivt abonnement to minutter gratis for hvert minutt som overgår oppetid-garantien.
Årsaken til avbruddet var at transformatoren i UPS i datasenteret brøt sammen. Datasenteret mistet 80% av strømmen, noe som førte til at flertallet av serverne i datasenteret ble stengt. Dette påvirket oss, og alle serverne våre ble stengt.
Siden det ikke var maskinvaren som var ødelagt, kunne vi ikke gjøre noe for å bringe serverne raskt opp igjen, i stedet var det Internett-leverandøren som måtte løse problemet. De jobbet raskt, og fikk strømmen tilbake til datasenteret innen en time.
Da strømmen kom tilbake startet VPN03 & VPN04 av seg selv og ble tilgjengelig for bruk. VPN02 var imidlertid fremdeles utilgjengelig.
Det ser ut til at VPN02 ble offer for en slags kjernefeil som fikk hele systemet til å henge - og startet de vanlige debiankjernene i stedet for de som brukte Tresor. Vi måtte derfor jobbe med å gjenopprette serveren, og sørge for at de riktige kjernene ble brukt. Den totale nedetiden for VPN02 var omtrent 6 timer.
Hele infrastrukturen vår er tilbake i normal drift, og vi beklager det som har skjedd dypt. Hvis det viser seg at vi ikke klarer å opprettholde garantien for oppetid på 99,5% i november, får alle brukere med et aktivt abonnement to minutter gratis for hvert minutt som overgår oppetid-garantien.