Niedostępność węzła n18.lvlup.pro oraz s20.hostmc.pl - 26.07.2018


#1

Usługi dotknięte awarią są już w tym momencie sprawne

Usługi z uszkodzonego sprzętowo węzła n18 zostały przeniesione na inne (sprawne) węzły - n51, n60, n61.
Poniżej znajdziecie cały przebieg zdarzeń.

26.07.2018

07:30

Serwer przestaje odpowiadać.

07:57

Wykonanie restartu sprzętowego. Sytuacja nie ulega zmianie - serwer dalej nie odpowiada.

08:01

Otrzymujemy maila od OVH z informacją że przyczyną niedostępności jest awaria dysku twardego. @SystemZ próbuje zdiagnozować czy da się jeszcze przywrócić do życia n18 na tyle aby ewakuować usługi klientów.

08:46

Niestety n18 nie chce współpracować z obsługą - przygotowujemy się do przywrócenia usług klientów z dzisiejszej nocnej kopii zapasowej.

08:55

@Aylin zaczyna przywracać usługi klientów.

11:23

Przywrócono połowę usług klientów. 15 minut przerwy dla obsługi na przygotowanie się do dalszego przywracania.

11:45

Przywrócono 66% usług klientów.

12:05

Kolejny mail od OVH - oczekujemy na interwencję techników. W międzyczasie @Aylin tworzy wątek informacyjny na forum :slight_smile:

13:06

Przywrócono 80% usług klientów.

13:29

s20.hostmc.pl ulokowany na n18 jest w trakcie przywracania wraz z bieżącymi plikami, wygląda na to że się uda

14:40

Wszystkie VPSy klientów zostały przywrócone :slight_smile:
@SystemZ dalej pracuje nad przywróceniem s20.hostmc.pl co jest mocno utrudnione gdyż węzeł co chwilę traci łączność.

14:55

Węzeł n18.lvlup.pro przeszedł całkowitą transformację dzięki technikom OVH. Podczas ich interwencji zostały wymienione: płyta główna, RAM, chłodzenie. Węzeł dalej nie odpowiada, a w momentach gdy namyśli się i odpowiada to nie widać dysków :thinking:

16:12

Host s20.hostmc.pl jest już w pełni sprawny, dane są nienaruszone w takim stanie jak poprzednio serwery MC się wyłączyły.

Podsumowanie

Wszystkie VPSy klientów zostały przywrócone z nocnej kopii zapasowej. Niestety nie wszystkie usługi dało przywrócić się na ich oryginalny adres IP, tak więc część VPSów została przywrócona na nowe adresy IP.