SystemZ | 2018-04-03 13:06:45 UTC | #1
Usługi są już dostępne.
Poniżej pełen przebieg zdarzeń.
Węzeł n71 przestaje odpowiadać
Węzeł n71 odpowiada ponownie. Obsługa OVH wymieniła wadliwą płytę główną.
Wszystkie alerty monitoringu się wyłączają, wygląda na to że wszystko jest ok.
Obsługa wraca do swoich świątecznych zajęć.
Obsługa po skończeniu świątecznych zajęć orientuje się że chyba jednak coś jest nie tak.
Po dwóch testowych rebootach i wstępnych ustaleniach wygląda na to że obsługa OVH przy wymianie płyty głównej nie włączyła obsługi wirtualizacji w BIOS, powodując brak możliwości rozruchu wirtualnych maszyn KVM mimo poprawnej konfiguracji systemu oraz nieuszkodzonego dysku. W przypadku tego typu serwerów dedykowanych obsługa lvlup nie ma możliwości przestawienia tej opcji w BIOS samodzielnie a obsługa OVH prawdopodobnie będzie potrzebować kilka godzin/dni na naprawę tego więc postanawiamy przenieść usługi na inne serwery dedykowane aby mieć gwarancję że klienci nie będą czekać na uruchomienie usług dłużej niż trzeba.
Rozpoczynamy proces ewakuacji węzła.
VPSy z n71 zostaną przeniesione na inne węzły.
Przewidywany czas pełnego powrotu usług dotkniętych awarią - 3h
Napotykamy na problem, system kopii zapasowych Proxmox wymaga wstępnego uruchomienia VM aby zrobić kopię VM, nie możemy skorzystać w takim razie z tej możliwości, używamy planu B.
15% postępu migracji, plan B działa
25%
50%
60%
70%
80%
90%
100% usług jest już dostępnych.
Do każdego VPS zostały dodane +24h ważności.
Dane klientów są już bezpieczne, została wysłana informacja do techników OVH aby sprawdzili ustawienie wirtualizacji.
Otrzymałem informację że BIOS zostanie sprawdzony
Węzeł n71 ma już włączoną opcję wirtualizacji, działa poprawnie
n71 wraca po testach do “czynnej służby”
Lempik | 2018-04-01 20:30:06 UTC | #2
I pewnie z tego powodu też aimpanel hostowany nie działa.
SystemZ | 2018-04-01 20:51:42 UTC | #3
Yep, niestety znów pech dopadł tego jednego VPSa :/
Lempik | 2018-04-01 20:53:40 UTC | #4
Dzięki. Ale aimpanel hostowany to przecież tylko testy, więc nic strasznego mi się nie dzieje.
Timo | 2018-04-01 20:54:11 UTC | #5
[quote=”SystemZ, post:1, topic:6154”]
używamy planu B
[/quote]
Skoro i tak czekamy, bo procenty lecą powoli, to można wiedzieć jaki to plan? :D
SystemZ | 2018-04-01 21:09:05 UTC | #6
Surowe przenoszenie plików VPSa czyli konfiguracji VM oraz dysku pomiędzy węzłami.
Aylin | 2018-04-02 00:44:10 UTC | #7
Święta zdecydowanie nie służą sylwetce, węzłom chyba też nie.
Lempik | 2018-04-02 04:30:15 UTC | #8
Aimpanel już działa, ale nie mam tam żadnych serwerów.
SystemZ | 2018-04-03 13:07:11 UTC | #9
Naprawione kilka godzin po Twojej wiadomości.
SystemZ | 2019-04-22 17:10:18 UTC | #10