Blog Spaceship

Aktualizacja dotycząca awarii usług Spaceship

Aktualizacja dotycząca awarii usługi Spaceship

13 sierpnia doświadczyliśmy poważnej awarii usług, która wpłynęła na szereg usług Spaceship.

Przyczyną była awaria systemu chłodzenia w centrum danych RadiusDC: Phoenix, które obsługuje niektóre kluczowe operacje Spaceship. Zmusiło nas to do wyłączenia usług, aby chronić infrastrukturę klientów przed przegrzaniem i możliwymi uszkodzeniami.

Wszystko, na co wpłynął ten incydent, zostało już przywrócone, a nasze zespoły nadal uważnie monitorują systemy, aby upewnić się, że pozostają stabilne.

Jest nam niezmiernie przykro z powodu wpływu na klientów, którzy polegają na nas w zakresie swoich stron internetowych, poczty e-mail i innych usług online. Zakłócenie, które to spowodowało, oraz okoliczności, które za nim stoją, są traktowane z najwyższą powagą.

Co się wydarzyło

Incydent rozpoczął się, gdy systemy chłodzenia w centrum danych Phoenix uległy awarii z powodu silnej burzy, powodując wzrost temperatury wokół naszej infrastruktury do krytycznych poziomów.

Dalsze działanie systemów w takich warunkach groziło przegrzaniem sprzętu oraz długoterminowymi i katastrofalnymi uszkodzeniami. Wyłączenie usług spowodowało znaczne zakłócenia, ale było konieczne, aby chronić infrastrukturę naszych klientów.

Utrzymanie sprzętu w stanie wyłączenia do czasu ponownego uruchomienia systemów chłodzenia dało również czas na powrót temperatur do bezpiecznych poziomów przed rozpoczęciem przywracania działania. Pomogło to uniknąć tworzenia kolejnych problemów, które mogłyby jeszcze bardziej wydłużyć i tak już poważny incydent.

Jak wpłynęło to na klientów

Awaria wpłynęła na usługi, w tym Shared, VPS, przekazywanie poczty e-mail i Spacemail. Spaceship.com pozostawał online przez cały czas trwania incydentu.

Poniżej przedstawiamy zestawienie tego, jak sytuacja wpłynęła na kluczowe produkty i usługi:

Operacje hostingowe

Wpłynęło to na dostęp klientów do stron internetowych i usług hostingowych — wiele stron klientów było niedostępnych, działało wolno lub zwracało błędy. Niektóre operacje rozliczeniowe również były niedostępne po tym, jak system odpowiedzialny za ich przetwarzanie został wyłączony podczas incydentu.

EasyWP

Panel EasyWP i strony internetowe klientów zostały zakłócone. Podczas przywracania działania niektóre strony klientów pozostawały niedostępne po przywróceniu EasyWP.com i panelu, a część z nich zwracała błędy połączenia z bazą danych.

Spacemail

Usługi e-mail również zostały zakłócone. Klienci, których to dotyczyło, nie mogli wysyłać wiadomości e-mail, a przychodzące wiadomości e-mail nie mogły zostać dostarczone, gdy odpowiednie serwery były wyłączone.

Co ważne, nie oznaczało to, że przychodzące wiadomości były automatycznie tracone. Dostawcy poczty zwykle podejmują kolejne próby dostarczenia, gdy serwer odbierający jest tymczasowo niedostępny. Oznacza to, że wiadomości docierały, ale później niż zwykle.

Jak przywróciliśmy usługi

RadiusDC rozpoczęło przywracanie wydajności chłodzenia tak szybko, jak to było możliwe, a jednocześnie zainstalowano tymczasowe agregaty chłodnicze i skierowano je do naszej strefy centrum danych, aby pomóc obniżyć temperaturę.

Nasze zespoły pracowały nieprzerwanie na miejscu wspólnie z RadiusDC, aby przywrócić chłodzenie. Zaczęliśmy ponownie uruchamiać usługi dopiero wtedy, gdy temperatury wróciły do bezpiecznych poziomów operacyjnych i mieliśmy pewność, że nie ma ryzyka przegrzania ani długoterminowych uszkodzeń.

Po przywróceniu bezpiecznych warunków operacyjnych rozpoczęliśmy kontrolowane odzyskiwanie działania całej naszej infrastruktury. Musiało to odbywać się stopniowo, dlatego klienci widzieli powrót różnych usług w różnym czasie.

Dlaczego usługi były przywracane etapami

Skala incydentu oznaczała, że różne części naszej platformy zostały zakłócone w tym samym czasie. Chociaż klienci postrzegają je jako oddzielne usługi, incydent w centrum danych wpłynął na infrastrukturę wykorzystywaną do świadczenia wielu z nich.

Usługi takie jak hosting i e-mail opierają się na wielu warstwach technologii, w tym serwerach, sieciach, pamięci masowej i bazach danych. Ich przywrócenie wymagało ponownego uruchomienia tych różnych elementów we właściwej kolejności, zamiast po prostu włączenia wszystkiego naraz.

Co wydarzy się dalej

Traktujemy to zakłócenie i jego wpływ na naszych klientów bardzo poważnie. 

Nasze zespoły przeprowadzają dokładny przegląd sytuacji, aby wzmocnić nasze systemy i zapewnić, że podobne incydenty nie wydarzą się ponownie.

Będziemy całkowicie transparentni w kwestii tego, czego się dowiemy, i podzielimy się z Tobą wynikami oraz działaniami, które podejmujemy.

SPROSTOWANIE: Naszym operatorem centrum danych jest RadiusDC, a nie PhoenixNAP, jak wspomniano w kilku wczesnych postach na X z 13 sierpnia. PhoenixNAP nie jest zaangażowany w ten incydent.


Komentarze (17)

  • Zdjęcie profilowe użytkownika Luke Carter

    Luke Carter

    17 sie 2026

    I understand that outages happen, and I appreciate how quickly the team restored services. However, I recall seeing an “Add recovery email” prompt in the Spaceship hosting manager for quite some time, even after a recovery email had already been added.
    Wymagane jest więcej niż 10 znaków.
    Twoja tożsamość do publicznego wyświetlania.
    Podanie adresu e-mail jest opcjonalne. Nie będzie on udostępniany osobom trzecim.

    • Zdjęcie profilowe użytkownika Olga, Hosting Product Operations Specialist

      Olga, Hosting Product Operations Specialist

      18 sie 2026

      Appreciated, and thanks for reporting this. A recovery-email prompt that keeps appearing after you've already added one isn't expected, so we'd like to look into it directly. Please contact our Support team with your account details — they'll confirm the recovery email is saved correctly on our side and investigate why the prompt is still showing for you.

  • Zdjęcie profilowe użytkownika Yves Gaston G. PIERRE

    Yves Gaston G. PIERRE

    17 sie 2026

    Je trouve qu'au niveau commercial vous pourriez prévoir une compensation pour vos clients même si elle n'est que symbolique. parfois il y a des gestes tout simple démontre que vous désirez réellement poser un acte positif. il est plus que probable que tu ne liras pas mon texte, parce que je comprends c'est que derrière cette structure se trouve une personne à la base, c'est dommage. moi je vous ai choisi parce que j'ai plus de moyens et que je me bats au niveau de mon association d'étudiant .
    Wymagane jest więcej niż 10 znaków.
    Twoja tożsamość do publicznego wyświetlania.
    Podanie adresu e-mail jest opcjonalne. Nie będzie on udostępniany osobom trzecim.

  • Zdjęcie profilowe użytkownika Dennis Davison

    Dennis Davison

    16 sie 2026

    I am having issues with cPanel (xxx.xxx + all of my other sites) I cannot create or edit files. I am getting "our connection is not private Attackers might be trying to steal your information from serverxxx.xxxx.xxx.xxx (for example, passwords, messages, or credit cards). Learn more about this warning net::ERR_CERT_AUTHORITY_INVALID" 2x in 1 month. Really not feeling comfortable with service if server is unsafe.
    Wymagane jest więcej niż 10 znaków.
    Twoja tożsamość do publicznego wyświetlania.
    Podanie adresu e-mail jest opcjonalne. Nie będzie on udostępniany osobom trzecim.

    • Zdjęcie profilowe użytkownika Olga, Hosting Product Operations Specialist

      Olga, Hosting Product Operations Specialist

      18 sie 2026

      Sorry for the worry here. That error (ERR_CERT_AUTHORITY_INVALID) is a certificate-trust warning — the browser couldn't verify the certificate for that address — rather than proof the server is unsafe, and the connection stays encrypted. It can come from a few different things, including something we may need to fix on the server side, so we'd rather check it directly than guess. Please send our Support team your domain and a screenshot of the full warning (including the server address shown).

  • Zdjęcie profilowe użytkownika Andre

    Andre

    15 sie 2026

    Thank you! Your service is solid!
    Wymagane jest więcej niż 10 znaków.
    Twoja tożsamość do publicznego wyświetlania.
    Podanie adresu e-mail jest opcjonalne. Nie będzie on udostępniany osobom trzecim.

  • Zdjęcie profilowe użytkownika Prakhar

    Prakhar

    15 sie 2026

    Thanks for being honest about the incident. It actually makes me trust you more, not less.
    Wymagane jest więcej niż 10 znaków.
    Twoja tożsamość do publicznego wyświetlania.
    Podanie adresu e-mail jest opcjonalne. Nie będzie on udostępniany osobom trzecim.

  • Zdjęcie profilowe użytkownika Hope Adeniran

    Hope Adeniran

    15 sie 2026

    Okay. Glad we're back.
    Wymagane jest więcej niż 10 znaków.
    Twoja tożsamość do publicznego wyświetlania.
    Podanie adresu e-mail jest opcjonalne. Nie będzie on udostępniany osobom trzecim.

  • Zdjęcie profilowe użytkownika Serge D.

    Serge D.

    15 sie 2026

    As a famous proverb goes, apologies after damage are often ill-timed. This raises the question: what prevented the initial infrastructure design, considering the distribution of services across various geographically remote data centers?
    Wymagane jest więcej niż 10 znaków.
    Twoja tożsamość do publicznego wyświetlania.
    Podanie adresu e-mail jest opcjonalne. Nie będzie on udostępniany osobom trzecim.

  • Zdjęcie profilowe użytkownika Justin

    Justin

    15 sie 2026

    Spaceship advertises a monthly 99.99% uptime guarantee for hosting. By my count this was an approximately 12-hour incident, which translates to a maximum uptime of 98.4% for August. How do you intend to honor your guarantee?
    Wymagane jest więcej niż 10 znaków.
    Twoja tożsamość do publicznego wyświetlania.
    Podanie adresu e-mail jest opcjonalne. Nie będzie on udostępniany osobom trzecim.

    • Zdjęcie profilowe użytkownika Olga, Hosting Product Operations Specialist

      Olga, Hosting Product Operations Specialist

      18 sie 2026

      You're right that this took affected services below our 99.99% monthly guarantee, and we're sorry. The cause was a cooling system failure at our Phoenix data center during a major storm, which forced us to take services offline to protect customer infrastructure from overheating. This was a one-off event, not something we've experienced before. We're completing a full review and putting measures in place to make sure it doesn't happen again. If you were affected, please reach out to our Support

  • Zdjęcie profilowe użytkownika Arturo Rabino

    Arturo Rabino

    15 sie 2026

    I didn't noticed any outage, it's aug 15 today in asia and i received this after I woke up
    Wymagane jest więcej niż 10 znaków.
    Twoja tożsamość do publicznego wyświetlania.
    Podanie adresu e-mail jest opcjonalne. Nie będzie on udostępniany osobom trzecim.

  • Zdjęcie profilowe użytkownika Mike

    Mike

    14 sie 2026

    I appreciate the transparency, but this indicates that Spaceship is hosted solely in one data center. Are there plans to enhance redundancy?
    Wymagane jest więcej niż 10 znaków.
    Twoja tożsamość do publicznego wyświetlania.
    Podanie adresu e-mail jest opcjonalne. Nie będzie on udostępniany osobom trzecim.

  • Zdjęcie profilowe użytkownika Zek

    Zek

    14 sie 2026

    I can't image how stressful this has been for you guys... Good job everyone!
    Wymagane jest więcej niż 10 znaków.
    Twoja tożsamość do publicznego wyświetlania.
    Podanie adresu e-mail jest opcjonalne. Nie będzie on udostępniany osobom trzecim.

  • Zdjęcie profilowe użytkownika Ritchy

    Ritchy

    14 sie 2026

    Thanks for the update!
    Wymagane jest więcej niż 10 znaków.
    Twoja tożsamość do publicznego wyświetlania.
    Podanie adresu e-mail jest opcjonalne. Nie będzie on udostępniany osobom trzecim.

  • Zdjęcie profilowe użytkownika Seventh Ray

    Seventh Ray

    14 sie 2026

    Why was there no redundancy? If one data center fails, there should be a backup data center that kicks in. Should we be moving to a service provider who doesn't rely on a single data center?
    Wymagane jest więcej niż 10 znaków.
    Twoja tożsamość do publicznego wyświetlania.
    Podanie adresu e-mail jest opcjonalne. Nie będzie on udostępniany osobom trzecim.

    • Zdjęcie profilowe użytkownika Johnny

      Johnny

      21 sie 2026

      Why don’t they consider having a second MX record in another friendly DC for the SpaceMail service?I am suprised that both existing MX records are mazbe just 2 VMs in the same (v)LAN.

Podziel się swoimi przemyśleniami

Wymagane jest więcej niż 10 znaków.
Twoja tożsamość do publicznego wyświetlania.
Podanie adresu e-mail jest opcjonalne. Nie będzie on udostępniany osobom trzecim.

Pomóż nam ulepszyć nasz blog

Podziel się swoimi przemyśleniami w krótkiej, dwuminutowej ankiecie.

Wymagany jest prawidłowy adres e-mail