W dniu dzisiejszym notujemy utrudnienia w funkcjonowaniu poczty przychodzącej. Nasi administratorzy pracują nad jak najszybszym rozwiązaniem problemu. Wszystkie wiadomości zostały prawidłowo umieszczone w kolejkach i zostaną do Państwa dostarczone.
Za utrudnienia serdecznie przepraszamy.
[Aktualizacja 10:07]
Wszelkie problemy zostały rozwiązane. Wiadomości zostały prawidłowo dostarczone do adresatów
Uprzejmie informujemy, że ok. godziny 7:00 pojawiły się pierwsze sygnały sugerujące problemy z komunikacją z serwerami i Państwa serwisami www. Analiza przeprowadzona przez naszych administratorów wykazuje problemy natury sieciowej na poziomie serwerowni, co zostało potwierdzone dodatkowymi kanałami.
Na obecnym etapie trwają prace mające na celu dalszą analizę na poziomie obsługi centrum danych.
Będziemy oczywiście informować gdy tylko pojawią się nowe informacje w tym ETA kiedy można spodziewać się przywrócenia pełnej komunikacji.
09:10 – otrzymaliśmy informację z data center, że sytuacja powinna wracać do normy co potwierdzają nasze testy. Państwa serwisy w tej chwili powinny zgłaszać się i działać prawidłowo.
09:40 – w dalszym ciągu monitorujemy sytuację, jednak w chwili obecnej wszystkie klastry zgłaszają się prawidłowo. Jeśli pojawi się oficjalny komunikat ze strony centrum danych gdzie wystąpiło źródło awarii, oczywiście również poinformujemy przytaczając jego treść.
Uprzejmie informujemy, że notowane są straty w ruchu pakietów dochodzących do klastrów serwerowych zenbox na poziomie operatora nadrzędnego, co może powodować komunikaty typu timeout, spowolnione ładowanie się serwisów www lub całkowity brak dostępu, zależnie od sieci z jakiej następuje komunikacja. Nasz dział administracji wykonał weryfikację klastrów serwerowych po naszej stronie z wynikiem pozytywnym i na obecnym etapie następuje komunikacja z operatorami sieci nadrzędnych celem dalszej weryfikacji i rozwiązania zaistniałej sytuacji.
Jednocześnie z uwagi na fakt iż problem występuje po stronie nadrzędnej sieci, nie możemy wskazać dokładnego czasu rozwiązania zaistniałej sytuacji związanej z komunikacją. Z naszej strony zapewniamy, że dołożymy wszelkich starań, aby pomóc w jej rozwiązaniu i dodatkowych diagnozach.
Aktualizacja 11:13
Problemy udało się rozwiązać o godzinie 11:13, od tego czasu nie zauważyliśmy jakichkolwiek problemów.
Źródło problemu zostało zlokalizowane i dodatkowo wprowadziliśmy usprawnienia po naszej stronie.
W dniu dzisiejszym notujemy kolejne problemy związane z dostępnością sieci naszego dostawcy e24cloud. W związku z tym mogą wystąpić problemy w funkcjonowaniu poczty. Sytuacja jest weryfikowana przez specjalistów e24cloud.
Za wszelkie problemy przepraszamy.
Aktualizacja 15:00
Awaria została usunięta, poczta funkcjonuje już poprawnie.
Czekamy na dalsze informacje
Aktualizacja 19:55: Awaria została naprawiona przez zespół sieciowców, wszystkie usługi działają poprawnie.
W poprzednim tygodniu przy okazji wpisu dotyczącego naszych urodzin, podsumowaliśmy tylko niektóre duże prace jakie dużo udało się zrealizować. Mimo całych tych wysiłków mających na celu znaczne zwiększenie wydajności, w ciągu ostatnich tygodni każdego dnia jesteśmy atakowani za pośrednictwem botnetu, co powodowało początkowo niedostępność stron WWW.
Ze względu na to, poczyniliśmy ostatnio duże zmiany oraz wdrożenia w obrębie infrastruktury, aby skutecznie odpierać podobne aktywności. Dzięki temu, udało się wyeliminować przyczynę niedostępności stron WWW oraz zautomatyzować proces wykrywania oraz blokowania ataków. Niestety, pomimo naszych wysiłków skutkiem ubocznym ataków jest znaczące spowolnienie stron WWW.
Przez cały okres tych wyzwań, pracowaliśmy równolegle nad wdrożeniem komercyjnego rozwiązania antyDDoS, które prawdopodobnie mogłoby wyeliminować problem definitywnie, niestety testy próbne wskazały niedostosowanie takich usługodawców w Polsce na przyjęcie firmy hostingowej. Obecne nasze działania skupiają się wokół uruchomienia nowych firewalli, niestety konieczne prace potrwają kolejne kilka dni.
Zdajemy sobie sprawę z faktu, że ostatni okres to spora liczba niedogodności z naszej strony, jednak bardzo szybki rozwój firmy spowodował, że niektóre (powszechnie wykorzystywane na świecie rozwiązania) pod wpływem efektu skali, miały problemy z wydajnością. Ostatnie miesiące dla nas, to okres wytężonej pracy, aby utrzymać jakość świadczonych usług.
PS. Po rozwiązaniu wyzwań z atakami, jesteśmy pewni, że nastąpi “stan zen”.
Pozdrawiam
Bartek Gadzimski
CEO Zenbox.pl
[Aktualizacja 12:16] Obecnie wszystkie ataki są przez nas filtrowane na bieżąco, mogą jednak pojawiać się drobne opóźnienia w ładowaniu stron.
Informujemy, że przerwy i opóźnienia w działaniu stron spowodowane są nasileniem się ataków na nasze serwery. W ciągu ostatniego tygodnia nasze serwery były cały czas atakowane, jednak udawało nam się je neutralizować. Dzisiaj nastąpiło zdecydowane wzmożenie ataków, współpracujemy z naszym partnerem Beyond.pl w celu jak najszybszego ich zniwelowania.
Z przykrością informujemy iż notujemy niedogodności z dostępnością naszych usług z niektórych łącz internetowych. W konsekwencji, mogą mieć Państwo problemy z korzystaniem z poczty oraz łączeniem się do stron WWW oraz na konta FTP.
Problemy notujemy od godziny 9:00. Na chwile obecną sytuacja jest weryfikowana przez naszych administratorów, pracują oni nad usunięciem występujących niedogodności.
Oczywiście poinformujemy Państwa o wszystkim gdy problemy zostaną rozwiązane.
Ekipa zenbox.pl przeprasza wszystkich Klientów za zaistniałe trudności.
W dniu dzisiejszym [12.10.2015] około godziny 14:37 odnotowaliśmy problemy związane z dostępem do serwera s13.
Obecnie trwają już prace administracyjne mające na celu jak najszybsze usunięcie usterki. Będziemy na bieżąco informować o postępie prac. Za powstałe niedogodności przepraszamy.
Z uwagi na wystąpienie w dniu dzisiejszym, tj. 24.09, problemów związanych z awarią chłodzenia nastąpiła przerwa w wykonywaniu kopii plików oraz baz danych w obrębie kont znajdujących się na serwerze s3.
Brak dostępności kopii spowodowany jest koniecznością sprawdzenia integralności wszystkich danych znajdujących się w kopiach. Przewidywany czas zakończenia zadań z tym związanych szacowany jest obecnie na około 4 dni.
W dniu dzisiejszym ok. godziny 12:40 odnotowaliśmy problemy związane z dostępnością serwera s3.
Obecnie trwają już prace administracyjne mające na celu jak najszybsze usunięcie usterki. Będziemy na bieżąco informować o postępie prac. Za powstałe niedogodności przepraszamy.
Aktualizacja:
O godzinie 14:58 nasi administratorzy przywrócili pełną stabilność serwera s3. Powodem usterki była awaria chłodzenia klastra, co w efekcie spowodowało jego wyłączenie z powodów bezpieczeństwa. Awaria chłodzenia została usunięta i obecnie serwer s3 działa prawidłowo.
W dniu dzisiejszym około godziny 11:15 odnotowaliśmy problemy z dostępem do zewnętrznego oprogramowania odpowiedzialnego za system zgłoszeń.
Niestety z uwagi na brak pełnego dostępu, wystąpić mogą opóźnienia w udzielaniu odpowiedzi oraz czas realizacji wszelakich zgłoszeń. Informacja odnośnie występowania problemu została już zgłoszona do firmy zewnętrznej i obecnie oczekujemy na rozwiązanie problemu.
Przepraszamy za niedogodności.