Awaria EPIX – Sitel
Informujemy, iż obserwujemy awarię łącza Sitel KAT-WAW od około godziny 01:15
Na chwilę obecną nie dysponujemy żadnymi informacjami dotyczącymi rodzaju/lokalizacji usterki oraz przybliżonego terminu przywrócenia transmisji.
Wczorajsza przerwa CZ-Global – Zakończenie.
/0 Komentarze/w dziale Awaria! /dodał Webmaster EPIXW dniu dzisiejszym wczorajszym w godzinach popołudniowych występowały problemy z dostępnością usługi CZ-Global. Ustaloną przyczyną był proces SNMP na routerze w Ostrawie. Zainstalowano uaktualnioną wersję modułu, był jednak wymagany restart maszyny.
Serdecznie przepraszamy!
Awaria EPIX – Atman – Zakończenie.
/0 Komentarze/w dziale Awaria! /dodał Webmaster EPIXInformujemy, że naprawa kabla światłowodowego została całkowicie ukończona.
Wszystkie Państwa usługi powinny pracować poprawnie.
Za zaistniałe niedogodności przepraszamy
=====================================
Dotyczy następujących usług / Affects following services:
nazwa: “Epoludnie.3”, opis: “tr.: 10 GbE Katowice/Altus-Warszawa/LIM13.14”
=====================================
Awaria Atman – kontynuacja.
/0 Komentarze/w dziale Awaria! /dodał Webmaster EPIXOtrzymaliśmy taki komunikat:
“Szanowni Państwo,
Ekipa serwisowa znalazła miejsce uszkodzenia/dewastacji światłowodu.
Dewastacja na odcinku 150m.
ETR wynosi 6 godzin.
Za zaistniałe niedogodności przepraszamy
=====================================
Dotyczy następujących usług / Affects following services:
nazwa: “Epoludnie.3”, opis: “tr.: 10 GbE Katowice/Altus-Warszawa/LIM13.14″
=====================================”
Awaria EPIX – Atman.
/0 Komentarze/w dziale Awaria! /dodał Webmaster EPIXSzanowni Państwo,
Od godziny 5:22 obserwujemy problem na linku DWDM między Katowicami a Gliwicami. Ekipa serwisowa jest w drodze na węzeł w celu przemierzenia swiatłowodu i okreslenia dokladnego miejsca awarii. ETR na tą chwile jest nieznany.
Za zaistniałe niedogodności przepraszamy
=====================================
Dotyczy następujących usług / Affects following services:
nazwa: “Epoludnie.3”, opis: “tr.: 10 GbE Katowice/Altus-Warszawa/LIM13.14”
=====================================
Awaria EPIX – Atman.
/0 Komentarze/w dziale Awaria! /dodał Webmaster EPIXInformujemy, iż od godziny 05:18 obserwujemy awarię łącza Atman KAT-WAW
Z wstępnych informacji jakie otrzymaliśmy od NOC Atman wynika że są to problemy
z światłowodem na trasie Gliwice — Katowice
Na chwilę obecną nie mamy informacji o terminie usunięcia awarii.
Awaria EPIX – Atman – Zakończenie.
/0 Komentarze/w dziale Awaria! /dodał Webmaster EPIXW dniu dzisiejszym w po godzinie 15.20 rozpoczął się trwający kilkanaście minut problem w sieci szkieletowej EPIX, który można było zaobserwować jako zakłócenia w dostępie do wszystkich usług.
Był on spowodowany dość nietypową w skutkach pętlą L2, wyjaśniamy przyczyny tak dużego wpływu na cały EPIX:
1. Sprawca, czyli uruchamiany dzisiaj usługowo port dla klienta był sztuką z recyklingu, skonfigurowanym uprzednio tylko dla usługi IPTV SGT, w związku z tym nie miał skonfigurowanych standardowo restrykcyjnych zasad ochrony przed działaniami abusywnymi, przegapienie tego to pierwsza przyczyna, która nie musiała jeszcze doprowadzić do awarii…
2. Czujność inżynierów została uśpiona przez fakt, iż przełącznik ten jest przeznaczony do wymiany na bardziej zaawansowany w najbliższych dniach, więc podchodzą do niego z luzem, bo będzie budowana nowa konfiguracja od zera, ale….
3. Nasi inżynierowie do dzisiaj absolutnie nie zakładali, iż nowy klient EPIX może posiadać czynne połączenie z vlanem peeringowym naszego IX zrealizowanego portem innego kolegi (notabene jest prawdopodobne że nieświadomie – vlan leak), dlatego usuwanie problemu nie trwało kilkudziesięciu sekund tylko kilkanaście minut, bo nie wiązaliśmy jednoznacznie uruchomienia vlanu na porcie (okolice 14.00) z awarią po podniesieniu się L3 u klienta (15.20).
Niestety nie wiemy jednego, dlaczego pętla rozpropagowała się w naszym teoretycznie (praktycznie zresztą też, bo taka sytuacja ostatni raz wystąpiła ponad rok temu) dobrze zabezpieczonym szkielecie, i co najdziwniejsze daleko do sieci naszych klientów i dostawców, w tym dużych, dysponujących zaawansowanym sprzętem (Atman, Netia, Polsl, Sitel), który również nie zabezpieczył ich przed skutkami tej usterki. Być może pozyskamy ich logi, które pomogą rozpoznać naturę problemu i ustrzec się przed nim w przyszłości nie tylko procedurami, ale też mechanizmami zabezpieczającymi przed ew. błędem człowieka.
Serdecznie przepraszamy!
Awaria EPIX – Atman.
/0 Komentarze/w dziale Awaria! /dodał Webmaster EPIXObserwujemy problemy ze stykami i łączami realizowanymi na węźle Altus.
Diagnozowanie przyczyn trwa.
Awaria EPIX – Sitel [Zakończenie]
/0 Komentarze/w dziale Awaria! /dodał Webmaster EPIXAwaria została usunięta, transmisja na łączu została przywrócona o godzinie 02:00.
Awaria EPIX – Sitel
/0 Komentarze/w dziale Awaria! /dodał Webmaster EPIXInformujemy, iż obserwujemy awarię łącza Sitel KAT-WAW od około godziny 00:15
Powodem jest uszkodzony kabel pod Sochaczewem.
Usuwanie awarii potrwa do około godziny 04:00