Problem z jednym z przełączników.

Obserwujemy problem z dostępnością jednego z przełączników, prawdopodobnie będziemy musieli dokonać jego restartu.

Problemy w szkielecie.

W dniu dzisiejszym ok 10.20 zanotowaliśmy samoistne uszkodzenie wkładki optycznej obsługującej jeden linków 10G w multilinku.
Niestety uszkodzenie wystąpiło tylko na jednym z kierunków transmisji (link w jednym z kierunków pozostał aktywny).
Przełączniki z tego powodu nie usunęły z multilinka ww. transmisji, co powodowało straty ramek w naszym szkielecie, dotykając wiele usług.
Wkładki wymieniono.

P.S.

EPIX jest w trakcie dużych i ważnych dla jego rozwoju zmian.
Nie możemy obiecać, że w najbliższych tygodniach podczas kolejnych etapów prac nie nastąpią jeszcze jakieś problemy, to niestety najczęściej bywa od nas niezależne.
Ale z całą pewnością będziemy się starać aby było ich jak najmniej i w godzinach pozaszczytowych.
Zgłaszając ew problemy bardzo prosimy o ich precyzowanie i wstępne diagnozowanie (MTRY, pingi), to pomoże szybciej analizować zdarzenia.

Serdecznie przepraszamy!

 

Problemy w dniu dzisiejszym.

W dniu dzisiejszym ok 13.00 nastąpiło zapętlenie w vlanie 4090 spowodowane błędem montera krosującego obwody.
Niestety port, który stanowił przyczynę, jako wewnętrzny-szkieletowy nie był zabezpieczony regułami chroniącymi przed takimi problemami.
Serdecznie przepraszamy.

UWAGA – Zmiana charakterystyki ruchu.

Zwracamy Waszą uwagę na nasilające się zjawisko ataków na adresy w Waszych sieciach nie noszące znamion agresywnego DDOS, ale będące takowym.
Jest to relatywnie niewielki (kilkadziesiąt do kilkuset Mbps) ruch na przeróżne porty (raczej wysokie).
Po naszej stronie obserwujemy to jako nienaturalnie wzmożony ruch do/od wielu z Was.
Niestety po naszej stronie bardzo trudno jest zlokalizować konkretne incydenty, gdyż są one bardzo niewielkie w ogólnej skali obsługiwanego ruchu.
Prosimy o przyjrzenie się Waszemu ruchowi i ew. przesyłanie nam informacji, które pomogą usystematyzować rodzaj i naturę tych ataków i ew. wdrożyć rozwiązanie zaradcze.

Aby ochronić nasze łącza i styki postanowiliśmy dodać do naszego blackhole adresy IP otrzymujące wyjątkowo dużo ruchu.

 

Problemy Sitel.

Obserwowaliśmy problemy na styku Sitel-EPIX.
Ruch pętlowy wywołał zamknięcie portów kilku klientów i kłopoty z ruchem Czechy-EPIX.
Eskalujemy przebudowę styku z SITEL.

Awaria łącza Sitel KAT-WAW – Zakończenie.

Transmisja została przywrócona o godzinie 01:00

Awaria łącza Sitel KAT-WAW – kontynuacja.

Otrzymaliśmy informację od Sitel’a:

Uszkodzony światłowód, konieczność wspawania wstawki, przewidywany czas usunięcia usterki do godziny 02:00

Awaria łącza Sitel KAT-WAW.

Obserwujemy brak łącza Sitela KAT-WAW.
Brak dodatkowych informacji.

Awaria łącza Sitel KAT-WAW – Zakończenie.

Transmisja została przywrócona o godzinie 10:25.

Informacja od dostawcy: “Wymieniony uszkodzony patchcord w systemie DWDM”

Awaria łącza Sitel KAT-WAW.

Obserwujemy brak łącza Sitela KAT-WAW.

Przewidywany czas usunięcia usterki: 60 minut.