Problem z jednym z przełączników w 4DC.
Około godziny 02:00 zaobserwowaliśmy problem z dostępnością jednego z przełączników, o godzinie 02:30 został zrestartowany.
Problemy z jednym z łącz KAT-WAW.
/0 Komentarze/w dziale Awaria! /dodał Webmaster EPIXW godzinach 12-14.00 obserwowaliśmy problemy z zanikami transmisji na łączu Sitel KAT-WAW.
Skutkowały one rekonfiguracjami tras BGP dla części prefixów, oraz zanikami transmisji L2 kilku z uczestników EPIX.
Przyczyną są prace modernizacyjne aktualnie prowadzone przez eFUZJA w Warszawie, gdzie terminujemy jedną z transmisji.
Problem Sitel i Netia – Kontynuacja.
/0 Komentarze/w dziale Awaria! /dodał Webmaster EPIXNetia poinformowała o awarii masowej w swojej sieci, która została usunięta.
Nasi uczestnicy obserwowali ją jako:
– nie działanie lub działanie ze stratami łącz L2 uczestników do EPIX, dotknęło to kilku z Was,
– degradację ruchu IP w ścieżkach realizowanych poprzez peering EPIX-NETIA, tutaj problemy dotykały wszystkich, do momentu zdiagnozowania i rozłączenia sesji EPIX-Netia,
Oczekujemy na wnioski Sitela.
Problem Sitel i Netia.
/0 Komentarze/w dziale Awaria! /dodał Webmaster EPIXObserwujemy problem z transmisjami klientów korzystających z transmisji Sitel i Netii, oraz usług IP Netii.
Problem poza naszym zasięgiem.
Problem z jednym z przełączników.
/0 Komentarze/w dziale Awaria! /dodał Webmaster EPIXObserwujemy problem z dostępnością jednego z przełączników, prawdopodobnie będziemy musieli dokonać jego restartu.
Problemy w szkielecie.
/0 Komentarze/w dziale Awaria! /dodał Webmaster EPIXW dniu dzisiejszym ok 10.20 zanotowaliśmy samoistne uszkodzenie wkładki optycznej obsługującej jeden linków 10G w multilinku.
Niestety uszkodzenie wystąpiło tylko na jednym z kierunków transmisji (link w jednym z kierunków pozostał aktywny).
Przełączniki z tego powodu nie usunęły z multilinka ww. transmisji, co powodowało straty ramek w naszym szkielecie, dotykając wiele usług.
Wkładki wymieniono.
P.S.
EPIX jest w trakcie dużych i ważnych dla jego rozwoju zmian.
Nie możemy obiecać, że w najbliższych tygodniach podczas kolejnych etapów prac nie nastąpią jeszcze jakieś problemy, to niestety najczęściej bywa od nas niezależne.
Ale z całą pewnością będziemy się starać aby było ich jak najmniej i w godzinach pozaszczytowych.
Zgłaszając ew problemy bardzo prosimy o ich precyzowanie i wstępne diagnozowanie (MTRY, pingi), to pomoże szybciej analizować zdarzenia.
Serdecznie przepraszamy!
Problemy w dniu dzisiejszym.
/0 Komentarze/w dziale Awaria! /dodał Webmaster EPIXW dniu dzisiejszym ok 13.00 nastąpiło zapętlenie w vlanie 4090 spowodowane błędem montera krosującego obwody.
Niestety port, który stanowił przyczynę, jako wewnętrzny-szkieletowy nie był zabezpieczony regułami chroniącymi przed takimi problemami.
Serdecznie przepraszamy.
UWAGA – Zmiana charakterystyki ruchu.
/0 Komentarze/w dziale Awaria! /dodał Webmaster EPIXZwracamy Waszą uwagę na nasilające się zjawisko ataków na adresy w Waszych sieciach nie noszące znamion agresywnego DDOS, ale będące takowym.
Jest to relatywnie niewielki (kilkadziesiąt do kilkuset Mbps) ruch na przeróżne porty (raczej wysokie).
Po naszej stronie obserwujemy to jako nienaturalnie wzmożony ruch do/od wielu z Was.
Niestety po naszej stronie bardzo trudno jest zlokalizować konkretne incydenty, gdyż są one bardzo niewielkie w ogólnej skali obsługiwanego ruchu.
Prosimy o przyjrzenie się Waszemu ruchowi i ew. przesyłanie nam informacji, które pomogą usystematyzować rodzaj i naturę tych ataków i ew. wdrożyć rozwiązanie zaradcze.
Aby ochronić nasze łącza i styki postanowiliśmy dodać do naszego blackhole adresy IP otrzymujące wyjątkowo dużo ruchu.
Problemy Sitel.
/0 Komentarze/w dziale Awaria! /dodał Webmaster EPIXObserwowaliśmy problemy na styku Sitel-EPIX.
Ruch pętlowy wywołał zamknięcie portów kilku klientów i kłopoty z ruchem Czechy-EPIX.
Eskalujemy przebudowę styku z SITEL.
Awaria łącza Sitel KAT-WAW – Zakończenie.
/0 Komentarze/w dziale Awaria! /dodał Webmaster EPIXTransmisja została przywrócona o godzinie 01:00