Oderland Status

Senast uppdaterad 2025-04-04 07:33 CEST

Incidentrapport

Intermittenta problem med nätverket

Den här incidenten påverkade: Nätverk

Postmortem

28 Feb 2025 16:04 CET

Vad hände?

Den 28 februari 2025 kl. 09:34 gick en av våra redundanta nätverksförbindelser mellan två datacenter ned. Förbindelsen låg nere i cirka 25 minuter. Felet åtgärdades av nätägaren och var löst kl. 10:22.

Failovern fungerade som den skulle, och trafiken flyttades över till den andra nätförbindelsen. Dock uppstod problem för ett begränsat antal servrar som inte kunde nås från vissa nätverk, medan andra anslutningar fungerade normalt.

Varför hände det?

Orsaken till störningen var problem hos nätägaren, vilket ledde till att en av våra redundanta förbindelser mellan två datacenter gick ned. Detta orsakade inkonsekvenser i nätverksinformationen, vilket i kombination med ett fel i hypervisorns hantering av nätverksförfrågningar ledde till att vissa servrar i omgångar blev tillfälligt otillgängliga från specifika nätverk.

Vad gör vi för att det inte ska hända igen?

  • Vi har analyserat varför tidigare åtgärder från den 15 februari inte var tillräckliga och identifierat att ändringarna inte justerade inställningarna som förväntat.
  • En uppdaterad konfiguration har verifierats i labbmiljö som säkerställer att inställningarna justeras korrekt.
  • Implementering av de nya inställningarna sker i början av nästa vecka, efter en extra kontroll, för att undvika förändringar en fredag eftermiddag.
  • Vi fortsätter dialogen med nätägaren för att förbättra hanteringen av liknande problem.

Vi beklagar de problem detta inneburit och arbetar löpande för att minimera både störningar och deras påverkan.

Historik

Åtgärdad

Inga nya problem har noterats och vi stänger incidenten. Vi återkommer inom kort med en post mortem-rapport.

Övervakar

Problemet ska vara löst men vi övervakar situationen.

Identifierad

Problemet är identifierat, mitigerat och vi jobbar med att lösa det permanent.

Undersöker

Vi upplever just nu intermittenta problem med nätverket. Felsökning pågår.