En omfattende forstyrrelse i Microsoft 365 startet kort etter klokken 12 torsdag 12. november, amerikansk østkysttid. Outlook, Teams, Copilot og andre tjenester var rammet inn i fredag. Da problemene var på sitt mest omfattende, hadde Downdetector registrert over 130 000 meldinger om Outlook-feil. Meldinger om problemer kom fra 74 land og territorier. Dette er brukerrapporter – ikke et bekreftet tall på hvor mange personer som ble rammet.
2
3
23
Microsoft sa at belastningen skyldtes servere som uventet ble utilgjengelige, ikke en trafikkøkning. Tidlig fredag meldte selskapet om bedre serverstabilitet etter at en oppdatering var tatt i bruk på deler av infrastrukturen. Oppdateringen bekreftet likevel ikke at alt var tilbake som normalt, og Microsoft oppga ingen tid for full gjenoppretting.
1
38
43
Slik utviklet forstyrrelsen seg
De første meldingene kom kort etter klokken 12 amerikansk østkysttid torsdag. Den første undersøkelsen gjaldt problemer med tilgang til Exchange Online-postbokser i Amerika. Etter hvert kom det rapporter om bredere problemer med Microsoft 365-apper og -tjenester.
2
15
Ifølge rapportering som viste til Downdetector, steg antallet meldinger om Outlook-problemer til over 130 000 rundt klokken 13.15. CNN meldte at rapporter fra 74 land og territorier hadde kommet inn i løpet av omtrent en time.
2
3
23 Downdetector teller innsendte meldinger om problemer, ikke alle berørte brukere.
3
Forstyrrelsen fortsatte inn i fredag og arbeidstiden i Asia og Stillehavsregionen. Outlook, Teams, Copilot og andre Microsoft-tjenester ble meldt rammet, men omfanget varierte mellom tjenester og steder.
5
19
26
Dette sier Microsoft om årsaken
Microsoft opplyste at flere servere uventet var blitt utilgjengelige. Dermed måtte resten av infrastrukturen håndtere mer av belastningen. Selskapet sa at belastningen ikke skyldtes økt trafikk.
1
Microsoft pekte senere på en overbelastet prosess på de berørte serverne, som håndterte sikre forbindelser. Når prosessen sviktet, kunne serverne slutte å behandle forespørsler.
7 En annen gjennomgang av oppdateringene om hendelsen beskrev også et forsøk på å rulle tilbake en nylig nettverksendring. Den tilgjengelige rapporteringen fastslår ikke at denne endringen var den endelige rotårsaken. Tidlig fredag var det fortsatt ikke meldt om en bekreftet endelig årsak.
36
43
Microsoft sa at selskapet ikke kjente til ondsinnet aktivitet som forårsaket hendelsen. Dette var selskapets vurdering på det tidspunktet, ikke en offentliggjort endelig rettsmedisinsk konklusjon.
5
Tegn til bedring – men ingen friskmelding
Gjenopprettingen førte ikke til at tjenestene straks fungerte normalt overalt. Tidligere tiltak skal ikke ha gitt forventet resultat, mens Microsoft fortsatte arbeidet med å få berørt infrastruktur tilbake i drift.
16
44
Tidlig fredag meldte Microsoft om positive resultater for serverstabiliteten etter å ha installert en oppdatering på en del av infrastrukturen. Oppdateringen gjaldt en komponent for autentisering og ruting oppstrøms i systemet. Microsoft sa at selskapet ville følge med på resultatene og forsøke å utvide oppdateringen. Det betydde ikke at alle berørte servere eller tjenester var gjenopprettet.
38
50
Microsofts status var fortsatt oppført som «service degradation» – redusert tjenestekvalitet – og selskapet hadde ikke oppgitt når full gjenoppretting kunne ventes, ifølge oppdateringene omtalt tidlig fredag.
8
43 Det som var bekreftet, var tegn til delvis bedring, ikke at forstyrrelsen var over.
Hvem og hva ble rammet?
Forstyrrelsen påvirket mer enn enkeltpersoners innbokser. Rapporteringen omtalte offentlige etater i Australia og Japan, e-postsystemer hos amerikanske bymyndigheter og Microsoft 365-koblinger brukt av OpenAI og Anthropic.
26
33
41
- Offentlige tjenester og skoler: Det britiske parlamentet opplyste at alternative kommunikasjonsløsninger var på plass. Skoler ba foreldre ringe i stedet for å sende e-post. Rapporteringen beskrev også forstyrrelser hos offentlige etater i Australia og Japan, men kildene fastslår ikke nøyaktig hvilke tjenester som var rammet i hvert land.
17
26
- Amerikanske byer: Miami Beach, Austin og Jacksonville meldte om problemer med innkommende eller utgående e-post. Innbyggere ble bedt om å ringe lokale kontorer ved behov.
33
- Koblinger til AI-tjenester: OpenAI og Anthropic meldte om problemer med sine Microsoft 365-koblinger. Det gjaldt integrasjonene med Microsoft; det betyr ikke at hele AI-tjenestene deres var utilgjengelige.
41
Når e-post og arbeidsverktøy ikke fungerer pålitelig, kan organisasjoner måtte bruke andre kontaktmåter. Løsningene som er dokumentert her, varierte: Skoler ba foreldre ringe, lokale myndigheter ba innbyggere kontakte kontorene på telefon, og det britiske parlamentet tok i bruk alternative kommunikasjonsløsninger.
17
33