Microsoft 365 are de joi seară o pană mare, la nivel mondial. Outlook nu mai deschide căsuțele de e-mail pentru o mare parte dintre utilizatori, iar problemele au ajuns și la Teams, SharePoint, Copilot și la mai multe servicii de securitate pentru firme. Vineri dimineață, la peste 15 ore de la primele erori, Microsoft încă nu anunțase repararea completă și nici o oră până la care ar urma să fie gata.
Cauza, după explicațiile Microsoft: mai multe servere au căzut pe neașteptate, iar cele rămase nu au mai făcut față încărcării. Compania spune că nu are niciun semn că ar fi vorba de un atac informatic.
Cum a început
Potrivit panoului de stare Microsoft, citat de Computerworld, incidentul a început joi, 12 noiembrie, la 16:17 UTC, adică 18:17, ora României, cu o defecțiune în Exchange Online, serviciul care găzduiește căsuțele de e-mail ale firmelor. Microsoft a deschis incidentul cu codul EX1550543, pe care administratorii IT îl pot urmări în centrul de administrare Microsoft 365.
La început, compania spunea că sunt afectați utilizatorii din America de Nord și de Sud. A revenit repede: „Am confirmat că problema poate afecta conectarea la serviciile Microsoft 365 pentru utilizatorii din orice regiune”. Pe Downdetector, raportările pentru Outlook au trecut de 130.000 în jurul orei 20:15, ora României, iar cele pentru Microsoft 365 de 48.000.
Ce s-a stricat, mai exact
Microsoft a crezut întâi că serverele sunt sufocate de prea mult trafic. Apoi a precizat că încărcarea nu vine dintr-o creștere a traficului, ci din faptul că „un număr de servere au devenit indisponibile pe neașteptate”, ceea ce a pus presiune pe restul infrastructurii. Joi noaptea, compania a găsit și mecanismul: pe serverele afectate, procesul care stabilește conexiunile securizate ajunge să fie copleșit, iar serverul nu mai procesează cererile.
Inginerii au încercat pe rând mai multe soluții:
- au oprit lansarea de actualizări noi și au mutat traficul de pe infrastructura afectată;
- au anulat o modificare recentă de rețea, care a coincis cu începutul problemelor;
- au repornit serverele și au testat o schimbare de configurare pe un grup mic de servere, înainte s-o aplice peste tot;
- au limitat traficul și au reintrodus treptat conexiunile, ca să nu suprasolicite din nou serverele.
Problema a fost că reparațiile nu țineau. Serverele readuse în funcțiune mergeau o vreme, apoi, potrivit Microsoft, „pot deveni din nou nefuncționale după ce primesc trafic”. Joi seara, compania vedea o „recuperare parțială” în regiunile unde aplicase modificările, dar spunea că aceasta nu e de durată. Peste noapte, a recunoscut că ultimele măsuri nu au funcționat așa cum se aștepta.
Unde s-a ajuns vineri dimineață
CNBC scria vineri, în jurul orei 9:30, ora României, că utilizatorii încă nu se pot conecta la mai multe servicii, inclusiv la Outlook pe web și pe calculator, și că pana a ținut și în dimineața de lucru din Europa. Cea mai recentă actualizare pe care am găsit-o, de la ABC Australia, în jurul orei 10:20, ora României, spune că Microsoft vede „rezultate pozitive pentru stabilitatea serverelor”, după un „succes marginal” în orele anterioare, dar că lucrează în continuare la o rezolvare completă.
| Serviciu | Ce nu merge sau poate să nu meargă |
|---|---|
| Outlook / Exchange Online | acces la căsuța de e-mail pe web, pe calculator și pe telefon |
| Teams | mesajele și ședințele online merg în mare parte; calendarul și programarea ședințelor pot da erori |
| SharePoint Online | accesul direct la fișiere funcționează |
| Copilot | chatul poate să nu se încarce; nu ajunge la e-mailuri, calendar și fișiere |
| Defender for Office 365 | Safe Links poate să nu verifice linkurile pe care dai clic în Outlook și Teams |
| Intune, Purview, Planner, To Do | unele funcții, de exemplu înrolarea dispozitivelor și regulile de protecție a datelor |
Cine a fost afectat
Pana a lovit firme, școli și instituții de pe mai multe continente:
- Australia: printre afectați sunt serviciul de informații și poliția federală, câteva școli la distanță și-au suspendat cursurile pentru o zi, iar unii pacienți au rămas fără consultații online. Guvernul a activat acordul de securitate cibernetică pe care îl are cu Microsoft, ca serviciile australiene să fie printre primele repuse în funcțiune.
- Japonia: guvernul a confirmat că i-a fost afectată infrastructura IT.
- Statele Unite: Camera Reprezentanților a raportat probleme, iar New York-ul a avertizat că e-mailurile către instituțiile orașului pot întârzia și le-a cerut locuitorilor să sune la 311. În Los Angeles, biroul șerifului și serviciul medico-legal au avut probleme de comunicare.
- Companii: Air India a redirecționat e-mailurile, grupul elvețian Richemont și-a publicat rezultatele financiare cu o mică întârziere, iar producătorul american de vehicule electrice Workhorse și-a amânat rezultatele pentru luni, 16 noiembrie.
- Asistenții AI: OpenAI și Anthropic au raportat probleme la conectorii care leagă ChatGPT, respectiv Claude, de conturile Microsoft 365.
Amazon Web Services a precizat că serviciile proprii funcționează normal, după ce câteva relatări din presă au legat pana și de alte servicii cloud.
Actualizare, 14 noiembrie: e-mailul și-a revenit în mare parte, Microsoft își cere scuze și explică de unde a pornit pana
Vineri seară, serviciile Microsoft 365 își reveniseră în mare parte, dar incidentul nu e încă închis oficial. Microsoft spune că urmărește în continuare, „pentru o perioadă extinsă”, livrarea e-mailurilor rămase în așteptare în timpul penei și că abia după aceea va considera problema rezolvată.
- Cozile de e-mailuri: la 19:06, ora României, Microsoft scria că cozile de mesaje s-au redus semnificativ și se apropie de nivelul normal. Utilizatorii au raportat că mesajele întârziate au început să sosească.
- Mesajele întârziate sunt păstrate: vineri, de la ora 15:05, Microsoft a prelungit la 48 de ore intervalul în care serverele încearcă să livreze un e-mail întârziat, ca mesajele blocate în cozi să nu se piardă.
- Scuzele: Charles Lamanna, vicepreședinte executiv Microsoft, a spus că regretă impactul penei asupra celor care depind de companie și că echipele analizează ce s-a întâmplat și cum pot fi evitate probleme asemănătoare.
- De unde a pornit: potrivit ABC7, Microsoft descrie pana drept o problemă tehnică, fără legătură cu un atac informatic sau cu agenții AI. Problema ar fi apărut în timpul unei extinderi anterioare a capacității rețelei și a ieșit la suprafață după o modificare recentă de rețea.
- Raportul final: Microsoft a promis un raport complet despre incident după încheierea analizei. Despre despăgubiri nu s-a anunțat nimic.
Actualizare, 13 noiembrie, după-amiază: serviciile își revin treptat, mai întâi în Europa
Vineri, la începutul după-amiezii, Microsoft a anunțat primele semne clare de revenire. La 14:09, ora României, compania spunea că vede „progrese încurajatoare de recuperare”, cu disponibilitatea serviciului și livrarea e-mailurilor în creștere. Într-o actualizare citată de NBC News, de la 14:26, ora României, Microsoft vorbea de progrese încurajatoare în Europa. Situația se îmbunătățea și în America de Nord, dar unii utilizatori pot avea în continuare probleme intermitente.
- Nu e încă rezolvată complet. Microsoft nu a anunțat repunerea tuturor serviciilor și nici o oră până la care ar urma să se întâmple asta.
- Cauza, deocamdată: compania vorbește de un „proces de bază de pe serverele afectate” care ajunge copleșit și face serverele să-și piardă capacitatea. Un raport final despre cauză nu a fost publicat.
- Azure nu a fost afectat, potrivit NBC News. Problemele țin de serviciile Microsoft 365, nu de platforma cloud pe care rulează site-urile și aplicațiile firmelor.
- Despăgubiri: nu s-a anunțat nimic. Microsoft a transmis doar, printr-un purtător de cuvânt citat de Bloomberg, că „apreciază răbdarea clienților” cât timp lucrează la repunerea serviciilor.
La 16:17, ora României, Microsoft spunea că cozile de e-mailuri care așteaptă să fie livrate se apropie de „niveluri normale”, iar disponibilitatea serviciului continuă să crească. Compania își concentrează acum eforturile pe livrarea mesajelor rămase în așteptare, așa că e-mailurile trimise în timpul penei pot ajunge cu întârziere. Charles Lamanna, vicepreședinte executiv Microsoft, a declarat că nu există „niciun indiciu” că pana ar fi rezultatul unei activități rău intenționate sau al unui atac informatic.
Dacă Outlook ți-a revenit, e posibil să mai ai întreruperi scurte până la stabilizarea completă. Sfaturile de mai jos rămân valabile până atunci.
Ce poți face până revine e-mailul
- Nu reinstala Outlook și nu-ți șterge contul din aplicație. Problema e la serverele Microsoft, nu la calculatorul tău. Dacă ștergi contul, s-ar putea să pierzi mesajele deja descărcate pe calculator, pe care altfel le poți citi și fără conexiune.
- Verifică starea serviciului pe contul Microsoft 365 Status de pe X sau, dacă ești administrator, în centrul de administrare, la incidentul EX1550543.
- Folosește Teams pentru mesaje urgente. Chatul și apelurile merg în mare parte, chiar dacă e-mailul nu.
- Fișierele din SharePoint le poți deschide direct, fără să treci prin Outlook.
- Ai grijă la e-mailurile „de la Microsoft” care îți cer să te reconectezi, să-ți „verifici contul” sau să descarci o actualizare. Escrocii profită de astfel de pene ca să trimită mesaje false, iar acum și verificarea automată a linkurilor din Outlook și Teams poate să nu funcționeze. Microsoft nu îți cere parola prin e-mail.
- Anunță-ți partenerii pe alt canal, telefon sau SMS, dacă aștepți un mesaj important.
Pentru firme: lecția penei
Analistul Sanchit Vir Gogia, de la Greyhound Research, spune, citat de Computerworld, că firmele nu ar trebui să trateze Microsoft 365 ca pe un sistem care nu poate cădea. Recomandarea lui nu e o a doua suită de programe, ci un plan de rezervă exersat dinainte: un canal de comunicare independent de Microsoft pentru echipa care gestionează criza, o soluție de e-mail de rezervă pentru rolurile critice și o decizie luată din timp despre ce se întâmplă cu fiecare protecție de securitate când serviciul cade, dacă blochează tot sau lasă totul să treacă.
Microsoft nu a publicat încă un raport final despre cauza penei. Revenim cu detalii când Microsoft închide oficial incidentul și publică raportul final.
Surse: Computerworld (ora de început, 16:17 UTC, extinderea la toate regiunile, lista serviciilor afectate și ce funcționează în fiecare, cele peste 130.000 de raportări, procesul care stabilește conexiunile securizate, anularea modificării de rețea, testarea pe un grup de servere, limitarea traficului, măsurile care „nu au funcționat așa cum se aștepta”, opiniile lui Sanchit Vir Gogia), Newsweek (codul incidentului EX1550543, declarația despre utilizatorii din orice regiune, ora vârfului și cifrele de pe Downdetector), BleepingComputer (actualizările din 12 și 13 noiembrie: prelungirea la 48 de ore a intervalului de livrare, cozile reduse semnificativ, mesajele întârziate care încep să sosească, scuzele lui Charles Lamanna și analiza echipelor), ABC7 (actualizarea din noaptea de vineri spre sâmbătă: monitorizarea „pentru o perioadă extinsă”, problema apărută la extinderea capacității rețelei și după o modificare recentă, raportul final promis), ABC News (declarația lui Charles Lamanna, prioritatea dată cozilor de e-mailuri, declarațiile Microsoft despre serverele repuse în funcțiune care pot deveni din nou nefuncționale, recuperarea parțială, oprirea actualizărilor și mutarea traficului, avertismentul New York-ului), ABC7 (lista serviciilor posibil afectate, actualizările de joi noapte și vineri, inclusiv cele de la 14:09 despre progresele recuperării și de la 16:17 despre cozile de e-mailuri), NBC News (actualizarea de vineri de la 14:26, ora României: recuperarea în Europa și America de Nord, procesul de bază copleșit, Azure neafectat, declarația pentru Bloomberg), CNBC (cauza declarată de Microsoft, lipsa unui atac, situația de vineri dimineață, dimineața de lucru din Europa, Air India, Richemont, poziția Amazon Web Services), ABC Australia (actualizarea de vineri, instituțiile, școlile și pacienții afectați în Australia, Japonia, Camera Reprezentanților, OpenAI și Anthropic, acordul guvernului australian cu Microsoft) și Ynetnews (Workhorse, Los Angeles, conectorii OpenAI și Anthropic). Sfaturile pentru utilizatori sunt ale redacției.
Fii primul care comentează acest articol!