Mga pangunahing natutunan
- Ang outage ng Microsoft ay nag-trigger sa halos 130,000 na ulat ng problema sa Outlook
- Ang mga team, Copilot at mga integrasyon ng AI mula sa ikatlong panig ay nakakaranas ng mga pagkabigo
- Ipinapakilos ni Microsoft ang mga pagpapabuti sa imprastruktura habang ang pagpapalikod ay hindi pa tapos
Nasira ng malaking global na outage ang Microsoft noong Nobyembre 12 na nagdulot ng pagkabigo sa Outlook, Teams, Copilot at iba pang mga serbisyo ng Microsoft 365, na nag-iwan sa mga negosyo at gobyerno na hirap na makakuha ng access sa email at mga kritikal na aplikasyon sa trabaho.
Lumabas ang halos 130,000 na ulat sa problema ng Outlook sa Downdetector sa United States kaagad pagkatapos ng 1 p.m. Eastern Time, habang nagkaroon ng higit sa 38,000 karagdagang ulat ang Microsoft 365 at halos 4,500 ang Teams. Ang mga numero ay kumakatawan sa mga insidente na isinumite ng mga gumagamit at hindi sa mga independiyenteng patotohanang bilang ng mga apektadong kliyente.
Nagpatuloy ang pagkabigo hanggang sa Nobyembre 13, na may raporto ang Microsoft tungkol sa pag-unlad sa pagpapabalik ng kapasidad ng imprastruktura ngunit hindi pa pinatotohanan ang buong pagkabawi. Ang insidente ay nakakaapekto rin sa mga integrasyon ng Microsoft na ginagamit ng OpenAI at Anthropic, na nagpapalawak ng epekto sa labas ng sariling mga produkto ng Microsoft.
Bakit nababawasan ang Outlook, Teams at Copilot?
Ayon sa opisyal na dashboard ng kalusugan ng serbisyo ng Microsoft, ang pagkabigo ay nakakaapekto sa infrastraktura ng Exchange Online na responsable sa pagproseso ng email at mga kaugnay na kahilingan sa serbisyo.
Unang natukoy ng Microsoft ang hindi karaniwang mataas na load sa infrastruktura bago matukoy na maraming server ang naging hindi magagamit, na nag-iwan sa mga natitirang sistema na naghihikahos na harapin ang trapiko.
Nakita ng kumpanya pagkatapos na ang isang pangunahing proseso ng server ay nagsisimula nang masobra, na nagdudulot ng paulit-ulit na pagkabigo kapag bumabalik ang mga naapektuhandong server sa serbisyo.
Napalaganap ang pagkabigo sa Microsoft 365 dahil sa maraming aplikasyon na nakasalalay sa karaniwang infrastruktura ng email, pag-authenticate, at pag-access sa data.
Nakaranas ang mga gumagamit ng Outlook ng pagkabigo sa koneksyon ng mailbox at pagkakaroon ng pagkaantala sa pagpapadala ng email, habang nagkaroon ng mga problema ang ilang mga gumagamit ng Teams sa pagjadwal ng kalendaryo at mga kaugnay na punsiyon. Nanatiling operasyonal ang pangunahing mensahe at pagpupulong ng Teams sa ilang naapektuhang kapaligiran.
Nasira rin ang Microsoft 365 Copilot, kabilang ang pagkabigo sa pag-access sa mga email, kalendaryo at mga file na ginagamit upang makagawa ng mga AI response.
Ipapakita ng insidente ang iba’t ibang vulnerability kumpara sa mga problema sa pagsasapalaran na nauugnay sa AI cloud infrastructure ni Microsoft: ang pagkakaroon ng kumpiyansa sa serbisyo ay nakadepende sa katatagan ng mga interkonektadong sistema, hindi lamang sa kapasidad ng pagpapatakbo.
Ang mga integrasyon ng OpenAI at Anthropic ay nasasakop din
Ang pagkabigo ay lumawak patungo sa mga serbisyo ng artificial intelligence na nakadepende sa ecosystem ng enterprise software ng Microsoft.
Kinilala ni OpenAI ang mga problema na nakaaapekto sa mga connector ng Microsoft, kabilang ang mga bagong koneksyon at mga kasangkapan na hindi gumagana ayon sa inaasahan. Hiwalay na kinilala ni Anthropic ang isang problema sa upstream provider na nakaaapekto sa kanyang Microsoft 365 connector.
Mahalaga ang pagkakaiba ito: ang mga isinagong problema ay tumutok sa mga integrasyon ng Microsoft, hindi ebidensya na ang mga pundamental na AI model ng ChatGPT o Claude ay tumigil na sa paggana.
Ang pagkabagabag ay nagpapakita ng paglalago ng mga operasyonal na pagkakadepende sa loob ng OpenAI-Microsoft partnership, kahit na ang mga kumpanya ay nagdagdag ng mas malaking fleksibilidad sa kanilang komersyal na ugnayan.
Ang mga produkto ng Enterprise AI ay lalong madalas na kumukuha ng mga dokumento, kalendaryo at mensahe mula sa mga panlabas na aplikasyon. Kapag nabigo ang mga koneksyon na ito, maaaring mawalan ng access ang mga empleyado sa mahahalagang mga workflow na may tulong ng AI kahit na nananatili pa ang mga pundamental na modelo.
Ang Microsoft ay patuloy na papaunlad ang mga kakayahan ng Copilot sa workplace, na ginagawa ang pagkakaroon ng outage na lalong may kahalagahan habang ang mga negosyo ay nag-iintegrate ng mga AI agent sa araw-araw na mga operasyon.
Kailan babalik ang mga serbisyo ng Microsoft 365?
Ang Microsoft ay nagreredirect ng trapiko, nagre-restart ng mga naiimpluwensyahan na server, at nagtataas ng mga pagbabago sa konfigurasyon upang muling iwasan ang kapasidad.
Sa kanilang update noong Nobyembre 13, inulat ng kumpanya ang pagbabago sa stability ng server pagkatapos ng configuration patch na nakaaapekto sa mga komponente ng upstream authentication at routing. Nagsimula ang mga inhinyero na palawakin ang solusyon sa karagdagang infrastraktura, nauna ang mga rehiyon na papasok sa peak na oras ng negosyo.
Sinabi ng Microsoft na wala silang nakitang tanda ng masamang gawain. Gayunpaman, ang kompletong pag-aaral pagkatapos ng insidente ay nasa paghihintay pa, at hindi pa nakakatukoy ang kumpanya ng tiyak na takdang panahon para sa pagpapalit.
Ang pagkabigla ay sumunod sa mga mas maagang problema sa pagkakasiguro sa iba pang mga provider ng enterprise software, kabilang ang global Salesforce outage na nagpapahinto sa mga operasyon ng negosyo noong Setyembre.
Para sa Microsoft, ang insidente ay nangyayari sa panahon ng malaking pag-invest sa infrastruktura ng AI, kung saan lalong umaasahan ng mga customer na suportahan ng kanilang cloud services ang mga business-critical na workflow.
Ipinapakita rin nito ang mas malawak na pagkakasalalay ng mga kumpanya ng AI sa mga cloud platform, kung saan ang mga pagkabigo sa imprastruktura ng isang provider ay maaaring makaapekto sa mga serbisyo na pinapatakbo ng iba pang mga kumpanya.