Microsoft 365:恢復未能恢復容量
微軟 Microsoft 365 持續發生的服務中斷,暴露出一種比單純流量激增更令人擔憂的故障模式。
服務器開始無法通過運行狀況檢查,並退出服務。剩餘基礎設施接管了轉移過來的流量,使可用容量承受更大壓力。
微軟隨後確認,一個負責建立安全連接的進程因負載過重而出現問題。部分恢復的服務器在流量恢復後再次變得無響應。
這纔是關鍵所在。
服務器通過運行狀況檢查,並不意味着它就能處理生產流量。
微軟嘗試了受控重啓、流量限制和配置更改,同時調查近期的一項網絡變更。初步恢復跡象令人鼓舞,但之後採取的緩解措施並未帶來預期的改善。
此次服務中斷的影響不止於 Exchange Online,還波及依賴該服務的其他服務,包括 Teams、Copilot 和 Microsoft Graph 的部分功能。
更廣泛的教訓關乎有效容量,而非已安裝容量。
在緊密互聯的雲平臺中,如果服務器恢復後仍無法處理實際工作負載,系統就可能陷入同一故障循環。
接下來值得關注的是系統能否在正常流量下持續恢復,以及微軟的根本原因分析。
#stocks
$MSFT.US
微軟 Microsoft 365 持續發生的服務中斷,暴露出一種比單純流量激增更令人擔憂的故障模式。
服務器開始無法通過運行狀況檢查,並退出服務。剩餘基礎設施接管了轉移過來的流量,使可用容量承受更大壓力。
微軟隨後確認,一個負責建立安全連接的進程因負載過重而出現問題。部分恢復的服務器在流量恢復後再次變得無響應。
這纔是關鍵所在。
服務器通過運行狀況檢查,並不意味着它就能處理生產流量。
微軟嘗試了受控重啓、流量限制和配置更改,同時調查近期的一項網絡變更。初步恢復跡象令人鼓舞,但之後採取的緩解措施並未帶來預期的改善。
此次服務中斷的影響不止於 Exchange Online,還波及依賴該服務的其他服務,包括 Teams、Copilot 和 Microsoft Graph 的部分功能。
更廣泛的教訓關乎有效容量,而非已安裝容量。
在緊密互聯的雲平臺中,如果服務器恢復後仍無法處理實際工作負載,系統就可能陷入同一故障循環。
接下來值得關注的是系統能否在正常流量下持續恢復,以及微軟的根本原因分析。
#stocks
$MSFT.US