Microsoft 365: Khi khôi phục không thể phục hồi năng lực
Sự cố ngừng hoạt động Microsoft 365 kéo dài của Microsoft đã làm lộ ra một kiểu lỗi đáng lo ngại hơn nhiều so với tình trạng lưu lượng tăng đột biến đơn thuần.
Các máy chủ bắt đầu không vượt qua được bước kiểm tra tình trạng và ngừng hoạt động. Hạ tầng còn lại phải tiếp nhận lưu lượng bị chuyển hướng, khiến áp lực lên phần năng lực vẫn khả dụng tăng cao.
Sau đó, Microsoft xác định một quy trình phụ trách thiết lập kết nối bảo mật đã bị quá tải. Một số máy chủ được khôi phục lại trở nên không phản hồi sau khi lưu lượng quay trở lại.
Đó là chi tiết then chốt.
Một máy chủ vượt qua bước kiểm tra tình trạng không nhất thiết có khả năng xử lý lưu lượng thực tế.
Microsoft đã thử khởi động lại có kiểm soát, hạn chế lưu lượng và thay đổi cấu hình, đồng thời điều tra một thay đổi mạng gần đây. Những dấu hiệu khôi phục ban đầu khá khả quan, nhưng các biện pháp giảm thiểu sau đó không mang lại mức cải thiện như kỳ vọng.
Sự gián đoạn không chỉ ảnh hưởng đến Exchange Online mà còn lan sang các dịch vụ phụ thuộc vào nền tảng này, bao gồm một số phần của Teams, Copilot và Microsoft Graph.
Bài học rộng hơn ở đây là về năng lực thực tế, chứ không phải năng lực được cài đặt.
Trong một nền tảng đám mây có các thành phần liên kết chặt chẽ, việc khôi phục máy chủ mà không khôi phục khả năng xử lý khối lượng công việc thực tế có thể khiến hệ thống mắc kẹt trong cùng một vòng lặp sự cố.
Điều cần theo dõi tiếp theo là liệu hệ thống có duy trì được trạng thái phục hồi khi lưu lượng trở lại bình thường hay không, sau đó là phân tích nguyên nhân gốc rễ của Microsoft.
#stocks
$MSFT.US
Sự cố ngừng hoạt động Microsoft 365 kéo dài của Microsoft đã làm lộ ra một kiểu lỗi đáng lo ngại hơn nhiều so với tình trạng lưu lượng tăng đột biến đơn thuần.
Các máy chủ bắt đầu không vượt qua được bước kiểm tra tình trạng và ngừng hoạt động. Hạ tầng còn lại phải tiếp nhận lưu lượng bị chuyển hướng, khiến áp lực lên phần năng lực vẫn khả dụng tăng cao.
Sau đó, Microsoft xác định một quy trình phụ trách thiết lập kết nối bảo mật đã bị quá tải. Một số máy chủ được khôi phục lại trở nên không phản hồi sau khi lưu lượng quay trở lại.
Đó là chi tiết then chốt.
Một máy chủ vượt qua bước kiểm tra tình trạng không nhất thiết có khả năng xử lý lưu lượng thực tế.
Microsoft đã thử khởi động lại có kiểm soát, hạn chế lưu lượng và thay đổi cấu hình, đồng thời điều tra một thay đổi mạng gần đây. Những dấu hiệu khôi phục ban đầu khá khả quan, nhưng các biện pháp giảm thiểu sau đó không mang lại mức cải thiện như kỳ vọng.
Sự gián đoạn không chỉ ảnh hưởng đến Exchange Online mà còn lan sang các dịch vụ phụ thuộc vào nền tảng này, bao gồm một số phần của Teams, Copilot và Microsoft Graph.
Bài học rộng hơn ở đây là về năng lực thực tế, chứ không phải năng lực được cài đặt.
Trong một nền tảng đám mây có các thành phần liên kết chặt chẽ, việc khôi phục máy chủ mà không khôi phục khả năng xử lý khối lượng công việc thực tế có thể khiến hệ thống mắc kẹt trong cùng một vòng lặp sự cố.
Điều cần theo dõi tiếp theo là liệu hệ thống có duy trì được trạng thái phục hồi khi lưu lượng trở lại bình thường hay không, sau đó là phân tích nguyên nhân gốc rễ của Microsoft.
#stocks
$MSFT.US