Microsoft nêu ba nguyên nhân khiến hệ thống 'sập' hơn một ngày
Microsoft cho biết nguyên nhân khiến hàng loạt dịch vụ gặp sự cố liên quan đến lỗi phần mềm, kết nối nội bộ trục trặc và dung lượng máy chủ.
"Mỗi yếu tố có thể dễ dàng được giải quyết riêng lẻ, nhưng khi kết hợp, chúng dẫn đến một sự cố ngừng hoạt động lớn khó khắc phục hơn", Microsoft cho biết ngày 16/11.
Trong bài đăng trên X, Charles Lamanna, Phó chủ tịch phụ trách Copilot, tác nhân và nền tảng của Microsoft, giải thích chi tiết hơn khi cho biết một lỗi tiềm ẩn từ tháng 7 đã khiến các máy chủ "bị quá tải và không phản hồi".
Cụ thể, hệ thống công ty thường có hai cổng mạng dự phòng, đóng vai trò điểm vào và ra, kết nối các hệ thống riêng biệt và cho phép dữ liệu lưu chuyển giữa chúng. Tuy nhiên, một cổng gặp sự cố khi xử lý Microsoft Teams, đẩy lưu lượng dồn sang cổng chính và gây quá tải. Trước đó một ngày, một sự cố khác cũng khiến hơn 14% công suất máy chủ của công ty ngừng hoạt động.
"Tóm lại, sự gia tăng tải trọng và giảm dung lượng máy chủ đã khiến cổng mạng gặp lỗi, vốn đã tiềm ẩn từ tháng 7. Điều này khiến hàng loạt yêu cầu tích tụ cho đến khi các máy chủ cuối cùng ngừng phản hồi", Lamanna giải thích.
Logo Microsoft trên smartphone. Ảnh: Bảo Lâm
Cũng theo Phó chủ tịch Microsoft, nguyên nhân gốc rễ đã xuất hiện từ vài tháng trước khiến cho việc "chỉ đơn giản hoàn tác một thay đổi gần đây" không thể sửa chữa được lỗi. Bên cạnh đó, khi hệ thống hoạt động trở lại, chúng "lập tức bị quá tải bởi lưu lượng truy cập chờ", nên quá trình khôi phục mất nhiều thời gian hơn.
"Quy trình khôi phục tự động thông thường không được thiết kế để xử lý tình trạng mất phản hồi trên diện rộng như thế", Lamanna nói thêm. "Ngoài ra, do lỗi trong mã nguồn đã âm thầm tồn tại từ nhiều tháng, các cơ chế khôi phục, triển khai theo từng nhóm và cờ tính năng thông thường không thể nhanh chóng đảo ngược thay đổi gây ra sự cố".
Theo ông, Microsoft sẽ công bố báo cáo cuối cùng với thông tin chi tiết hơn, nhưng chưa nêu thời gian cụ thể.
Sự cố bắt đầu chiều 12/11 (đêm 13/11 giờ Hà Nội) và kéo dài hơn một ngày, chủ yếu ảnh hưởng đến hạ tầng email Exchange Online, khiến người dùng không thể truy cập hộp thư Outlook. Các dịch vụ khác như Teams, SharePoint Online, Copilot 365 và Defender XDR cũng bị ảnh hưởng.
Trong thời gian gián đoạn, website chuyên theo dõi sự cố mạng Downdetector ghi nhận 7,4 triệu báo cáo từ 74 quốc gia và vùng lãnh thổ, đỉnh điểm gần 20.000 báo cáo mỗi phút, cao hơn 1.500 lần so với mức bình thường. Mức cao nhất hơn 200.000 lượt chỉ riêng Outlook, trong khi Copilot cũng tiệm cận con số này.
Tại Việt Nam, nhiều dịch vụ được khôi phục trong ngày 13/11, nhưng Outlook đến khoảng 19h cùng ngày mới hoạt động trở lại trong tình trạng chập chờn.
Nói với Reuters, Mario De Cicco, Phó chủ tịch phụ trách các tổ chức tài chính châu Âu tại Morningstar DBRS, ước tính thiệt hại được bảo hiểm toàn cầu từ sự cố Microsoft khoảng 300-500 triệu USD.
Trong khi đó, theo CNN, Anderson Economic Group, tổ chức nghiên cứu có trụ sở tại bang Michigan (Mỹ), cho rằng sự cố có thể gây thiệt hại 7 tỷ USD do gián đoạn năng suất lao động. Patrick Anderson, Chủ tịch tổ chức, nói có thể có tới 26 triệu người trong ngày 12/11 và 51 triệu người trong ngày 13/11 bị gián đoạn hoạt động theo cách gây ra tổn thất kinh tế, nên con số thiệt hại thực tế nhiều khả năng sẽ vượt mức ước tính ban đầu.
Giới phân tích cho rằng sự cố của Microsoft cho thấy các công ty cần xem xét lại mức độ phụ thuộc của họ vào một dịch vụ duy nhất. "Đây là minh chứng cho tầm quan trọng của khả năng chống chịu, không chỉ trong lĩnh vực an ninh mạng mà cả hoạt động kinh doanh", Matt Hull, Phó chủ tịch phụ trách tình báo và ứng phó an ninh mạng của NCC Group, nói với Guardian. "Việc bệnh viện, trường học và nhiều dịch vụ thiết yếu khác bị ảnh hưởng cho thấy sự gián đoạn hệ thống có thể gây tác động trên diện rộng, bất kể nguyên nhân xuất phát từ đâu".
Sự cố xảy ra trong bối cảnh Microsoft cắt giảm nhân sự, đồng thời đẩy mạnh đầu tư vào AI. Tháng trước, Microsoft đưa ra đề xuất nghỉ việc tự nguyện kèm trợ cấp cho 60.000 nhân viên, tương đương 27% tổng nhân sự trên toàn cầu. Hiện chưa rõ có bao nhiêu người chấp nhận. Động thái này tiếp nối đợt cắt giảm 4.800 nhân sự được công bố hồi tháng 7. Khi đó, Giám đốc nhân sự Microsoft Amy Coleman khẳng định các vị trí bị ảnh hưởng "không được thay thế bằng AI".
Bảo Lâm tổng hợp
- Hai ngày chao đảo vì các sự cố công nghệ
- Vì sao sự cố Microsoft kéo dài bất thường?
- Hàng loạt dịch vụ Microsoft gặp sự cố