Sự cố bảo trì gây ảnh hưởng lớn tới cộng đồng người dùng Azure tại California
Tuy nhiên, công tác bảo trì này ngay lập tức phát sinh vấn đề khi nhiều dịch vụ Azure bắt đầu nhận thấy các dấu hiệu suy giảm hiệu năng và mất kết nối cục bộ. Microsoft ghi nhận trong báo cáo sơ bộ rằng các đội ngũ kỹ thuật chuyên trách về mạng và dịch vụ cùng với đội phản ứng sự cố đã nhanh chóng vào cuộc để kiểm tra các bất thường về lưu lượng, hành vi định tuyến và tín hiệu mất gói dữ liệu.
Lỗi phần mềm và tác động liên quan đến cáp quang rộng lớn
Quá trình bảo trì bao gồm việc cô lập các đường truyền mạng nhất định để tiến hành sửa chữa và nâng cấp, với cơ chế kiểm tra an toàn nhằm đảm bảo ít nhất một trong hai đường dự phòng vẫn hoạt động bình thường. Tuy nhiên, Microsoft thừa nhận rằng một lỗi trong hệ thống chuyển đổi yêu cầu đã đánh dấu nhầm nhiều thiết bị khác cũng tham gia vào sự kiện bảo trì, dẫn đến việc xóa bỏ một tập hợp đường IP vượt quá phạm vi dự kiến.
Kết quả là, các đường dẫn giữa trung tâm dữ liệu và mạng diện rộng (WAN) tại khu vực West US bị gián đoạn nghiêm trọng, làm tê liệt giao tiếp mạng đi vào và ra khỏi vùng này. Microsoft cho biết ban đầu sự cố được nhận dạng qua sự biến động lớn trong việc thay đổi định tuyến của mạng diện rộng, và sau đó được xác định liên quan trực tiếp đến hoạt động bảo trì cáp quang gần đó.
Khắc phục nhanh và phục hồi dịch vụ trọn vẹn trong ngày
Trong khoảng thời gian từ 16:00 đến 17:45 UTC, các kỹ sư của Microsoft đã xác định đúng nguyên nhân liên quan đến bảo trì cáp quang và các hành vi định tuyến bất thường. Đến 17:45 UTC, quá trình đảo ngược các thay đổi được khởi động để khôi phục trạng thái ban đầu của mạng.
Đến 18:26 UTC, mạng diện rộng của Microsoft đã được phục hồi hoàn toàn và hoạt động ổn định trở lại. Tất cả các dịch vụ bị ảnh hưởng đã hồi phục đầy đủ vào lúc 19:41 UTC, chấm dứt gần năm giờ gián đoạn liên tục khiến người dùng không thể truy cập tài nguyên điện toán đám mây tại khu vực West US.
Sự cố này là một lời nhắc nhở cho cộng đồng công nghệ toàn cầu về tính nhạy cảm và dễ tổn thương của những dịch vụ đám mây quy mô lớn, dù được quảng bá là ổn định và đáng tin cậy. Microsoft, bên cạnh các đối thủ như AWS và Google, đã trở thành minh chứng cho những rủi ro tiềm ẩn trong vận hành hạ tầng mạng toàn cầu.
Những điều bổ ích từ bài viết
- Sự cố bắt nguồn từ lỗi phần mềm trong quá trình chuyển đổi yêu cầu bảo trì mạng.
- Gần 27 dịch vụ Azure tại khu vực West US bị ảnh hưởng gián đoạn gần 5 giờ.
- Microsoft đã nhanh chóng xác định và đảo ngược các thay đổi để phục hồi dịch vụ.
- Sự việc cho thấy hạ tầng đám mây vẫn có thể gặp rủi ro dù có nhiều biện pháp dự phòng.
- Việc bảo trì thiết bị mạng cần được giám sát chặt chẽ để tránh ảnh hưởng lan rộng.
Đăng ký bản tin QMVN
Nhận tin tổng hợp mỗi sáng - chỉ những bài đáng đọc, không spam.
Bài viết được biên tập với sự hỗ trợ của công cụ trí tuệ nhân tạo (AI), tổng hợp từ các nguồn tin dẫn bên dưới và đã qua kiểm duyệt của toà soạn Quang Minh Việt Nam.
