Sai sót nhỏ trong quản lý AWS khiến website khách hàng bị ngừng hoạt động

Cuối tuần trước, Christopher Bradbury, giám đốc công ty thiết kế và phát triển web Digital Takumi, phát hiện nhiều website cùng tài khoản email Google Workspace liên kết với các tên miền do ông quản lý đột ngột không truy cập được. Các dịch vụ này đều được đặt hosting thông qua dịch vụ Route 53 của AWS, nhưng tất cả không thể giải quyết tên miền.

Qua kiểm tra email, Bradbury phát hiện hàng loạt thông báo từ AWS cảnh báo thẻ thanh toán trên tài khoản đã hết hạn và tài khoản sẽ bị đình chỉ nếu không cập nhật. Tuy nhiên, do các cảnh báo này bị hệ thống lọc spam tự động đưa vào thư mục rác, lại có các email chuyển đến nhân viên đã nghỉ việc, Bradbury không nắm được tình hình và bỏ qua thông báo quan trọng nào đó.

Việc khôi phục dịch vụ kéo dài bởi Bradbury không thể đăng nhập lại vào tài khoản AWS. Ông bật xác thực đa yếu tố (MFA) qua ứng dụng trên một chiếc laptop cũ đã bị hỏng bo mạch chủ, khiến mã xác thực không thể lấy được. Trong khi đó, ông đã chủ yếu dựa vào mã MFA gửi qua email, nhưng địa chỉ email này lại nằm trên cùng một tên miền bị nằm trong Hosting bị khóa, dẫn đến không nhận được mã xác thực.

Bradbury cho biết ông đã cố gắng liên hệ AWS qua một email khác và thậm chí tạo một tài khoản AWS mới để mua dịch vụ hỗ trợ doanh nghiệp theo lời khuyên, nhưng các kỹ sư hỗ trợ chỉ làm việc khi ông xác minh được quyền sở hữu tài khoản chính. Ông liên tục bị chuyển đổi giữa các bộ phận và không thể vượt qua bước xác minh để mở lại tài khoản.