AT&T gây ra sự cố mạng nghiêm trọng do cập nhật lỗi, chặn hơn 92 triệu cuộc gọi và 25.000 cuộc gọi khẩn cấp 911

• Ngày 22/2/2024, AT&T gây ra sự cố mạng toàn quốc do cập nhật lỗi, ảnh hưởng đến hơn 125 triệu thiết bị và chặn hơn 92 triệu cuộc gọi thoại.

• Sự cố kéo dài hơn 12 giờ và ảnh hưởng đến tất cả 50 tiểu bang, Washington DC, Puerto Rico và Quần đảo Virgin thuộc Mỹ.

• Hơn 25.000 cuộc gọi đến tổng đài 911 bị chặn, gây nguy hiểm cho an toàn công cộng.

• Dịch vụ thoại và dữ liệu 5G của AT&T bị gián đoạn, ảnh hưởng cả đến người dùng FirstNet và các nhà mạng ảo (MVNO) sử dụng mạng AT&T.

• Nguyên nhân trực tiếp là do lỗi cấu hình khi AT&T triển khai thay đổi mạng, khiến hệ thống chuyển sang chế độ bảo vệ và ngắt kết nối tất cả thiết bị.

• FCC chỉ ra nhiều vấn đề trong quy trình của AT&T:
- Thiếu tuân thủ quy trình nội bộ
- Không có đánh giá ngang hàng 
- Kiểm tra phòng thí nghiệm không đầy đủ
- Thiếu các biện pháp kiểm soát để đảm bảo phê duyệt thay đổi ảnh hưởng đến mạng lõi
- Thiếu các biện pháp kiểm soát để giảm thiểu tác động khi sự cố xảy ra
- Nhiều vấn đề hệ thống kéo dài thời gian khắc phục sự cố

• AT&T không tuân thủ quy trình kiểm tra và phê duyệt trước khi triển khai thay đổi mạng. Lỗi cấu hình do một nhân viên thực hiện và được nhân viên thứ hai tải lên mạng mà không qua đánh giá.

• Hệ thống đăng ký thiết bị của AT&T bị quá tải khi khôi phục dịch vụ do số lượng lớn yêu cầu kết nối lại.

• AT&T đã triển khai các biện pháp khắc phục như thêm kiểm soát kỹ thuật, quét mạng để phát hiện thiếu sót và tăng cường quy trình đánh giá ngang hàng.

• FCC đã chuyển vụ việc cho Cục Thực thi để điều tra các vi phạm tiềm ẩn đối với quy định của FCC.

📌 Sự cố mạng nghiêm trọng của AT&T ngày 22/2/2024 đã chặn hơn 92 triệu cuộc gọi và 25.000 cuộc gọi khẩn cấp 911, ảnh hưởng đến hơn 125 triệu thiết bị trên toàn quốc. Nguyên nhân do lỗi cấu hình và thiếu tuân thủ quy trình kiểm tra, phê duyệt của AT&T. FCC đang điều tra các vi phạm tiềm ẩn.

https://arstechnica.com/tech-policy/2024/07/fcc-details-att-screwups-behind-outage-that-blocked-25000-calls-to-911/