Báo cáo sự cố Google Meet ngày 8/1/2021

https://status.cloud.google.com/incident/zall/21001

Tóm tắt sự cố:

Từ 12:17 ngày 7/1/2021 đến 08:58 ngày 8/1/2021, 250.000 người dùng Google Meet đã không thể truy cập trang đích trong 20,7 giờ. Trong thời gian sự cố, vẫn có thể truy cập trực tiếp thông qua Calendar và các đường dẫn khác.

Nguyên nhân sự cố:

Vào 12:00 ngày 7/1/2021, thay đổi đối với trang đích Google Meet mới được áp dụng dần dần.

Việc rollout bắt đầu lúc 12:00 và bắt đầu được mở rộng từ 16:00.

Để đồng thời hỗ trợ cả trang cũ và trang mới, logic chuyển hướng trang được triển khai để chúng trỏ lại lẫn nhau.

Do nhầm lẫn, với một số người dùng, logic chuyển hướng của trang mới lại tiếp tục chuyển hướng về trang đã truy cập trước đó, tạo ra vòng lặp chuyển hướng.

Người dùng không thể truy cập trang đích Google Meet và gặp lỗi 502.

Ứng phó:

Vấn đề được báo cáo vào 04:49 ngày 8/1/2021, thay đổi mã được hoàn tất lúc 05:03, và sự cố được khắc phục lúc 08:58.

• Cải thiện giám sát và cảnh báo máy chủ frontend để thông báo đến nhà phát triển nhanh hơn.

• Cải thiện tài liệu phục vụ troubleshooting.

• Cải thiện mã legacy.

• Cập nhật truyền thông nội bộ về việc ra mắt mã mới để nâng cao nhận thức và thúc đẩy xử lý nhanh hơn.