Google Cloud vô tình khóa tài khoản khách hàng lớn Railway.com, gây ra sự cố nghiêm trọng

Google Cloud vô tình khóa tài khoản khách hàng lớn Railway.com, gây ra sự cố nghiêm trọng

Nền tảng PaaS (Platform as a Service) Railway cho biết Google đã tạm thời đình chỉ tài khoản của họ vào thứ Tư mà không đưa ra lý do cụ thể, dẫn đến một đợt mất dịch vụ lớn. Railway là một dịch vụ tự động hóa việc triển khai mã nguồn bằng cách lấy kho lưu trữ GitHub và thực hiện tất cả các công việc cần thiết để chạy ứng dụng từ đám mây. Tuy nhiên, trong vài giờ qua, họ đã gặp khó khăn lớn trong việc duy trì hoạt động này.

Trang trạng thái của Railway đã ghi nhận chuỗi sự cố bắt đầu từ cập nhật lúc 22:29 UTC ngày 19 tháng 5, thông báo về việc đang "điều tra sự cố gián đoạn dịch vụ diện rộng". Người dùng gặp phải các lỗi như "no healthy upstream" (không có máy chủ thượng nguồn khỏe mạnh), "unconditional drop overload" (từ chối do quá tải), không thể đăng nhập và không thể truy cập vào bảng điều khiển.

Angelo Saraceno, kỹ sư giải pháp của Railway, cho biết công ty nhận thấy vấn đề vào khoảng 22:00 UTC. Tài nguyên của họ dường như đã bị xóa và không còn tồn tại. Sau đó, Google giải thích rằng họ đã đình chỉ tài khoản, khiến các tài nguyên của Railway trở nên vô hình.

"Các liên hệ của chúng tôi tại Google rất bối rối, còn khách hàng thì tức giận. Chúng tôi rất phẫn nộ và vẫn đang cố gắng lấy hết các chi tiết," Saraceno chia sẻ.

Một điều đáng chú ý là Railway chi một khoản tiền hàng chục triệu USD mỗi năm cho Google Cloud. Tuy nhiên, Saraceno cho biết khi sự cố bắt đầu, đội ngũ hỗ trợ của Google đã mất một giờ đồng hồ mới bắt đầu phản hồi.

Lịch sử mâu thuẫn và chiến lược đa dạng hóa

Một cách trớ trêu, vào năm 2024, Railway đã quyết định chuyển phần lớn cơ sở hạ tầng của mình sang các dịch vụ đồng đặt (colocation) sau khi Google "gây ra vô số vấn đề đã đặt ra rủi ro tồn tại cho doanh nghiệp của chúng ta". Những vấn đề này lại tái diễn vào năm 2025 sau thêm một rắc rối nữa tại Google Cloud ảnh hưởng đến dịch vụ của Railway.

Tuy nhiên, Railway vẫn giữ mặt phẳng điều khiển (control plane) trên Google Cloud và vẫn phụ thuộc vào các cơ sở dữ liệu chạy tại đó. Chính những tài nguyên này đã khiến họ phải chi số tiền khổng lồ nói trên mỗi năm. Saraceno đã đưa ra một giả thuyết rằng Railway đã vô tình kích hoạt một quy định thực thi của Google.

Tính đến thời điểm viết bài, cập nhật mới nhất trên trang trạng thái của Railway cho biết: "Đang đưa thêm khối lượng công việc trở lại trực tuyến. Một số người dùng vẫn có thể gặp phải các vấn đề gián đoạn trong quá trình phục hồi. Các triển khai phi doanh nghiệp vẫn bị tạm dừng; các triển khai doanh nghiệp không bị ảnh hưởng."

Rủi ro khi phụ thuộc vào Hyperscaler

The Register đã liên hệ với Google để hỏi xem họ đã chặn tài khoản của Railway như thế nào và tại sao. Các nhà cung cấp đám mây có quyền chặn tài khoản khách hàng do hóa đơn chưa thanh toán hoặc sử dụng không phù hợp, nhưng thường họ sẽ đưa ra cảnh báo trước. Tuy nhiên, Railway khẳng định sự cố lần này đến hoàn toàn bất ngờ.

Google từng có tiền lệ xóa tài khoản khách hàng không rõ lý do: Vào năm 2024, họ nổi tiếng đã xóa sạch toàn bộ hạ tầng được thuê bởi quỹ hưu trí UniSuper của Úc.

Trang trạng thái của Railway hiện chứa lời xin lỗi dành cho khách hàng của họ, mặc dù vấn đề nằm ở phía Google.

"Khách hàng của chúng tôi không quan tâm đó có phải là Google hay không," Saraceno nói. "Chúng ta phải chịu trách nhiệm về thời gian hoạt động của chính mình."

Vụ việc này là một lời nhắc nhở đau đớn cho các công ty công nghệ về rủi ro của việc đặt quá nhiều niềm tin vào một nhà cung cấp đám mây duy nhất, ngay cả khi là những gã khổng lồ như Google.