EVE Online và bài toán quan sát hệ thống trong game MMO 20 năm tuổi

EVE Online là một trong những tựa game MMO có tuổi đời lâu nhất và phức tạp nhất trong làng game trực tuyến. Với kiến trúc đã tồn tại gần hai thập kỷ, việc quan sát và gỡ lỗi hệ thống đặt ra những thách thức không hề nhỏ. Nicholas Herring, kỹ sư tại CCP Games, đã chia sẻ cách đội ngũ của ông giải quyết bài toán này thông qua các kỹ thuật lấy mẫu (sampling) thông minh.

Thách thức của một hệ thống MMO 20 năm tuổi

Khác với các ứng dụng web thông thường, EVE Online vận hành một mô phỏng thế giới ảo theo thời gian thực với hàng nghìn người chơi tương tác đồng thời trong cùng một không gian. Mỗi hành động của người chơi — từ bay tàu, giao dịch đến tham gia các trận chiến quy mô lớn — đều tạo ra một lượng lớn dữ liệu telemetry.

Bài toán ở đây không chỉ là thu thập dữ liệu, mà là làm sao để có đủ thông tin chẩn đoán sự cố mà không làm hệ thống quá tải. Khi một giao dịch hoặc trận đánh diễn ra chậm chạp, người chơi gọi đó là "không vui" (not fun). Nhiệm vụ của đội ngũ kỹ thuật là quan sát được trạng thái đó — hay nói cách khác, đo lường được yếu tố "độ vui" của trò chơi.

Head-based sampling: quyết định ngay từ đầu

Một trong những kỹ thuật cốt lõi mà Herring chia sẻ là head-based sampling. Thay vì thu thập toàn bộ dữ liệu rồi mới lọc, hệ thống đưa ra quyết định ngay tại điểm bắt đầu của một request hoặc một sự kiện trong game.

Quyết định lấy mẫu ngay từ "đầu" giúp giảm tải đáng kể cho các thành phần phía sau trong chuỗi xử lý.

Cách tiếp cận này đặc biệt quan trọng trong môi trường lưu lượng cao, nơi mỗi mili-giây xử lý thừa đều có thể ảnh hưởng đến trải nghiệm của hàng nghìn người chơi cùng lúc.

EMA động và deterministic sampling

Bên cạnh head-based sampling, EVE Online còn áp dụng hai kỹ thuật bổ trợ:

• Dynamic EMA (Exponential Moving Average): Tự động điều chỉnh tỷ lệ lấy mẫu dựa trên trung bình động lũy thừa của lưu lượng. Khi hệ thống bận rộn, tỷ lệ lấy mẫu giảm xuống; khi rảnh rỗi, hệ thống có thể thu thập nhiều dữ liệu hơn.
• Deterministic sampling: Đảm bảo rằng các sự kiện quan trọng hoặc các trường hợp cụ thể luôn được ghi nhận một cách nhất quán, giúp việc gỡ lỗi và tái hiện lỗi trở nên khả thi.

Sự kết hợp này cho phép đội ngũ vừa duy trì độ trung thực cao của hệ thống (high fidelity), vừa kiểm soát được chi phí telemetry — một yếu tố ngày càng quan trọng khi các hệ thống observability tính phí theo khối lượng dữ liệu.

Bài học cho các đội ngũ kỹ thuật tại Việt Nam

Với các startup và công ty công nghệ Việt Nam đang xây dựng các sản phẩm có lưu lượng lớn — từ game online, ứng dụng fintech đến các nền tảng thương mại điện tử — câu chuyện của EVE Online mang lại vài gợi ý thiết thực:

• Đừng thu thập mọi thứ: Chi phí lưu trữ và xử lý log có thể tăng theo cấp số nhân khi hệ thống mở rộng.
• Lấy mẫu thông minh ngay từ đầu: head-based sampling giúp giảm tải hệ thống mà vẫn giữ được khả năng chẩn đoán.
• Tự động hóa việc điều chỉnh: Dynamic EMA cho phép hệ thống thích ứng với lưu lượng thay đổi mà không cần can thiệp thủ công.
• Ưu tiên tính nhất quán: Deterministic sampling giúp tái hiện lỗi, điều mà sampling ngẫu nhiên thuần túy khó làm được.

Bài trình bày của Herring là minh chứng cho thấy observability không chỉ là vấn đề của các ông lớn công nghệ, mà còn là bài toán thiết kế kiến trúc mà bất kỳ hệ thống phân tán nào cũng phải đối mặt khi lớn lên.