Anubis: Khi chủ website dùng Proof-of-Work để chống bot AI

Trang thư viện số của cố nhà văn Cormac McCarthy (Đại học Tennessee) gần đây gây chú ý trên Hacker News không phải vì nội dung văn chương, mà vì cách nó chặn truy cập tự động. Thay vì hiển thị trang web ngay, hệ thống bắt người dùng vượt qua một thử thách Proof-of-Work do Anubis tạo ra.

Thông điệp hiện trên màn hình khá thẳng thắn: quản trị viên đã bật Anubis để bảo vệ máy chủ trước "cơn bão" các công ty AI đang quét website một cách hung hãn. Tình trạng này gây sập dịch vụ và khiến tài nguyên trở nên không thể truy cập với tất cả mọi người.

Màn hình thử thách của Anubis

Anubis hoạt động như thế nào?

Anubis không dùng CAPTCHA hình ảnh hay câu đố khó chịu. Nó áp dụng cơ chế Proof-of-Work tương tự Hashcash — phương án từng được đề xuất để giảm thư rác email.

• Với một người dùng cá nhân, khối lượng tính toán thêm là không đáng kể.
• Nhưng khi bot quét hàng triệu trang, chi phí tính toán cộng dồn và khiến việc thu thập dữ liệu trở nên đắt đỏ hơn rất nhiều.

Nói cách khác, Anubis biến mỗi lượt truy cập thành một "khoản phí" nhỏ bằng sức mạnh xử lý — đủ rẻ cho người thật, đủ đắt cho kẻ càn quét quy mô lớn.

Vẫn chỉ là giải pháp tạm thời

Đội ngũ Anubis thừa nhận đây là giải pháp chờ (placeholder), nhằm có thêm thời gian nghiên cứu kỹ thuật nhận diện trình duyệt headless — ví dụ qua cách chúng render phông chữ.

Mục tiêu cuối cùng là không cần hiển thị trang thử thách cho những người dùng có nhiều khả năng là hợp pháp.

Điều này cho thấy một thực tế: các công cụ chống bot hiện đại vẫn phải đánh đổi giữa bảo vệ hạ tầng và trải nghiệm người dùng.

Trạng thái thử thách hoàn tất

Những phiền toái đi kèm

Anubis yêu cầu các tính năng JavaScript hiện đại, nên những tiện ích chặn script như JShelter sẽ vô tình làm hỏng thử thách. Người dùng cần tắt các plugin này cho tên miền tương ứng.

Đáng chú ý hơn là lời thừa nhận của chính đội phát triển:

Thật đáng tiếc, bạn phải bật JavaScript để vượt qua thử thách này. Điều đó là bắt buộc vì các công ty AI đã thay đổi khế ước xã hội về cách vận hành lưu trữ website.

Giải pháp không cần JavaScript vẫn đang trong quá trình phát triển.

Góc nhìn cho người làm web tại Việt Nam

Với các blogger, trang tin và diễn đàn Việt Nam, hiện tượng này là lời cảnh báo đáng cân nhắc. Khi bot AI quét nội dung ngày càng dày đặc, chi phí băng thông và tài nguyên máy chủ có thể tăng vọt mà không rõ nguyên nhân.

Một số hướng tiếp cận đáng thử:

• Theo dõi lưu lượng bất thường từ các dải IP trung tâm dữ liệu.
• Cấu hình giới hạn tần suất (rate limiting) ở tầng CDN hoặc reverse proxy.
• Cân nhắc các giải pháp xác thực nhẹ như Anubis thay vì chặn cứng toàn bộ.

Câu chuyện của thư viện Cormac McCarthy cho thấy một xu hướng rõ ràng: bảo vệ nội dung trước bot AI đang trở thành một phần bắt buộc trong vận hành website, không còn là tùy chọn xa xỉ.