Rich Sutton thảo luận về sự sáng tạo và khả năng khám phá của AI

Rich Sutton là một cái tên không thể thiếu trong lịch sử phát triển của trí tuệ nhân tạo, đặc biệt là lĩnh vực Học tăng cường (Reinforcement Learning - RL). Trong video chia sẻ gần đây, ông đã tập trung phân tích một khía cạnh thú vị nhưng thường bị bỏ quên: sự sáng tạo và khả năng khám phá của máy móc.

Học tăng cường: Chìa khóa của sự khám phá

Khác với các mô hình học sâu (deep learning) hiện nay thường tập trung vào việc nhận diện mẫu hoặc dự đoán từ tiếp theo, Học tăng cường tập trung vào việc các tác nhân (agents) học cách đưa ra quyết định thông qua tương tác với môi trường. Theo Sutton, chính quá trình thử và sai để tối đa hóa phần thưởng (reward) là nguồn gốc của sự sáng tạo.

Khi một tác nhân AI cố gắng đạt được mục tiêu trong một môi trường phức tạp, nó buộc phải tìm ra những cách thức mới lạ, đôi khi là những cách mà con người chưa từng nghĩ tới. Đây chính là dạng "khám phá" mà Sutton muốn nhấn mạnh.

Vượt qua việc bắt chước

Một điểm quan trọng trong bài chia sẻ là sự phân biệt giữa việc bắt chước (imitation) và việc khám phá (discovery). Các hệ thống AI hiện đại, như các mô hình ngôn ngữ lớn (LLM), rất giỏi trong việc bắt chước phong cách và cấu trúc của dữ liệu huấn luyện. Tuy nhiên, Sutton lập luận rằng để đạt được sự đột phá thực sự, AI cần phải có khả năng tự khám phá ra các nguyên lý và chiến lược mới mà không phụ thuộc hoàn toàn vào dữ liệu do con người cung cấp trước.

Giả thuyết phần thưởng và tương lai

Sutton cũng nhắc lại "Giả thuyết phần thưởng" nổi tiếng của mình: rằng mọi mục tiêu đều có thể được mô tả như việc tối đa hóa phần thưởng kỳ vọng tích lũy. Ông tin rằng việc xây dựng các hệ thống có thể theo đuổi các mục tiêu phức tạp thông qua cơ chế phần thưởng sẽ là bước ngoặt để tạo ra những AI thực sự sáng tạo và có khả năng giải quyết các vấn đề khoa học khó khăn nhất.

Bài chia sẻ của Rich Sutton là một lời nhắc nhở quan trọng về hướng đi của AI: thay vì chỉ xây dựng những cỗ máy biết nói, chúng ta cần tập trung vào những cỗ máy biết hành động và khám phá.

Bạn có thể xem bài thảo luận đầy đủ của Rich Sutton tại đây: https://www.youtube.com/watch?v=K5LAFEjTlBA