Apple thử nghiệm beta các tính năng AI ghi nhớ hội thoại trên Apple Watch

Apple bắt đầu thử nghiệm beta bộ tính năng AI Audio Intelligence trên Apple Watch, giúp người dùng nhận biết âm thanh quan trọng, tìm tên bài hát, xem lại một đoạn hội thoại vừa diễn ra hoặc tạo ghi chú tóm tắt. Bản thử nghiệm ban đầu dành cho nhà phát triển trong bản cập nhật iOS 27.3; Apple cho biết các tính năng sẽ được đưa ra thử nghiệm beta công khai trước khi phát hành rộng rãi.

Bốn tính năng này dành cho Apple Watch Series 12 và Apple Watch Ultra 4. Người dùng phải chủ động bật chúng.

Apple Watch Series 12 với tính năng nhận diện âm thanh

Nhận diện âm thanh và bài hát

Tính năng nhận diện âm thanh được thiết kế để hỗ trợ người khiếm thính hoặc khó nghe. Đồng hồ có thể phát hiện những âm thanh quan trọng như còi báo động, chuông báo thức hoặc chuông cửa.

Tính năng nhận diện bài hát sử dụng ứng dụng Shazam của Apple để xác định nhạc đang phát trong môi trường xung quanh, đồng thời hiển thị tên bài hát và nghệ sĩ.

Xem lại lời vừa nghe với Live Rewind

Hai tính năng liên quan trực tiếp đến hội thoại là Live Rewind và Siri Recaps. Chúng được Apple giới thiệu trong bối cảnh các thiết bị AI có khả năng ghi âm từng vấp phải phản ứng về quyền riêng tư, trong đó có kính AI của Meta và những thiết bị đeo khác.

Với Live Rewind, người dùng có thể xem lại dưới dạng văn bản những gì vừa được nói trong 15 giây gần nhất. Chẳng hạn, nếu bỏ lỡ một chỉ dẫn bằng lời hoặc tên món ăn trong danh sách dài, người dùng có thể nhấn đúp núm Digital Crown để hiển thị đoạn trích trên mặt đồng hồ.

Đoạn trích sẽ tự biến mất nếu người dùng không lưu. Người dùng cũng có thể lưu vào ứng dụng Siri độc lập, ra mắt cùng iOS 27, để xem lại sau. Tùy chọn “Hỏi Siri” bên dưới đoạn trích cho phép đặt câu hỏi về nội dung vừa nghe, chẳng hạn một thuật ngữ kỹ thuật chưa rõ nghĩa.

Khi kích hoạt bằng cách nhấn đúp Digital Crown, đồng hồ phát âm báo và hiển thị hoạt ảnh nhằm báo hiệu rằng nội dung vừa nói đang được ghi lại. Nếu không lưu, đoạn trích sẽ tự xóa sau 30 giây.

Apple Watch Series 12 với tính năng xem lại hội thoại

Siri Recaps tạo ghi chú tóm tắt

Siri Recaps cho phép đồng hồ nghe hội thoại và tạo ghi chú khái quát. Theo Apple, tính năng này không nhận diện người nói, không lưu âm thanh gốc và không tạo bản chép lời nguyên văn. Thay vào đó, nó đưa ra một câu tóm tắt ngắn cùng các gạch đầu dòng về ý chính, có thể gồm ngày tháng, thời hạn, giá cả, thông tin thanh toán và những dữ kiện liên quan khác.

Apple nêu các tình huống sử dụng như cuộc họp công việc, buổi trao đổi giữa phụ huynh và giáo viên, hoặc buổi tập với huấn luyện viên cá nhân. Ghi chú có thể hữu ích khi người dùng không thể tự viết, chẳng hạn vì đang bận tay hoặc cần tập trung lắng nghe. Siri Recaps không ghi lại hội thoại khi người dùng nghe nhạc bằng tai nghe hoặc sử dụng tính năng khử tiếng ồn của tai nghe.

Khi tính năng được bật, người dùng được nhắc xem lại các bản tóm tắt đã lưu và quyết định bản nào cần giữ. Có thể lưu ghi chú vào ứng dụng Ghi chú hoặc xuất sang ứng dụng Nhật ký nếu nội dung mang tính cá nhân. Nếu không thực hiện thao tác nào, bản tóm tắt sẽ tự xóa trong vòng bảy ngày. Lời nhắc xem lại cũng xuất hiện khi người dùng mở khóa Apple Watch lần đầu vào buổi sáng.

Người dùng có thể bật Siri Recaps theo cách thủ công hoặc đặt lịch, chẳng hạn chỉ cho phép tính năng hoạt động trong giờ làm việc và không chạy vào ban đêm. Dù đã đặt lịch, người dùng vẫn có thể tắt tính năng bất kỳ lúc nào từ Trung tâm điều khiển. Apple cho biết Siri Recaps được thiết kế để loại bỏ thông tin nhạy cảm như mã định danh do chính phủ cấp, dữ liệu tài chính và xác thực, một số thông tin nhận dạng cá nhân, cùng ngôn từ cổ súy hành vi tự làm hại bản thân.

Cách Apple xử lý âm thanh

Audio Intelligence kết hợp phần cứng, phần mềm và dịch vụ của Apple, gồm chip S11, micro tích hợp, các mô hình Apple Intelligence chạy trên iPhone và Private Cloud Compute (PCC), dịch vụ điện toán đám mây riêng của Apple.

Bộ xử lý luôn bật có vùng bảo mật Secure Enclave — bộ nhớ được bảo vệ bằng phần cứng, tách biệt với phần còn lại của hệ điều hành. Bộ đệm âm thanh chuyên dụng xử lý âm thanh gốc tại đây. Theo Apple, âm thanh không thể được truy cập bởi người khác, kể cả Apple; chỉ iPhone đã ghép đôi với đồng hồ mới nhận được dữ liệu qua cơ chế kết nối bảo mật.

Các mô hình AI nhẹ chạy trên chip S11 phát hiện khi người đeo đang tham gia một cuộc hội thoại, sau đó chuyển dữ liệu đến vùng bảo mật trên iPhone. iPhone xử lý âm thanh ngay trên thiết bị để tạo văn bản rút gọn, loại bỏ những từ đệm. Phần văn bản này được mã hóa và gửi đến PCC để tạo bản tóm tắt, rồi kết quả được chuyển lại điện thoại. Apple cho biết bản tóm tắt và dữ liệu tóm lược dùng để tạo ra nó sẽ bị xóa khỏi PCC ngay sau đó.

Các bản tóm tắt trên iPhone chỉ người dùng truy cập được, không phải Apple; nội dung cũng được mã hóa khi đồng bộ giữa các thiết bị Apple. Live Rewind cũng chuyển âm thanh sang iPhone để xử lý và tạo đoạn trích 15 giây.

Apple Watch Series 12 cùng iPhone và Siri Recaps

Apple cho biết các tính năng này không ảnh hưởng đến thời lượng pin của đồng hồ hoặc điện thoại. Sau giai đoạn thử nghiệm dành cho nhà phát triển, chúng sẽ được đưa ra beta công khai trước khi phát hành cho mọi người dùng.

Góc nhìn

Live Rewind và Siri Recaps có thể giúp người dùng ghi nhớ thông tin mà không cần dừng cuộc trò chuyện để ghi chép. Tuy nhiên, vì các tính năng có thể xử lý lời nói của những người xung quanh, tín hiệu âm thanh và hình ảnh khi bắt đầu ghi, cùng các lựa chọn bật, tắt và xóa dữ liệu, sẽ là những điểm quan trọng trong trải nghiệm thực tế.

Với nhà phát triển và doanh nghiệp, cách Apple phân chia quy trình giữa Apple Watch, iPhone và PCC cho thấy AI xử lý hội thoại có thể kết hợp tính toán trên thiết bị với điện toán đám mây. Mức độ hữu ích của cách tiếp cận này sẽ phụ thuộc vào khả năng tạo tóm tắt chính xác, đồng thời duy trì các giới hạn về quyền riêng tư như Apple mô tả.