Bạn có bao giờ tham gia tranh luận với bot của OpenAI và thấy chúng đặc biệt thuyết phục? Có một lý do chính đáng đằng sau khả năng ấn tượng này. OpenAI đã tiết lộ rằng để huấn luyện một số mô hình AI mạnh mẽ nhất thế giới, họ đã sử dụng một subreddit chuyên về tranh luận và đối thoại, để thuật toán học hỏi và phát triển khả năng lập luận.
Giao diện chính ChatGPT, mô hình AI của OpenAI
OpenAI Đào Tạo Khả Năng Lập Luận của AI Thông Qua “Change My View”
Theo báo cáo từ TechCrunch, OpenAI đã ra mắt mô hình o3-mini mới và trong thông báo này, họ tiết lộ phương pháp độc đáo để đào tạo khả năng suy luận của AI. Cụ thể, mô hình được đưa đến subreddit /r/changemyview để thu thập thông tin và học hỏi từ các cuộc tranh luận tại đây.
Nếu bạn chưa từng ghé thăm, /r/changemyview là một cộng đồng Reddit dành riêng cho các cuộc tranh luận và đối thoại, nhưng với một quy tắc đặc biệt. Bất kỳ ai cũng có thể đăng một chủ đề để tranh luận, nhưng họ phải sẵn sàng tiếp thu các lập luận từ người khác. Người đăng bài gốc được phép bảo vệ và tranh luận lại trong phần bình luận, nhưng nguyên tắc chính là họ phải cởi mở để quan điểm của mình được phân tích một cách xây dựng. Đó là lý do cái tên “change my view” (thay đổi quan điểm của tôi) ra đời.
Mô hình ChatGPT hoạt động trên laptop Windows 11, minh họa khả năng tương tác của AI
Hóa ra, nội dung từ subreddit này là một “mỏ vàng” cho OpenAI. Sau khi cho AI tự do duyệt các cuộc tranh luận, OpenAI sẽ cung cấp cho mô hình một chủ đề ví dụ và yêu cầu nó tạo ra các lập luận nhằm thuyết phục người đăng bài gốc thay đổi quan điểm. Các phản hồi do AI tạo ra không được đăng công khai mà được trình chiếu cho con người để đánh giá độ tin cậy. Những lập luận chất lượng cao sau đó được sử dụng để tinh chỉnh ChatGPT sâu hơn.
Vậy đó là cách mà các lập luận trên /r/changemyview đã góp phần vào việc phát triển các mô hình AI có khả năng thuyết phục như ChatGPT. Điều này cho thấy sự phức tạp và đa dạng của các nguồn dữ liệu mà các công ty công nghệ lớn sử dụng để phát triển trí tuệ nhân tạo.
Nếu bạn quan tâm đến cách AI học hỏi và phát triển những kỹ năng độc đáo, đừng ngần ngại chia sẻ suy nghĩ hoặc câu hỏi của mình trong phần bình luận bên dưới!