Tại buổi nói chuyện, Sutskever đã đưa ra một tuyên bố đáng chú ý rằng “pha huấn luyện trước như chúng ta biết chắc chắn sẽ kết thúc.” Đây là giai đoạn đầu tiên trong phát triển mô hình AI, nơi các mô hình ngôn ngữ lớn học các mô hình từ một khối lượng lớn dữ liệu chưa được gắn nhãn — thường là văn bản từ internet, sách và các nguồn khác. Theo ông, ngành công nghiệp AI đang gặp phải sự cạn kiệt về dữ liệu mới để huấn luyện, tạo ra một sự chuyển dịch khỏi phương thức máy móc đã huấn luyện cho đến nay. Ông so sánh tình hình này với nguồn nhiên liệu hóa thạch: cũng giống như dầu là một nguồn tài nguyên hữu hạn, internet chỉ chứa một lượng nội dung do con người tạo ra nhất định.

Sutskever cũng dự đoán rằng các mô hình thế hệ tiếp theo sẽ có khả năng hoạt động tự động thực sự. Dù không định nghĩa rõ ràng, nhưng trong lĩnh vực AI, “agentic” được hiểu là hệ thống AI tự trị có thể thực hiện nhiệm vụ, đưa ra quyết định và tương tác với phần mềm một cách độc lập. Ngoài việc “agentic,” ông cho biết các hệ thống tương lai cũng sẽ có khả năng lý luận. Không giống như AI ngày nay, chủ yếu dựa vào nhận dạng mẫu, các hệ thống AI trong tương lai sẽ có khả năng giải quyết vấn đề chi tiết hơn, gần giống với cách suy nghĩ thực sự của con người.

Sutskever đã so sánh sự không thể dự đoán của các hệ thống thực sự lý luận với cách các AI chơi cờ tiên tiến có thể vượt qua những vận động viên cờ vua giỏi nhất thế giới. “Chúng sẽ hiểu các vấn đề từ dữ liệu hạn chế,” ông nói, “và không bị lúng túng.” Ông cũng liên hệ việc mở rộng quy mô các hệ thống AI với sinh học tiến hóa, trích dẫn nghiên cứu cho thấy mối quan hệ giữa não và khối lượng cơ thể qua các loài. Ông lưu ý rằng trong khi hầu hết động vật có vú tuân theo một mô hình tỷ lệ nhất định, các loài tiền nhân (tổ tiên loài người) lại cho thấy một tỷ lệ khác biệt rõ rệt về tỉ lệ khối lượng não trên cơ thể.

Khép lại bài phát biểu của mình, khi được hỏi câu hỏi làm thế nào các nhà nghiên cứu có thể tạo ra các cơ chế khuyến khích đúng đắn để AI có thể cùng chia sẻ “sự tự do mà chúng ta có với tư cách là Homo sapiens”, Sutskever cho biết đây là những câu hỏi mà con người nên suy ngẫm nhiều hơn. Ông thừa nhận rằng bản thân không tự tin trả lời những câu hỏi như vậy vì sẽ cần một “cấu trúc chính phủ từ trên xuống.” Khi một khán giả đề cập đến tiền điện tử làm giải pháp, Sutskever mỉm cười và nói rằng “đó có thể không phải là kết quả tồi nếu AI và con người có thể tồn tại hòa bình và cùng có quyền lợi. Có thể sẽ ổn thôi… mọi thứ quá không thể đoán trước để có thể đưa ra nhận định nhưng tôi khuyến khích mọi người suy nghĩ tường tận về vấn đề này.”

The post Ilya Sutskever và sự thay đổi trong ngành trí tuệ nhân tạo appeared first on Nhật Phúc.

Sutskever nhấn mạnh rằng giai đoạn tiền huấn luyện (pre-training) sẽ sớm kết thúc do đã đạt đến “đỉnh dữ liệu”. Ông cho rằng chúng ta đang khai thác hết dữ liệu mới từ internet và điều này sẽ buộc các mô hình AI tương lai thay đổi cách thức phát triển. Ông so sánh việc này với năng lượng hóa thạch: “Cũng như dầu mỏ là nguồn tài nguyên có hạn, internet cũng chỉ có một số lượng nhất định về nội dung do con người tạo ra.” Điều đó có nghĩa là chúng ta phải tận dụng những dữ liệu hiện có mà không dựa vào việc bổ sung thêm từ bên ngoài.

Dự báo về các mô hình AI thế hệ tiếp theo, Sutskever cho rằng chúng sẽ có khả năng tự chủ hơn, hay còn gọi là ‘agentic.’ Những hệ thống này sẽ có khả năng lý luận thay vì chỉ kết hợp mẫu dựa trên dữ liệu đã thấy trước đó. Ông nhấn mạnh rằng khi hệ thống tự lý luận tốt hơn, chúng sẽ trở nên khó dự đoán hơn, tương tự như các hệ thống AI chơi cờ đỉnh cao ngày nay trở thành một bài toán thách thức đối với các kỳ thủ giỏi nhất.

Sutskever cũng gợi ý rằng AI có thể tìm ra những cách tiếp cận mới để mở rộng, không giống như cách mà huấn luyện trước đây. Điều này giống như tiến hóa đã tìm ra mô hình tỷ lệ khối lượng não và cơ thể mới cho các loài hominid. Qua đó, AI cũng có thể phát hiện các quy mô mới, xa hơn so với cách thức huấn luyện truyền thống đang sử dụng.

Câu hỏi cuối cùng trong buổi hội thảo liên quan đến khả năng tạo ra các cơ chế khuyến khích đúng đắn để AI phát triển một cách nhân văn đã khiến Sutskever ngập ngừng suy nghĩ. Ông thừa nhận cần có một cấu trúc chính phủ toàn diện để giải quyết vấn đề này và không dám khẳng định về vai trò của tiền điện tử nhưng hy vọng rằng nếu AI có thể tồn tại hòa bình cùng con người và có quyền lợi riêng, đó sẽ là kết quả không tệ. Ông kêu gọi mọi người tiếp tục suy ngẫm và tưởng tượng về viễn cảnh tương lai này.

The post Ilya Sutskever dự báo tương lai đầy “giới hạn” của dữ liệu AI appeared first on Nhật Phúc.