Yann LeCun dự đoán LLM sẽ lỗi thời trong 5 năm tới và đang phát triển kiến trúc JEPA

-  Yann LeCun, nhà khoa học AI trưởng của Meta và người đoạt giải Turing, dự đoán mô hình ngôn ngữ lớn (LLM) như ChatGPT, Gemini, Llama và Claude sẽ lỗi thời trong vòng 5 năm tới.

-  LeCun và đồng nghiệp tại Meta và NYU đang phát triển kiến trúc JEPA (Joint Embedding Predictive Architecture) với mục tiêu tạo ra hệ thống AI thế hệ mới có khả năng lập luận và lập kế hoạch tốt hơn trong 3-5 năm tới.

-  Ông khuyên các nhà phát triển trẻ: "Đừng làm việc với LLM. Những mô hình này đang trong tay các công ty lớn, bạn không thể mang lại điều gì mới. Hãy làm việc với hệ thống AI thế hệ tiếp theo để vượt qua giới hạn của LLM."

-  Theo LeCun, LLM hiện tại hoạt động trong không gian rời rạc đơn giản (ngôn ngữ) nhưng thiếu hiểu biết thực sự về thế giới vật lý mà con người và động vật dễ dàng điều hướng.

-  LeCun chỉ ra nghịch lý Moravec: AI dễ dàng thực hiện các kỹ năng bậc cao như chơi cờ vua hoặc vượt qua các bài kiểm tra tiêu chuẩn, nhưng lại khó khăn với các khả năng cơ bản của con người như nhận thức và di chuyển.

-  Ông nhấn mạnh rằng con người xử lý lượng dữ liệu lớn hơn nhiều so với các hệ thống AI hiện đại. Một đứa trẻ 4 tuổi đã tiếp nhận khoảng 10^14 byte dữ liệu thị giác chỉ trong 4 năm, trong khi LLM lớn cũng được đào tạo trên khoảng 10^14 byte dữ liệu văn bản.

-  LeCun định nghĩa trí thông minh là khả năng thu thập kỹ năng mới nhanh chóng và áp dụng kiến thức hiện có vào tình huống mới. Ông minh họa: "Một thanh niên 17 tuổi có thể học lái xe trong khoảng 20 giờ thực hành, trong khi chúng ta có hàng triệu giờ dữ liệu đào tạo về lái xe nhưng vẫn chưa có xe tự lái hoàn chỉnh."

-  Phương pháp JEPA của LeCun nhằm tạo ra biểu diễn của thế giới vật lý dựa trên đầu vào hình ảnh. Mô hình V-JEPA gần đây của Meta có thể hoàn thành các video bị che khuất một phần và phát hiện khi điều gì đó phi lý xảy ra.

-  Khác với nhiều chuyên gia AI, LeCun không lo ngại về rủi ro hiện sinh từ AI. Ông tin rằng AI sẽ tạo thành một hệ sinh thái tự điều chỉnh và con người sẽ chuyển sang vai trò quản lý hơn.

-  LeCun ủng hộ mạnh mẽ việc phát triển nguồn mở cho công nghệ AI, cho rằng đây là cách duy nhất để các quốc gia có thể xây dựng chủ quyền AI của riêng họ.

📌 Yann LeCun, nhà khoa học AI hàng đầu của Meta, dự đoán LLM sẽ lỗi thời trong 5 năm tới và đang phát triển kiến trúc JEPA tạo ra AI thế hệ mới có khả năng hiểu thế giới thực. Ông tin rằng AI sẽ tăng cường trí tuệ con người, không thay thế, và không đồng ý với các lo ngại về rủi ro hiện sinh.

https://www.newsweek.com/ai-impact-interview-yann-lecun-artificial-intelligence-2054237