Bài viết trên Reddit đặt nghi vấn về tính đột phá của kiến trúc AI JEPA từ Yann LeCun
Một người dùng trên Reddit đã gợi lên thảo luận khi nghi ngờ sự chú ý dành cho JEPA (Kiến trúc Dự đoán Nhúng Chung), cho rằng các mạng thần kinh cơ bản đã có khả năng tương tự từ nhiều năm trước. Bài viết phản ánh cuộc tranh luận đang diễn ra trong cộng đồng AI về việc liệu các mô hình thế giới mới có thực sự đại diện cho bước tiến lớn so với các phương pháp học tự giám sát truyền thống hay không. JEPA cố gắng học các biểu diễn có cấu trúc của thế giới bằng cách dự đoán các nhúng (embedding) trừu tượng thay vì tái tạo điểm ảnh hoặc token thô. Những người hoài nghi cho rằng việc học biểu diễn trong không gian ẩn không phải là điều hoàn toàn mới và đã được nghiên cứu từ lâu trong học máy.
## KIẾN THỨC NỀN
Được tiên phong bởi Yann LeCun và Meta AI, Joint Embedding Predictive Architecture (JEPA) là một khung học tự giám sát được thiết kế để xây dựng các 'mô hình thế giới' hiệu quả. Các mô hình như I-JEPA (dành cho hình ảnh) và V-JEPA (dành cho video) tập trung vào việc dự đoán biểu diễn ẩn cấp cao nhằm giúp hệ thống AI đạt được hiểu biết mang tính thực tế mà không cần tạo ra dữ liệu thô.