Khi nào AI nguồn mở mới bắt kịp Project Astra của Google?
Một cuộc thảo luận trên subreddit r/LocalLLaMA đã đặt câu hỏi về thời điểm các mô hình nguồn mở sẽ tái tạo được khả năng đa phương thức theo thời gian thực và độ trễ thấp của Project Astra từ Google. Bài viết phản ánh tâm lý của cộng đồng trước tốc độ phát triển chóng mặt của AI độc quyền. Mặc dù các LLM nguồn mở đã thu hẹp khoảng cách về suy luận văn bản và phân tích hình ảnh tĩnh, việc xử lý luồng đa phương thức theo thời gian thực vẫn là ranh giới công nghệ do các tập đoàn lớn chi phối. Việc hiểu rõ khoảng cách này giúp các nhà phát triển đánh giá đúng giới hạn kỹ thuật hiện tại của các mô hình cục bộ nguồn mở. Project Astra hướng tới mục tiêu trở thành trợ lý AI toàn năng có khả năng xử lý liên tục dữ liệu video, bối cảnh không gian, màn hình và giọng nói với độ trễ thấp. Các mô hình cục bộ nguồn mở hiện gặp nhiều khó khăn để đạt được sự tích hợp âm thanh - hình ảnh thời gian thực tương tự do yêu cầu cao về hạ tầng tính toán và tối ưu hóa độ trễ.
## KIẾN THỨC NỀN
Google DeepMind đã công bố Project Astra dưới dạng mô hình nghiên cứu thử nghiệm nhằm khám phá các khả năng cho trợ lý AI tương lai, cho phép người dùng tương tác tự nhiên qua camera trực tiếp và giọng nói. Ngược lại, cộng đồng AI nguồn mở dựa vào trọng số được chia sẻ công khai và tinh chỉnh từ cộng đồng, vốn thường đi sau các sáng kiến độc quyền trong các tác vụ đa phương thức thời gian thực đòi hỏi nhiều phần cứng.