XPeng Kích Hoạt Chip Turing AI Thứ Ba và Triển Khai Mô Hình VLA+VLM
XPeng đã công bố kích hoạt thành công chip Turing AI tự phát triển thứ ba và triển khai mô hình hợp nhất đa miền VLA+VLM thế hệ thứ hai. Sự tích hợp này mang lại các khả năng AI tiên tiến trên xe, bao gồm cấu trúc giọng nói trong khoang lái được tái cấu trúc để hỗ trợ các tác vụ lái xe, đỗ xe và điều hướng phức tạp. Cột mốc này làm nổi bật sự tiến bộ nhanh chóng của AI biên trong xe tự hành, cho thấy cách chip tự thiết kế có thể chạy các mô hình đa phương thức lớn cục bộ để cải thiện khả năng ra quyết định theo thời gian thực. Bằng cách giảm sự phụ thuộc vào phần cứng bên ngoài, XPeng củng cố sự tích hợp dọc và khả năng cạnh tranh trong thị trường xe điện thông minh. Chip Turing AI sở hữu 40 lõi có khả năng chạy các mô hình AI lên tới 30 tỷ tham số, và XPeng có kế hoạch trang bị ít nhất ba chip này trên các dòng xe tương lai. Mô hình VLA+VLM mới hỗ trợ đỗ xe bên đường bằng giọng nói, đỗ xe gần đó và lập kế hoạch lộ trình phức tạp.
## KIẾN THỨC NỀN
Mô hình Ngôn ngữ - Thị giác (VLM) kết hợp thị giác máy tính với các mô hình ngôn ngữ lớn để xử lý cả hình ảnh và văn bản. Mô hình Thị giác - Ngôn ngữ - Hành động (VLA) tiến thêm một bước bằng cách dịch các đầu vào đa phương thức này trực tiếp thành các hành động vật lý, điều này rất quan trọng đối với robot và xe tự hành. Các chip ô tô tùy chỉnh như Turing của XPeng được thiết kế để chạy các mô hình nặng về tính toán này trực tiếp trên phần cứng biên của xe mà không cần phụ thuộc vào xử lý đám mây.