Meta ra mắt Muse Spark Open: Mô hình đa phương thức 816B tham số

Meta đã phát hành Muse Spark Open, một mô hình mở đa phương thức nguyên bản với tổng cộng 816 tỷ tham số và cửa sổ ngữ cảnh 1 triệu token, được thiết kế đặc biệt cho việc tạo mã và cộng tác giữa các tác nhân AI. Trọng số của mô hình hiện đã được công khai trên Hugging Face và các nền tảng lớn khác theo giấy phép thương mại hạn chế. Được Meta tuyên bố là mô hình trọng số mở mạnh mẽ nhất tại Mỹ cho đến nay, sản phẩm này thiết lập một chuẩn mực mới cho AI nguồn mở trong việc xử lý các tác vụ dài hạn và kỹ thuật phần mềm phức tạp. Khả năng hỗ trợ toàn hệ sinh thái và chạy cục bộ của nó giúp phổ biến hóa nghiên cứu AI tiên tiến và việc triển khai trong doanh nghiệp. Muse Spark Open sử dụng kiến trúc tổng cộng 816 tỷ tham số với 42 tỷ tham số hoạt động, và có thể chạy cục bộ trên môi trường máy bàn bằng cách sử dụng hai chip Apple M5 Ultra nhờ khung làm việc MLX. Mô hình này cũng tương thích với các công cụ suy luận phổ biến như vLLM, SGLang và TensorRT-LLM.