LG AI Research ra mắt K-EXAONE 2.0 750B A37B, mô hình MoE mã nguồn mở
LG AI Research đã phát hành K-EXAONE 2.0 750B A37B, một mô hình Mixture-of-Experts (MoE) 750 tỷ tham số với 37 tỷ tham số hoạt động. Mô hình này được cấp phép theo giấy phép Apache 2.0 và được tối ưu hóa cho 10 ngôn ngữ, bao gồm cả tiếng Hàn, tiếng Anh và tiếng Việt. Việc phát hành này đại diện cho một đóng góp mã nguồn mở (open-weights) lớn cho hệ sinh thái AI toàn cầu, hỗ trợ các sáng kiến AI chủ quyền và cung cấp khả năng đa ngôn ngữ hiệu suất cao. Nó mang lại một giải pháp thay thế mở và mạnh mẽ cho các mô hình độc quyền trong các tác vụ phức tạp như sử dụng công cụ dạng tác nhân (agentic tool) và suy luận ngữ cảnh dài. Được phát triển trong Giai đoạn 2 của Dự án Mô hình Nền tảng AI Chủ quyền của Hàn Quốc, mô hình này có kích thước lớn gấp ba lần so với phiên bản tiền nhiệm. Nó đạt điểm số thử nghiệm ấn tượng, bao gồm điểm trung bình 94,6 trên các bài kiểm tra an toàn như ROK-Fortress và vượt qua GLM-5.1 trong các tác vụ ngữ cảnh dài.
## KIẾN THỨC NỀN
Dự án Mô hình Nền tảng AI Chủ quyền của Hàn Quốc là một sáng kiến quốc gia nhằm xây dựng năng lực AI độc lập để giảm sự phụ thuộc vào công nghệ nước ngoài. Mixture-of-Experts (MoE) là một kiến trúc AI chỉ kích hoạt một phần nhỏ trong tổng số tham số (trong trường hợp này là 37 tỷ trên tổng số 750 tỷ) cho mỗi đầu vào cụ thể, giúp cải thiện hiệu suất tính toán.