Black Forest Labs công bố mô hình dòng đa phương thức FLUX 3
Black Forest Labs đã công bố FLUX 3, một mô hình biên đa phương thức thống nhất có khả năng học đồng thời từ hình ảnh, video, âm thanh và các tác vụ dự đoán hành động. Mô hình này hiện đã có sẵn dưới dạng Early Access và hướng tới việc xây dựng một biểu diễn thế giới duy nhất. Đây là bước tiến quan trọng đối với dòng mô hình FLUX phổ biến, chuyển đổi từ tạo ảnh từ văn bản sang một hệ thống đa phương thức thống nhất. Điều này có thể mở đường cho việc tạo nội dung chéo phương thức mạch lạc hơn và dự đoán hành động trong môi trường thực tế. FLUX 3 sử dụng các mô hình dòng đa phương thức để tích hợp các loại dữ liệu khác nhau vào một biểu diễn duy nhất. Mô hình được thiết kế để tạo ra các tác phẩm có độ chân thực cao theo nhiều phong cách khác nhau và hiện có thể truy cập thông qua chương trình Early Access.
## KIẾN THỨC NỀN
Các mô hình đa phương thức tích hợp nhiều loại dữ liệu như văn bản, hình ảnh và âm thanh vào một mạng thống nhất. Khớp dòng (Flow matching) là một khung mô hình hóa tạo sinh không cần mô phỏng, sử dụng các phương trình vi phân thường (ODE) để biến đổi nhiễu thành phân phối dữ liệu, mang lại giải pháp thay thế hiệu quả cho các mô hình khuếch tán truyền thống.