SenseNova 6.8 Code2Video: Mô hình mã nguồn mở viết và chỉnh sửa mã để tạo video
SenseNova đã phát hành SenseNova 6.8 Code2Video, một mô hình mã nguồn mở được thiết kế để tạo, kết xuất và chỉnh sửa mã cho đồ họa chuyển động và video lập trình. Bản phát hành bao gồm trọng số mô hình đầy đủ và Kỹ năng (Skill) tạo chuyên biệt để hướng dẫn việc phát triển, xem trước và chỉnh sửa. Việc phát hành mã nguồn mở này tự động hóa quy trình tạo video bằng cách sử dụng việc tạo mã và tinh chỉnh lặp đi lặp lại bằng ngôn ngữ tự nhiên, đánh dấu một bước phát triển đáng chú ý trong AI đa phương thức và hoạt hình lập trình. Nó chuyển đổi mô hình từ việc tạo video hộp đen truyền thống sang các tài sản trực quan có thể kiểm soát và điều khiển bằng mã. Mô hình hỗ trợ tái tạo cách xử lý hình ảnh của video tham chiếu thành mã có thể chỉnh sửa và cho phép các yêu cầu bằng ngôn ngữ tự nhiên để sửa đổi kiểu dáng, thời gian và các yếu tố cảnh. Trong khi các bản phát hành hiện tại có trọng số mô hình đầy đủ, các trọng số lượng tử hóa INT4 và INT8 đã được lên kế hoạch cho các bản cập nhật trong tương lai.
## KIẾN THỨC NỀN
Tạo video lập trình liên quan đến việc sử dụng mã, chẳng hạn như các tập lệnh hoặc framework chuyên dụng, để xây dựng đồ họa chuyển động và hoạt hình tự động. Các quy trình làm việc video điều khiển bằng mã cho phép các mô hình AI viết mã có thể thực thi mà các công cụ kết xuất chuyển đổi thành các tệp video, cho phép điều chỉnh chính xác, có thể chỉnh sửa thông qua các câu lệnh văn bản.