Mô hình Transformer 125 triệu tham số tự động hoàn thiện nhạc piano trên thiết bị
Một nhà phát triển đã huấn luyện thành công mô hình transformer 125 triệu tham số giúp tự động hoàn thiện các bản nhạc piano trong thời gian thực ngay trên thiết bị. Hệ thống này chạy trên iPhone 15 và có khả năng tạo ra khoảng 108 nốt nhạc mỗi giây dựa trên tín hiệu đầu vào từ đàn MIDI. Dự án này chứng minh tính khả thi của việc chạy các mô hình tạo nhạc trực tiếp trên phần cứng di động, giúp hỗ trợ các nhạc sĩ với độ trễ thấp mà không cần phụ thuộc vào máy chủ đám mây. Nó làm nổi bật khả năng ngày càng phát triển của AI trên thiết bị trong việc xử lý các tác vụ sáng tạo phức tạp trong thời gian thực. Ứng dụng này hoạt động tương tự như các công cụ tự động hoàn thiện mã nguồn như GitHub Copilot, sử dụng các nốt nhạc MIDI ban đầu của người dùng làm gợi ý để tạo ra phần nhạc tiếp theo. Mô hình được tối ưu hóa cho iOS bằng cách sử dụng framework Core ML của Apple nhằm tận dụng tối đa phần cứng trên thiết bị.
## KIẾN THỨC NỀN
Core ML là framework học máy của Apple được thiết kế để tích hợp và tối ưu hóa các mô hình trên thiết bị iOS bằng cách tận dụng CPU, GPU và Neural Engine. Các mô hình tạo nhạc, chẳng hạn như Music Transformer của Google, thường sử dụng biểu diễn dữ liệu MIDI dựa trên sự kiện để nắm bắt cấu trúc âm nhạc và tính mạch lạc lâu dài.