AxiomicLabs Phát Hành Bộ Đánh Giá 'Tiny Theory of Mind' Cho Các Mô Hình Nhỏ
AxiomicLabs đã ra mắt "Tiny Theory of Mind", một bộ đánh giá mới trên Hugging Face được thiết kế nhằm kiểm tra khả năng suy luận xã hội và nhận thức của các mô hình ngôn ngữ nhỏ. Khi các mô hình ngôn ngữ nhỏ ngày càng được triển khai rộng rãi trên thiết bị di động và công cụ trò chuyện, việc đánh giá nhận thức xã hội của chúng là rất quan trọng để xây dựng các tương tác AI tinh tế hơn. Bộ đánh giá này cung cấp cho các nhà nghiên cứu một công cụ chuyên biệt để kiểm tra khả năng suy luận tâm lý cơ bản mà không cần đến các mô hình quy mô quá lớn. Bộ đánh giá gồm 2.000 câu hỏi trắc nghiệm tổng hợp bao gồm 40 khái niệm nhận thức khác nhau, với độ khó tương đương từ mầm non đến lớp 6 ở người. Bộ dữ liệu được tối ưu hóa cho phương pháp tính điểm xác suất tiếp nối (log-likelihood) của mô hình gốc, cho phép kiểm tra năng lực cốt lõi của mô hình mà không cần tinh chỉnh câu lệnh chuyên biệt.
## KIẾN THỨC NỀN
Thuyết Trí tuệ (Theory of Mind - ToM) là một khái niệm trong tâm lý học nhận thức, chỉ khả năng suy đoán các trạng thái tâm lý—như niềm tin, ý định, mong muốn và cảm xúc—của bản thân và người khác. Trong nghiên cứu trí tuệ nhân tạo, việc đánh giá ToM giúp xác định mức độ mô hình ngôn ngữ có thể hiểu ý định của con người, giải quyết các tình huống mơ hồ và tham gia hiệu quả vào các tương tác xã hội phức tạp.