Đánh giá các mô hình ngôn ngữ lớn qua bài kiểm tra La bàn Chính trị
Một người dùng trên subreddit r/LocalLLaMA đã chia sẻ và thảo luận về kết quả thử nghiệm nhiều mô hình ngôn ngữ lớn (LLM) cả thương mại lẫn cục bộ trên bài kiểm tra La bàn Chính trị. Đánh giá này nhằm mục đích xác định định hướng chính trị và các thiên kiến tiềm ẩn của các mô hình trên các khía cạnh kinh tế và xã hội. Việc hiểu rõ thiên kiến của LLM là rất quan trọng khi các mô hình này ngày càng được tích hợp sâu vào các hệ thống ra quyết định và truy xuất thông tin hàng ngày. Đánh giá định hướng chính trị của chúng giúp các nhà phát triển và người dùng nhận diện các thiên kiến hệ thống và cải thiện các chiến lược căn chỉnh AI (AI alignment). Đánh giá này sử dụng bài kiểm tra La bàn Chính trị, giúp lập bản đồ các hệ tư tưởng chính trị lên một lưới hai chiều gồm trục kinh tế tả-hữu và trục xã hội độc tài-tự do. Kết quả so sánh cách các mô hình mã nguồn mở (cục bộ) và mã nguồn đóng (thương mại) khác nhau phản hồi trước các câu hỏi nhạy cảm về chính trị.
## KIẾN THỨC NỀN
La bàn Chính trị (Political Compass) là một công cụ đánh giá trực tuyến phổ biến giúp đo lường các quan điểm chính trị vượt ra ngoài quang phổ tả-hữu một chiều truyền thống. Trong bối cảnh AI, căn chỉnh (alignment) đề cập đến quá trình hướng dẫn các mô hình tuân theo các giá trị nhân văn và nguyên tắc an toàn của con người. Việc đánh giá LLM trên các bài kiểm tra như vậy là một phương pháp phổ biến để phát hiện xem dữ liệu huấn luyện hoặc quá trình tinh chỉnh có vô tình đưa vào các thiên kiến tư tưởng cụ thể hay không.