Các nhà nghiên cứu đánh giá đàn tác nhân AI đa tác nhân trong trò chơi trám thám thời Victoria

Các nhà nghiên cứu đã phát triển một trò chơi thám tử thời kỳ Victoria ở London để đánh giá xem một nhóm tác nhân AI nhỏ được điều phối bởi một mô hình suy luận có thể giải quyết các vụ án mạng được tạo tự động tốt hơn một mô hình đơn lẻ hay không. Hệ thống đã thử nghiệm nhiều cấu hình khác nhau, so sánh sự kết hợp giữa mô hình lãnh đạo cấu trúc với các tác nhân tìm kiếm đối với các mô hình suy luận lớn đơn lẻ và các đàn không có người lãnh đạo. Nghiên cứu này cung cấp cái nhìn thực nghiệm về điểm mạnh và điểm yếu của các hệ thống LLM đa tác nhân so với các mô hình lớn đơn lẻ, làm nổi bật cách sự phân chia lao động giữa các tác nhân tìm kiếm song song và bộ suy luận tập trung cải thiện khả năng giải quyết vấn đề. Những phát hiện này giúp định hướng thiết kế các kiến trúc tác nhân hiệu quả hơn cho các tác vụ phức tạp, dày đặc thông tin. Trong các bài kiểm tra có bằng chứng giả và nhân chứng bị mua chuộc, thiết lập kết hợp giữa nhà lãnh đạo suy luận mạnh mẽ với một nhóm tác nhân tìm kiếm đã đạt tỷ lệ thành công 93%, trong khi một nhóm không có lãnh đạo thất bại hoàn toàn do đồng thuận sớm dựa trên các manh mối sai. Trong khi đó, một mô hình suy luận đơn lẻ gặp khó khăn do thiếu khả năng vật lý để ghé thăm đủ số lượng địa chỉ trong thời hạn giới hạn.