Bản mod NPCTalk mang lại trò chuyện AI thời gian thực không kịch bản cho GTA 5

Bản mod mã nguồn mở NPCTalk tích hợp nhiều công nghệ AI để cho phép trò chuyện bằng giọng nói theo thời gian thực, không theo kịch bản và nhận biết ngữ cảnh với các NPC trong GTA 5. Người chơi có thể sử dụng micro để trò chuyện với các nhân vật như cảnh sát và người qua đường, những người sẽ phản hồi bằng giọng nói được nhân bản và cử chỉ thể chất động. Bước đột phá này minh họa sự tích hợp thực tế của các mô hình AI tạo sinh tiên tiến trong ngành trò chơi điện tử, giúp các NPC thoát khỏi các cây hội thoại được ghi âm sẵn cứng nhắc. Đây là một bước tiến quan trọng trong tính tương tác và độ chìm đắm của thế giới ảo, gợi mở cách các trò chơi điện tử trong tương lai có thể xử lý việc kể chuyện động. Hệ thống dựa vào Nemotron ASR của NVIDIA để nhận diện giọng nói, mô hình Qwen để tạo văn bản hội thoại thông qua Cerebras và Fish Audio để nhân bản giọng nói, đạt độ trễ phản hồi khoảng 1,15 đến 2,2 giây. Mặc dù bản mod là mã nguồn mở theo giấy phép MIT, việc chạy nó đòi hỏi cơ sở hạ tầng đám mây và GPU, từ đó phát sinh chi phí vận hành.