Cộng đồng đề xuất kiểm thử đại lý AI với kỳ thi chứng chỉ SOLIDWORKS CSWA
Một người dùng Reddit trên r/LocalLLaMA đã đặt câu hỏi đề xuất đánh giá các đại lý AI trên kỳ thi chứng chỉ Certified SOLIDWORKS Associate (CSWA). Người dùng lưu ý rằng mặc dù các mô hình AI đang cải thiện trên những bộ kiểm thử như Parametric CAD Bench, việc thử nghiệm chúng trên các kỳ thi CAD chuyên nghiệp chuẩn hóa có thể mang lại thước đo thực tế hơn về năng lực của chúng. Việc chuyển đổi các bộ kiểm thử AI từ các tập dữ liệu text-to-CAD nhân tạo sang các kỳ thi chứng chỉ kỹ thuật thực tế có thể giúp xác định xem các đại lý AI có thể xử lý những tác vụ thiết kế cơ khí trong thực tế hay không. Điều này thể hiện sự quan tâm ngày càng tăng đối với việc áp dụng các đại lý tự hành dựa trên LLM vào quy trình thiết kế máy tính (CAD) chuyên nghiệp. Mục tiêu kiểm thử được đề xuất là bài thi mẫu CSWA chính thức, yêu cầu thí sinh dựng mô hình các chi tiết cơ khí 3D từ bản vẽ 2D và tính toán các đặc tính hình học. Hiện tại, chưa có kết quả kiểm thử chính thức nào được công bố nhằm đánh giá cụ thể các đại lý AI đa phương thức hoặc tạo mã lệnh đối với bộ đề thi CSWA hoàn chỉnh.
## KIẾN THỨC NỀN
Chứng chỉ Certified SOLIDWORKS Associate (CSWA) là một chứng chỉ được công nhận trong ngành nhằm kiểm tra kỹ năng cơ bản về dựng mô hình cơ khí tham số 3D và phác thảo 2D bằng phần mềm SOLIDWORKS. Trong khi đó, các bộ kiểm thử như Parametric CAD Bench đánh giá khả năng của các mô hình ngôn ngữ lớn trong việc tạo mã hoặc thiết kế CAD tham số từ mô tả bằng văn bản.