Đánh giá tỷ lệ từ chối an toàn trên các bảng xếp hạng tác nhân lập trình

Evaluating safety refusal rates on coding agent benchmarks

Artificial Analysis tích hợp tính năng báo cáo tỷ lệ từ chối an toàn vào phiên bản 1.5 của bộ chỉ số Tác nhân Lập trình nhằm giải thích sự khác biệt về hành vi giữa các mô hình. Dữ liệu cho thấy các mô hình khác nhau có tỷ lệ từ chối an toàn đáng chú ý khi thực hiện các tác vụ lập trình.