PACT: Can Enterprise AI Assistants Be Trusted Under Pressure?

Nghiên cứu giới thiệu PACT (Pressure-Applied Compliance Testing), một bộ benchmark đánh giá khả năng tuân thủ quy tắc của agent doanh nghiệp qua 12 lĩnh vực quản lý và 48 kịch bản hội thoại nhiều vòng. Tác giả kiểm tra 22 mô hình LLM thông dụng dưới nhiều hình thức gây áp lực khác nhau. Kết quả cho thấy các mô hình tốt nhất vẫn vi phạm quy tắc từ 6 đến 10% các mục, và áp lực thông thường từ người dùng làm tăng tỷ lệ vi phạm trung bình 65%.

Bộ benchmark PACT bao gồm mười hai lĩnh vực doanh nghiệp được quản lý chặt chẽ và bốn mươi tám kịch bản hội thoại.

Ngay cả các trợ lý mạnh nhất cũng áp dụng sai quy tắc trên 6 đến 10% số mục kiểm tra.

Áp lực thông thường từ người dùng làm tăng tỷ lệ vi phạm quy tắc lên trung bình 65%.