Removing the NEEDLE in the Haystack: Backdoor Removal in LLMs via Weight Orthogonalisation

Bài báo đề xuất NEEDLE, một phương pháp không cần huấn luyện (training-free) nhằm loại bỏ cửa hậu có mục tiêu trong LLM. Bằng cách ước tính hướng cửa hậu và không gian con từ chối thông qua các vector kích hoạt, phương pháp này áp dụng việc trực giao hóa trọng số tuần tự (sequential weight orthogonalisation) để triệt tiêu cửa hậu mà không gây nhiễu loạn các biểu diễn liên quan đến sự từ chối. Thử nghiệm trên nhiều họ mô hình và kiểu tấn công cho thấy phương pháp đạt tỷ lệ tấn công thành công thấp nhất cùng độ lệch KL tối thiểu.

NEEDLE là phương pháp loại bỏ cửa hậu có mục tiêu mà không cần huấn luyện lại.

Phương pháp này không yêu cầu mô hình tham chiếu sạch hay dữ liệu huấn luyện bị đầu độc ban đầu.

NEEDLE đạt 0% tỷ lệ tấn công thành công trên các cuộc tấn công tiêm nhiễm mã độc.