Do Implicit Personalization and Explicit Styles Conflict? PsPLUG: A Lightweight Plug-in for Balancing Personalization and Style in Customized LLMs
Nghiên cứu chỉ ra rằng các chỉ dẫn phong cách rõ ràng (explicit style instructions) thường làm suy yếu các đặc trưng riêng của user mà hệ thống cá nhân hóa cố gắng duy trì, hiện tượng này được gọi là personalization collapse. Để giải quyết mâu thuẫn giữa sở thích ẩn và phong cách tường minh, nhóm tác giả đề xuất PsPLUG, một plug-in trọng lượng nhẹ học phần dư đặc trưng của user sau khi đã trừ đi phong cách được yêu cầu. Hơn nữa, PsPLUG cho phép kỹ sư điều chỉnh cường độ cá nhân hóa ngay tại thời điểm inference. Kết quả thực nghiệm cho thấy phương pháp này vừa giữ gìn tốt sở thích user vừa kiểm soát chính xác mức độ tuân thủ phong cách.
Chỉ dẫn phong cách rõ ràng có thể gây ra personalization collapse, làm suy yếu sở thích cá nhân hóa của user.
PsPLUG là một lightweight plug-in học user-specific residual sau khi loại bỏ phần style được yêu cầu.
PsPLUG hỗ trợ tune personalization strength trực tiếp tại thời điểm inference.