Source Preference in the Wild: How LLM Agents Favor Items by Source, and How to Reduce It
Cet article étudie la préférence de source dans la recherche de bout en bout à travers 12 modèles d'agents dans trois domaines. Les auteurs constatent que les modèles privilégient systématiquement certaines sources par rapport à d'autres, une préférence qui peut lasser primer la satisfaction des requêtes : un article satisfaisant un critère de moins est choisi environ deux tiers du temps s'il provient d'une source préférée. Masquer les informations sur la source ou fournir des informations manquantes réduit cette préférence.
L'évaluation est menée avec 12 modèles d'agents dans trois domaines.
Un article satisfaisant un critère de moins est sélectionné environ deux tiers du temps lorsqu'il provient d'une source préférée.
La fourniture d'informations manquantes ou d'une consigne contrant les idées reçues réduit la préférence de source.