LexReward: A Taxonomy-Driven Reward Framework for Legal Language Models

Cet article présente LexReward, un cadre basé sur une taxonomie pour la modélisation de récompense juridique. Le cadre caractérise la qualité des réponses juridiques selon trois dimensions : Style, Élément et Chaîne. Les auteurs développent des grilles d'évaluation pour chaque dimension afin de générer des données de préférence par paires pour le DPO et l'entraînement du modèle de récompense. Les expériences démontrent que les modèles de récompense appris, LexRM, améliorent les performances de la politique par apprentissage par renforcement sans nécessiter de réponses de référence.