EventEgoHands++: Event-based Egocentric 3D Hand Mesh Reconstruction with Real Dataset

Cet article propose EventEgoHands++, un cadre de reconstruction de maillage de main 3D à partir d'un point de vue égocentrique utilisant des caméras à événements pour résoudre les problèmes de bruit de fond et le manque d'informations d'instance. La méthode intègre un détecteur de main pour estimer les boîtes englobantes et les masques pour les mains gauche et droite, combiné à un mécanisme d'attention adaptative pour modérer l'attention en fonction des résultats de détection. Ils construisent également EEH-R, le plus grand ensemble de données réelles comprenant environ 1M de trames annotées.

EEH-R est le plus grand ensemble de données de mains égocentriques à base d'événements du monde réel à ce jour, comprenant environ 1M de trames annotées.