Tactile-JEPA: Topology-Aware Self-Supervised Representation Learning for Distributed Tactile Sensors

L'article présente Tactile-JEPA, une méthode de pré-entraînement auto-supervisée efficace qui exploite l'agencement spatial de capteurs tactiles distribués pour apprendre des représentations conscientes de la topologie. Elle prédit les plongements d'éléments de détection masqués à partir du reste non masqué en utilisant un graphe de connectivité des capteurs, et emploie un masquage à double échelle pour capturer les détails de contact locaux et l'état global de la surface.

Tactile-JEPA réduit l'erreur d'estimation de force de 6.3% par rapport à l'état de l'art précédent.

L'erreur d'orientation en main est réduite de 20.8% par rapport à l'état de l'art précédent.

Des gains constants sont observés dans d'autres applications en aval, y compris l'apprentissage de politiques.