Tactile-JEPA: Topology-Aware Self-Supervised Representation Learning for Distributed Tactile Sensors

Bài báo giới thiệu Tactile-JEPA, một phương pháp pre-training tự giám sát tận dụng sắp xếp không gian của các cảm biến xúc giác để học các biểu diễn nhận thức topology. Phương pháp này dự đoán các embedding của phần tử cảm biến bị ẩn (masked) từ phần còn lại dựa trên đồ thị kết nối cảm biến, đồng thời áp dụng masking đa tỷ lệ (dual-scale) để nắm bắt cả chi tiết tiếp xúc cục bộ lẫn trạng thái toàn cục của bề mặt xúc giác. Kết quả thực nghiệm trên ba bộ dữ liệu đa dạng cho thấy Tactile-JEPA cải thiện đáng kể độ chính xác so với các state-of-the-art trước đó.

Tactile-JEPA giảm force estimation error đi 6.3% so với prior state-of-the-art.

In-hand orientation error giảm đi 20.8% nhờ phương pháp biểu diễn mới.

Phương pháp mang lại cải thiện nhất quán trong các ứng dụng hạ lưu bao gồm cả policy learning.