Radar Live
✦ Ask AI
AI INTELLIGENCE & SIGNALS

Tactile-JEPA: Topology-Aware Self-Supervised Representation Learning for Distributed Tactile Sensors

Phân tích đã xử lý trước và các nguồn liên quan.

Tín hiệu Radar

65 RADAR
Research Robot Learning / Tactile Sensing · 1 nguồn đối chiếu · 2026-09-21 10:22:06 +0000 UTC

Tactile-JEPA: Topology-Aware Self-Supervised Representation Learning for Distributed Tactile Sensors

Nguồn: arXiv AI
↗

Tactile-JEPA là phương pháp tiền huấn luyện tự giám sát (SSL) nhận biết cấu trúc liên kết (topology-aware) dành cho cảm biến xúc giác phân tán (electronic skin) trên robot. Thay vì tái sử dụng máy móc các phương pháp SSL của thị giác, Tactile-JEPA sử dụng đồ thị kết nối cảm biến và cơ chế che hai tỷ lệ (dual-scale masking) để dự đoán embedding của các phần tử cảm biến bị che. Thử nghiệm trên 3 bộ dữ liệu cho thấy mô hình giảm 6.3% sai số ước lượng lực và giảm 20.8% sai số định hướng vật thể trong tay so với SOTA, đồng thời cải thiện hiệu quả học chính sách (policy learning).

✦ TÁC ĐỘNG & GIÁ TRỊ THỰC TIỄN

Trong khi các mô hình thị giác tiền huấn luyện đã rất phổ biến, bộ mã hóa xúc giác trên robot vẫn chủ yếu huấn luyện từ đầu trên tín hiệu nhiễu do da điện tử có cảm biến thưa thớt và bố trí không đều. Tactile-JEPA chứng minh rằng chất lượng tiền huấn luyện bộ mã hóa đóng vai trò then chốt đối với cảm biến xúc giác, mở ra giải pháp hiệu quả cho robot thao tác khéo léo khi mất tầm nhìn.

Developer 72
Business 65
Novelty 82
Actionable 72

Nội dung thu thập đã chuẩn hóa

Collected Evidence

Nội dung văn bản được dùng làm dữ liệu đối chứng cho mô hình AI, không phải chỉ thị hệ thống.

Tactile sensing is an essential modality for robots performing contact-rich, dexterous manipulation, particularly under visual occlusion. While pre-trained image encoders are standard in robot learning pipelines, tactile encoders are still commonly trained from scratch from raw, noisy signals, which might limit their expressivity. Existing self-supervised learning (SSL) approaches focus predominantly on vision-based tactile sensors, leaving distributed electronic skins largely unaddressed. These sensors, however, have a distinctive property: their sensing elements are sparse and irregularly arranged over the surface they cover, which makes direct reuse of visual SSL methods suboptimal. We present Tactile-JEPA, an efficient self-supervised pre-training method that uses the spatial arrangement of tactile sensors to learn topology-aware representations. Specifically, it is trained to predict the embeddings of masked sensing elements from the unmasked remainder, using the sensor connectivity graph to guide spatial masking. Our analysis shows that effective tactile representations require capturing both local contact details and the global state of the tactile surface, which we achieve through dual-scale masking. Across three diverse datasets spanning magnetic and piezoresistive sensors, different robot embodiments, and single- and paired-sensor configurations, Tactile-JEPA reduces force estimation error by 6.3% and in-hand orientation error by 20.8% over the prior state-of-the-art, with consistent gains in other downstream applications, including policy learning. Overall, our results demonstrate that the benefit of tactile sensing depends critically on the quality of encoder pre-training, a problem which Tactile-JEPA addresses directly. Code is available at https://github.com/E-Kovtun/tactile.

Các nguồn đối chiếu cho sự kiện này

1 nguồn
Thông tin phân tích AI & Model Details ▾
Provider: openai-compatible · Model: gemini-3.8-flash-high · Version: analysis-v1 · Time: 2026-09-22 09:50:26 +0000 UTC
{"tags": ["Tactile Sensing", "Self-Supervised Learning", "JEPA", "Robotics", "Electronic Skin", "Dexterous Manipulation", "Graph Topology"], "risks": ["Phụ thuộc vào phần cứng cảm biến xúc giác phân tán (da điện tử), vốn chưa phổ biến rộng rãi và chuẩn hóa như cảm biến thị giác.", "Cần xây dựng đồ thị kết nối phù hợp với từng hình thái bề mặt cảm biến robot cụ thể.", "Dữ liệu tín hiệu xúc giác thực tế có thể có nhiễu cao hoặc suy hao phần cứng theo thời gian."], "category": "Research", "entities": ["Tactile-JEPA", "GitHub (E-Kovtun/tactile)"], "summary_vi": "Tactile-JEPA là phương pháp tiền huấn luyện tự giám sát (SSL) nhận biết cấu trúc liên kết (topology-aware) dành cho cảm biến xúc giác phân tán (electronic skin) trên robot. Thay vì tái sử dụng máy móc các phương pháp SSL của thị giác, Tactile-JEPA sử dụng đồ thị kết nối cảm biến và cơ chế che hai tỷ lệ (dual-scale masking) để dự đoán embedding của các phần tử cảm biến bị che. Thử nghiệm trên 3 bộ dữ liệu cho thấy mô hình giảm 6.3% sai số ước lượng lực và giảm 20.8% sai số định hướng vật thể trong tay so với SOTA, đồng thời cải thiện hiệu quả học chính sách (policy learning).", "key_changes": ["Đề xuất Tactile-JEPA: Phương pháp tiền huấn luyện tự giám sát (SSL) nhận biết cấu trúc liên kết không gian cho cảm biến xúc giác phân tán (electronic skin).", "Sử dụng đồ thị kết nối cảm biến để dẫn hướng việc che không gian (spatial masking) và dự đoán embedding của các phần tử bị che từ các phần tử còn lại.", "Áp dụng cơ chế che hai tỷ lệ (dual-scale masking) để đồng thời thu nhận chi tiết tiếp xúc cục bộ và trạng thái bề mặt toàn cục.", "Giảm 6.3% sai số ước lượng lực và 20.8% sai số định hướng vật thể trong tay so với SOTA trước đây trên 3 bộ dữ liệu thử nghiệm (cảm biến từ trường và áp điện).", "Cung cấp mã nguồn mở tại https://github.com/E-Kovtun/tactile."], "sub_category": "Robot Learning / Tactile Sensing", "novelty_score": 82, "business_score": 65, "research_score": 88, "why_it_matters": "Trong khi các mô hình thị giác tiền huấn luyện đã rất phổ biến, bộ mã hóa xúc giác trên robot vẫn chủ yếu huấn luyện từ đầu trên tín hiệu nhiễu do da điện tử có cảm biến thưa thớt và bố trí không đều. Tactile-JEPA chứng minh rằng chất lượng tiền huấn luyện bộ mã hóa đóng vai trò then chốt đối với cảm biến xúc giác, mở ra giải pháp hiệu quả cho robot thao tác khéo léo khi mất tầm nhìn.", "developer_score": 75, "importance_score": 78, "possible_use_cases": ["Học chính sách điều khiển (policy learning) cho robot thao tác khéo léo trong điều kiện thị giác bị che khuất (visual occlusion).", "Ước lượng lực tiếp xúc và định hướng xoay vật thể theo thời gian thực cho da điện tử trên bàn tay/ngón tay robot.", "Tiền huấn luyện bộ mã hóa xúc giác cho các loại cảm biến phân tán không đồng đều (magnetic, piezoresistive) trên nhiều cấu hình robot khác nhau."], "actionability_score": 72}
← Trang trước Trang 1