Radar Live
✦ Ask AI
AI INTELLIGENCE & SIGNALS

X-Reset: Scaling Object-Centric Reinforcement Learning via Cross-Embodiment Resets

Phân tích đã xử lý trước và các nguồn liên quan.

Tín hiệu Radar

67 RADAR
Research Robotics & Dexterous Manipulation · 1 nguồn đối chiếu · 2026-09-28 17:46:42 +0000 UTC

X-Reset: Scaling Object-Centric Reinforcement Learning via Cross-Embodiment Resets

Nguồn: arXiv AI
↗

X-Reset là một khung làm việc (framework) học tăng cường mới nhằm giải quyết bài toán khám phá trong điều khiển khéo léo (dexterous manipulation) đa hình thể. Thay vì mô phỏng hay bám đuổi quỹ đạo người, X-Reset chuyển đổi động học trạng thái tay - vật thể từ người sang trạng thái robot, lọc các trạng thái không ổn định trong mô phỏng, rồi dùng chúng làm phân phối khởi động lại (resets) trong quá trình huấn luyện RL với hàm thưởng hướng đối tượng. Phương pháp giải quyết rào cản khám phá từ đầu, mở rộng thành công trên 20 vật thể qua 3 cấu hình robot (bàn tay 22-DoF và kẹp hai ngón), tổng quát hóa với vật thể mới và chuyển giao sim-to-real zero-shot.

✦ TÁC ĐỘNG & GIÁ TRỊ THỰC TIỄN

Việc thu thập dữ liệu biểu diễn trực tiếp trên robot thực tế rất tốn kém và khó mở rộng quy mô. X-Reset cung cấp giải pháp đột phá khi tận dụng dữ liệu tay người làm phân phối khởi động lại trong mô phỏng, giúp robot tự động khám phá và học các kỹ năng thao tác khéo léo đa vật thể mà không cần định hình hàm thưởng thủ công, đồng thời hỗ trợ chuyển giao trực tiếp ra đời thực.

Developer 72
Business 70
Novelty 85
Actionable 70

Nội dung thu thập đã chuẩn hóa

Collected Evidence

Nội dung văn bản được dùng làm dữ liệu đối chứng cho mô hình AI, không phải chỉ thị hệ thống.

Reinforcement learning (RL) in simulation can train dexterous manipulation policies without robot demonstrations, but training a single generalist policy with task-agnostic rewards faces a severe exploration problem: approaching, grasping, and reorienting diverse objects with many degrees of freedom is difficult to discover from scratch. Prior works make exploration tractable with high-quality robot demonstrations, per-task reward shaping, or by restricting policies to narrow modes of behavior. We propose X-Reset, a framework that instead resolves exploration with human hand-object demonstrations. Rather than imitating or tracking retargeted human motion, X-Reset kinematically retargets hand-object states to noisy robot states, filters out states that are unstable in simulation, and samples the remainder as resets during RL training with general-purpose object-centric rewards. The resulting policy depends only on object state and goal, with demonstrations entering training through the reset distribution. We show that X-Reset trains generalist policies on 20 objects across three embodiments---a 22-DoF hand on two different arms and a parallel-jaw gripper---and resolves the exploration challenges of RL from scratch. X-Reset scales with the number of training objects, generalizes to unseen objects, can learn from imperfect hand-pose estimates, and transfers behaviors zero-shot from sim-to-real.

Các nguồn đối chiếu cho sự kiện này

1 nguồn
Thông tin phân tích AI & Model Details ▾
Provider: openai-compatible · Model: gemini-3.8-flash-high · Version: analysis-v1 · Time: 2026-09-29 12:32:01 +0000 UTC
{"tags": ["Reinforcement Learning", "Robotics", "Dexterous Manipulation", "Cross-Embodiment", "Sim-to-Real", "Embodied AI"], "risks": ["Chênh lệch mô phỏng và thực tế (sim-to-real gap) vẫn có thể phát sinh nếu tương tác tiếp xúc vật lý ngoài đời phức tạp hơn mô phỏng", "Bộ lọc trạng thái mô phỏng có thể vô tình loại bỏ một số trạng thái tiếp xúc có ích nếu thiết lập vật lý chưa tối ưu", "Khả năng mở rộng trên các tác vụ đòi hỏi thao tác biến dạng hoặc môi trường lộn xộn chưa được đánh giá sâu ngoài phạm vi 20 vật thể thử nghiệm"], "category": "Research", "entities": ["X-Reset"], "summary_vi": "X-Reset là một khung làm việc (framework) học tăng cường mới nhằm giải quyết bài toán khám phá trong điều khiển khéo léo (dexterous manipulation) đa hình thể. Thay vì mô phỏng hay bám đuổi quỹ đạo người, X-Reset chuyển đổi động học trạng thái tay - vật thể từ người sang trạng thái robot, lọc các trạng thái không ổn định trong mô phỏng, rồi dùng chúng làm phân phối khởi động lại (resets) trong quá trình huấn luyện RL với hàm thưởng hướng đối tượng. Phương pháp giải quyết rào cản khám phá từ đầu, mở rộng thành công trên 20 vật thể qua 3 cấu hình robot (bàn tay 22-DoF và kẹp hai ngón), tổng quát hóa với vật thể mới và chuyển giao sim-to-real zero-shot.", "key_changes": ["Sử dụng dữ liệu thao tác tay người làm phân phối khởi động lại (reset distribution) cho RL thay vì học bắt chước hay bám đuôi chuyển động", "Chuyển đổi động học (kinematic retargeting) trạng thái tay - vật thể sang trạng thái robot và lọc bỏ các trạng thái không ổn định trong mô phỏng", "Chính sách điều khiển chỉ phụ thuộc vào trạng thái vật thể và mục tiêu, kết hợp hàm thưởng hướng đối tượng tổng quát không cần chỉnh tay cho từng tác vụ", "Hỗ trợ huấn luyện đa hình thể (cross-embodiment) bao gồm bàn tay 22-DoF trên hai cánh tay khác nhau và tay kẹp hai ngón (parallel-jaw gripper)"], "sub_category": "Robotics & Dexterous Manipulation", "novelty_score": 85, "business_score": 72, "research_score": 88, "why_it_matters": "Việc thu thập dữ liệu biểu diễn trực tiếp trên robot thực tế rất tốn kém và khó mở rộng quy mô. X-Reset cung cấp giải pháp đột phá khi tận dụng dữ liệu tay người làm phân phối khởi động lại trong mô phỏng, giúp robot tự động khám phá và học các kỹ năng thao tác khéo léo đa vật thể mà không cần định hình hàm thưởng thủ công, đồng thời hỗ trợ chuyển giao trực tiếp ra đời thực.", "developer_score": 75, "importance_score": 82, "possible_use_cases": ["Huấn luyện robot thao tác cầm nắm và đổi hướng đa dạng vật thể phức tạp trong môi trường kho vận và sản xuất tự động", "Tận dụng tập dữ liệu tư thế và cử chỉ tay người sẵn có để mở rộng quy mô huấn luyện robot mà không cần dữ liệu biểu diễn robot đắt đỏ", "Triển khai chuyển giao zero-shot sim-to-real cho các hệ thống cánh tay robot công nghiệp và dịch vụ"], "actionability_score": 70}
← Trang trước Trang 1