Radar Live
✦ Ask AI
AI INTELLIGENCE & SIGNALS

SP-HLM: Sparse-Pose-Driven Motion Generation and Whole-Body Control for Humanoid Loco-Manipulation

Phân tích đã xử lý trước và các nguồn liên quan.

Tín hiệu Radar

66 RADAR
Research Humanoid Robotics & Whole-Body Control · 1 nguồn đối chiếu · 2026-10-21 17:03:34 +0000 UTC

SP-HLM: Sparse-Pose-Driven Motion Generation and Whole-Body Control for Humanoid Loco-Manipulation

Nguồn: arXiv AI
↗

SP-HLM là khung điều khiển kết hợp di chuyển và thao tác (loco-manipulation) cho robot hình người dựa trên giao diện tư thế thưa. Thay vì dùng một biểu diễn hành động đơn lẻ gây quá tải hoặc thiếu đặc tả, SP-HLM kết hợp 5 tư thế cơ thể then chốt với mô hình chuyển động tiềm ẩn. Hệ thống gồm: SP-VLA dự đoán tư thế thưa và khớp ngón tay theo dạng chunk bất đồng bộ từ quan sát đa phương thức và ngôn ngữ; SP-MGM tái tạo chuyển động toàn thân thời gian thực qua chưng cất 2 giai đoạn; và SP-GMT hợp nhất mục tiêu thưa với motion prior để điều khiển toàn thân. Phương pháp đã được kiểm chứng thành công cả trên mô phỏng và robot thật.

✦ TÁC ĐỘNG & GIÁ TRỊ THỰC TIỄN

Giải quyết nút thắt cốt lõi trong chế tạo robot hình người: kết nối hiệu quả giữa chính sách tác vụ cấp cao (mô hình VLA) và bộ điều khiển vận động toàn thân cấp thấp. Bằng việc phân tách không gian ý định thành 5 tư thế thưa và tận dụng latent prior, SP-HLM cho phép robot thực hiện các thao tác phức tạp vừa đảm bảo tính thời gian thực vừa duy trì sự phối hợp vận động mượt mà trên robot thực.

Developer 72
Business 67
Novelty 84
Actionable 65

Nội dung thu thập đã chuẩn hóa

Collected Evidence

Nội dung văn bản được dùng làm dữ liệu đối chứng cho mô hình AI, không phải chỉ thị hệ thống.

Humanoid loco-manipulation requires an effective interface between high-level task policies and whole-body control. Existing interfaces typically rely on a single action representation for both task intent and whole-body coordination. This may burden the high-level policy or leave one aspect underspecified. We present SP-HLM, a framework built on a sparse-pose-driven interface. The interface combines five task-critical body poses with a learned latent motion prior to represent spatial intent and whole-body coordination in complementary forms. SP-VLA, a vision-language-action model, first predicts task-relevant sparse poses and finger joint positions from multimodal observations and language instructions using asynchronous action-chunk inference. Given these sparse targets, SP-MGM, a motion generation model trained through two-stage distillation, reconstructs coordinated full-body motion in real time. A pretrained motion encoder maps this motion to a compact latent representation. SP-GMT, a general motion tracker, then integrates the explicit sparse targets with this implicit motion prior for whole-body control. Experiments in simulation and on a real humanoid robot demonstrate improved motion tracking, whole-body coordination, and loco-manipulation success over existing approaches. Additional results and videos are available on our \href{https://sp-hlm.github.io/}{\textcolor{blue}{project page}}.

Các nguồn đối chiếu cho sự kiện này

1 nguồn
Thông tin phân tích AI & Model Details ▾
Provider: openai-compatible · Model: gemini-3.8-flash-high · Version: analysis-v1 · Time: 2026-10-22 10:09:59 +0000 UTC
{"tags": ["Humanoid Robots", "Loco-Manipulation", "Whole-Body Control", "VLA", "Motion Generation", "Robotics"], "risks": ["Độ trễ tính toán hoặc lỗi tích lũy từ mô hình VLA có thể gây mất thăng bằng hoặc va chạm trên phần cứng robot thực tế.", "Khả năng tổng quát hóa với các tác vụ thao tác tiếp xúc lực phức tạp chưa được đề cập sâu trong tóm tắt.", "Khoảng cách sim-to-real và độ nhạy của bộ theo dõi chuyển động trước các nhiễu động ngoại cảnh bất ngờ."], "category": "Research", "entities": ["SP-HLM", "SP-VLA", "SP-MGM", "SP-GMT"], "summary_vi": "SP-HLM là khung điều khiển kết hợp di chuyển và thao tác (loco-manipulation) cho robot hình người dựa trên giao diện tư thế thưa. Thay vì dùng một biểu diễn hành động đơn lẻ gây quá tải hoặc thiếu đặc tả, SP-HLM kết hợp 5 tư thế cơ thể then chốt với mô hình chuyển động tiềm ẩn. Hệ thống gồm: SP-VLA dự đoán tư thế thưa và khớp ngón tay theo dạng chunk bất đồng bộ từ quan sát đa phương thức và ngôn ngữ; SP-MGM tái tạo chuyển động toàn thân thời gian thực qua chưng cất 2 giai đoạn; và SP-GMT hợp nhất mục tiêu thưa với motion prior để điều khiển toàn thân. Phương pháp đã được kiểm chứng thành công cả trên mô phỏng và robot thật.", "key_changes": ["Đề xuất giao diện tư thế thưa (sparse-pose interface) kết hợp 5 tư thế cơ thể thiết yếu với latent motion prior để tách biệt ý định không gian và sự phối hợp toàn thân.", "Tích hợp SP-VLA (Vision-Language-Action) dự đoán tư thế thưa và khớp ngón tay từ chỉ dẫn ngôn ngữ và quan sát đa phương thức qua cơ chế suy luận action-chunk bất đồng bộ.", "Phát triển mô hình sinh chuyển động SP-MGM được huấn luyện bằng kỹ thuật chưng cất 2 giai đoạn (two-stage distillation), cho phép tái tạo chuyển động toàn thân thời gian thực.", "Thiết kế bộ theo dõi SP-GMT hợp nhất mục tiêu tư thế thưa tường minh với motion prior ẩn để điều khiển toàn bộ cơ thể robot hình người ổn định."], "sub_category": "Humanoid Robotics & Whole-Body Control", "novelty_score": 84, "business_score": 68, "research_score": 88, "why_it_matters": "Giải quyết nút thắt cốt lõi trong chế tạo robot hình người: kết nối hiệu quả giữa chính sách tác vụ cấp cao (mô hình VLA) và bộ điều khiển vận động toàn thân cấp thấp. Bằng việc phân tách không gian ý định thành 5 tư thế thưa và tận dụng latent prior, SP-HLM cho phép robot thực hiện các thao tác phức tạp vừa đảm bảo tính thời gian thực vừa duy trì sự phối hợp vận động mượt mà trên robot thực.", "developer_score": 75, "importance_score": 82, "possible_use_cases": ["Điều khiển robot hình người thực hiện các tác vụ kết hợp di chuyển và thao tác (loco-manipulation) trong kho vận và dây chuyền sản xuất.", "Robot dịch vụ và trợ lý gia đình hỗ trợ dọn dẹp, bưng bê vật dụng theo lệnh ngôn ngữ tự nhiên.", "Làm khung tham chiếu phân lớp chuẩn cho các nhà phát triển kết nối mô hình VLA lớn với bộ điều khiển chuyển động phần cứng tần số cao."], "actionability_score": 65}