Radar Live
✦ Ask AI
AI INTELLIGENCE & SIGNALS

LIBERO-PeRM: Benchmarking Personalized Robotic Manipulation

Phân tích đã xử lý trước và các nguồn liên quan.

Tín hiệu Radar

67 RADAR
Research Embodied AI & Robotics · 1 nguồn đối chiếu · 2026-10-15 17:59:59 +0000 UTC

LIBERO-PeRM: Benchmarking Personalized Robotic Manipulation

Nguồn: arXiv AI
↗

LIBERO-PeRM là benchmark mô phỏng đầu tiên được thiết kế có kiểm soát nhằm đánh giá khả năng học sở thích cá nhân hóa trong thao tác robot (PeRM), tách biệt giữa việc hoàn thành nhiệm vụ và mức độ thỏa mãn sở thích người dùng. Nghiên cứu khảo sát 5 câu hỏi cốt lõi: tuân thủ sở thích zero-shot, học sở thích đơn từ biểu diễn mẫu, hiệu quả thu nhận sở thích theo quy mô dữ liệu, khả năng khái quát hóa qua layout/nhiệm vụ mới, và cách kết hợp cũng như xử lý xung đột sở thích. Hệ thống phân loại sở thích bao gồm chuyển động (motion), kỹ năng (skill) và hồ sơ người dùng (user-profile) có thể biểu đạt qua ngôn ngữ. Benchmark cung cấp 312 nhiệm vụ trong 5 bộ tác vụ với dữ liệu mẫu ghép cặp và chỉ số đánh giá tự động. Thực nghiệm chỉ ra rằng các mô hình VLA hiện tại kém ở zero-shot nhưng học tốt qua SFT; mixed training bảo toàn kỹ năng gốc tốt hơn nhưng có thể làm giảm việc học sở thích chuyển động.

✦ TÁC ĐỘNG & GIÁ TRỊ THỰC TIỄN

Cá nhân hóa là yếu tố cốt lõi để robot dịch vụ chuyển dịch từ phòng thí nghiệm vào môi trường gia đình thực tế. LIBERO-PeRM cung cấp bộ công cụ và thước đo chuẩn hóa đầu tiên giúp phân định rõ ràng giữa việc 'làm xong nhiệm vụ' và 'làm đúng theo ý thích của người dùng', định hình phương pháp đánh giá cho các mô hình VLA thế hệ mới.

Developer 76
Business 68
Novelty 82
Actionable 78

Nội dung thu thập đã chuẩn hóa

Collected Evidence

Nội dung văn bản được dùng làm dữ liệu đối chứng cho mô hình AI, không phải chỉ thị hệ thống.

Personalization is essential for general-purpose robots to transition into household environments and achieve true practicality. While general robotic manipulation has been extensively studied, personalized robotic manipulation (PeRM) lacks a controlled benchmark for separating task completion from preference satisfaction. We introduce LIBERO-PeRM, a benchmark for preference learning in embodied agents. LIBERO-PeRM studies five questions: 1) how policies follow preferences in zero-shot settings; 2) how they learn single preferences from demonstrations; 3) how efficiently they acquire preferences as demonstrations increase; 4) how learned preferences generalize across layouts and tasks; and 5) how policies compose preferences and behave under conflicts. We propose a controlled formulation and taxonomy of observable preferences in simulation, covering motion, skill, and user-profile choices. This formulation is restricted to language-expressible preferences that can be instantiated in LIBERO without changing the task goal, evaluated automatically, and reused across tasks. Building on LIBERO, our procedural pipeline generates paired demonstrations with and without preferences. We create five task suites (312 tasks) with high-quality demonstrations, rich metadata, and preference-satisfaction metrics. Experiments show that current VLA policies struggle with zero-shot personalization, while SFT makes preferences learnable. Mixed training achieves better no-preference retention than sequential adaptation and improves performance with contextual prompts compared with preference-only training, but can weaken motion-preference learning; preference generalization, decomposition, and conflict handling remain difficult. The code, datasets, and demos can be found on the project website: https://libero-perm.github.io/.

Các nguồn đối chiếu cho sự kiện này

1 nguồn
Thông tin phân tích AI & Model Details ▾
Provider: openai-compatible · Model: gemini-3.8-flash-high · Version: analysis-v1 · Time: 2026-10-16 10:21:52 +0000 UTC
{"tags": ["Robotics", "Embodied AI", "Personalized Robotics", "VLA", "Preference Learning", "Benchmark", "LIBERO-PeRM", "Manipulation"], "risks": ["Chính sách VLA hiện tại gặp khó khăn với zero-shot personalization, phụ thuộc vào dữ liệu biểu diễn và SFT.", "Mixed training có thể làm suy giảm khả năng học sở thích về chuyển động (motion preference).", "Khả năng khái quát hóa sở thích sang bố cục và tác vụ mới còn nhiều hạn chế.", "Xử lý xung đột sở thích và phân tách sở thích phức tạp vẫn chưa đạt hiệu quả cao.", "Khoảng cách mô phỏng sang thực tế (sim-to-real gap) khi triển khai từ LIBERO lên robot vật lý."], "category": "Research", "entities": ["LIBERO-PeRM", "LIBERO", "VLA"], "summary_vi": "LIBERO-PeRM là benchmark mô phỏng đầu tiên được thiết kế có kiểm soát nhằm đánh giá khả năng học sở thích cá nhân hóa trong thao tác robot (PeRM), tách biệt giữa việc hoàn thành nhiệm vụ và mức độ thỏa mãn sở thích người dùng. Nghiên cứu khảo sát 5 câu hỏi cốt lõi: tuân thủ sở thích zero-shot, học sở thích đơn từ biểu diễn mẫu, hiệu quả thu nhận sở thích theo quy mô dữ liệu, khả năng khái quát hóa qua layout/nhiệm vụ mới, và cách kết hợp cũng như xử lý xung đột sở thích. Hệ thống phân loại sở thích bao gồm chuyển động (motion), kỹ năng (skill) và hồ sơ người dùng (user-profile) có thể biểu đạt qua ngôn ngữ. Benchmark cung cấp 312 nhiệm vụ trong 5 bộ tác vụ với dữ liệu mẫu ghép cặp và chỉ số đánh giá tự động. Thực nghiệm chỉ ra rằng các mô hình VLA hiện tại kém ở zero-shot nhưng học tốt qua SFT; mixed training bảo toàn kỹ năng gốc tốt hơn nhưng có thể làm giảm việc học sở thích chuyển động.", "key_changes": ["Giới thiệu LIBERO-PeRM: Benchmark đầu tiên đánh giá có kiểm soát việc học sở thích cá nhân hóa cho robot thao tác (PeRM), tách bạch giữa hoàn thành nhiệm vụ và thỏa mãn sở thích.", "Đề xuất hệ thống phân loại (taxonomy) sở thích quan sát được gồm 3 nhóm: chuyển động (motion), kỹ năng (skill), và hồ sơ người dùng (user-profile).", "Thiết lập pipeline tự động tạo các tập biểu diễn ghép cặp (paired demonstrations) có và không có sở thích.", "Xây dựng 5 bộ tác vụ gồm 312 nhiệm vụ đi kèm dữ liệu mẫu chất lượng cao, siêu dữ liệu chi tiết và bộ đo lường mức độ thỏa mãn sở thích tự động.", "Phát hiện thực nghiệm: Các chính sách VLA hiện tại yếu ở zero-shot; SFT giúp học được sở thích; mixed training giữ kỹ năng gốc tốt hơn sequential training nhưng có thể làm giảm hiệu quả học sở thích chuyển động; khái quát hóa và giải quyết xung đột sở thích vẫn là bài toán mở."], "sub_category": "Embodied AI & Robotics", "novelty_score": 82, "business_score": 68, "research_score": 88, "why_it_matters": "Cá nhân hóa là yếu tố cốt lõi để robot dịch vụ chuyển dịch từ phòng thí nghiệm vào môi trường gia đình thực tế. LIBERO-PeRM cung cấp bộ công cụ và thước đo chuẩn hóa đầu tiên giúp phân định rõ ràng giữa việc 'làm xong nhiệm vụ' và 'làm đúng theo ý thích của người dùng', định hình phương pháp đánh giá cho các mô hình VLA thế hệ mới.", "developer_score": 80, "importance_score": 80, "possible_use_cases": ["Huấn luyện và đánh giá robot gia dụng thông minh thích ứng theo thói quen, cách thao tác riêng của từng người dùng.", "Đo lường chuẩn hóa và tinh chỉnh các mô hình Vision-Language-Action (VLA) trong bài toán cá nhân hóa hành vi.", "Ứng dụng trong robot trợ lý chăm sóc y tế và người cao tuổi với các yêu cầu chuyển động và sở thích chăm sóc đặc thù.", "Nghiên cứu cơ chế phân giải và xử lý xung đột chỉ dẫn/sở thích của người dùng trong robot tự hành."], "actionability_score": 78}