Radar Live
✦ Ask AI
AI INTELLIGENCE & SIGNALS

Reconstruct, Practice, Go Real: Guided Self-Improvement for Embodied Agents

Phân tích đã xử lý trước và các nguồn liên quan.

Tín hiệu Radar

70 RADAR
Agents Embodied AI & Robotics · 1 nguồn đối chiếu · 2026-10-01 17:59:50 +0000 UTC

Reconstruct, Practice, Go Real: Guided Self-Improvement for Embodied Agents

Nguồn: arXiv AI
↗

RPG (Reconstruct, Practice, Go Real) là khung tự hoàn thiện cho tác nhân robot (embodied agents) mà không cần cập nhật trọng số mô hình. RPG nhận diện khả năng thao tác từ tập dữ liệu offline và tái tạo các tác vụ luyện tập trong mô phỏng. Bằng cách kết hợp phản hồi thực thi, trạng thái đặc quyền của simulator và video dữ liệu, RPG chẩn đoán lỗi để tự sinh kỹ năng ký hiệu tái sử dụng, hiệu chỉnh kỹ năng cũ và cập nhật system prompt. Sau khi kiểm tra chéo liên tác vụ, mô hình ngôn ngữ đa phương thức (multimodal LLM) sử dụng thư viện kỹ năng và prompt này để điều phối cảm giác và điều khiển robot. RPG nâng tỷ lệ thành công trên 22 tác vụ từ 28,6% lên 95,0% sau 15 vòng, vượt trội hơn ASPIRE (75,5%) và CaP-Agent0 chạy GPT-6 Astra Pro (60,0%), đồng thời đạt thành công 100% trong 30 thử nghiệm trên robot vật lý thực tế.

✦ TÁC ĐỘNG & GIÁ TRỊ THỰC TIỄN

Nghiên cứu giải quyết rào cản lớn nhất của robot tự hành: chi phí kỹ thuật khổng lồ cho việc viết mã kỹ năng thủ công, thiết kế hàm thưởng và tích hợp nhận thức - điều khiển. Thay vì fine-tune tốn kém, RPG chứng minh khả năng tự tiến hóa thông qua mã ký hiệu và prompt, mang lại độ chính xác cao và khả năng chuyển giao thực tế ấn tượng.

Developer 80
Business 78
Novelty 87
Actionable 80

Nội dung thu thập đã chuẩn hóa

Collected Evidence

Nội dung văn bản được dùng làm dữ liệu đối chứng cho mô hình AI, không phải chỉ thị hệ thống.

Building reliable robot capabilities across diverse tasks requires substantial human effort to develop and maintain skills, design rewards, and integrate perception with control. We present Reconstruct, Practice, Go Real (RPG), a framework for autonomous improvement of robot execution systems without updating model weights. RPG identifies manipulation capabilities in an offline dataset and constructs related practice tasks in simulation. During practice, RPG uses execution feedback, privileged simulator state, and available dataset videos to diagnose failures. It develops new reusable symbolic skills, refines existing skills, and revises the system prompt based on these diagnoses. Cross-task evaluation tests individual candidate changes and merged revisions before they are retained for reuse. At test time, a multimodal LLM uses the resulting system prompt and skill library to coordinate perception and robot control. On held-out initializations of 22 manipulation tasks, RPG improves task success from 28.6% after the first practice round to 95.0% after 15 rounds, outperforming all evaluated baselines, including ASPIRE (75.5%) and CaP-Agent0 powered by GPT-6 Astra Pro (60.0%). After a common calibration and hardware-adaptation procedure, the frozen system succeeds in all 30 physical trials, with ten trials on each of three tasks. Project Website: https://rpg-robot.github.io/

Các nguồn đối chiếu cho sự kiện này

1 nguồn
Thông tin phân tích AI & Model Details ▾
Provider: openai-compatible · Model: gemini-3.8-flash-high · Version: analysis-v1 · Time: 2026-10-02 10:44:36 +0000 UTC
{"tags": ["Embodied AI", "Robotics", "Self-Improvement", "Multimodal LLM", "Sim-to-Real", "Symbolic Skills"], "risks": ["Khoảng cách thực tế (reality gap): Quy trình hiệu chuẩn và thích ứng phần cứng có thể gặp khó khăn trước các biến số vật lý phức tạp ngoài đời thực.", "Phụ thuộc vào dữ liệu đầu vào: Cần tập dữ liệu offline ban đầu và môi trường mô phỏng đủ chi tiết để chẩn đoán chính xác.", "An toàn phần cứng: Kỹ năng ký hiệu tự sinh cần cơ chế kiểm duyệt chặt chẽ để tránh xung đột vật lý và hỏng hóc robot khi thử nghiệm thực tế."], "category": "Agents", "entities": ["RPG", "ASPIRE", "CaP-Agent0", "GPT-6 Astra Pro", "Reconstruct, Practice, Go Real"], "summary_vi": "RPG (Reconstruct, Practice, Go Real) là khung tự hoàn thiện cho tác nhân robot (embodied agents) mà không cần cập nhật trọng số mô hình. RPG nhận diện khả năng thao tác từ tập dữ liệu offline và tái tạo các tác vụ luyện tập trong mô phỏng. Bằng cách kết hợp phản hồi thực thi, trạng thái đặc quyền của simulator và video dữ liệu, RPG chẩn đoán lỗi để tự sinh kỹ năng ký hiệu tái sử dụng, hiệu chỉnh kỹ năng cũ và cập nhật system prompt. Sau khi kiểm tra chéo liên tác vụ, mô hình ngôn ngữ đa phương thức (multimodal LLM) sử dụng thư viện kỹ năng và prompt này để điều phối cảm giác và điều khiển robot. RPG nâng tỷ lệ thành công trên 22 tác vụ từ 28,6% lên 95,0% sau 15 vòng, vượt trội hơn ASPIRE (75,5%) và CaP-Agent0 chạy GPT-6 Astra Pro (60,0%), đồng thời đạt thành công 100% trong 30 thử nghiệm trên robot vật lý thực tế.", "key_changes": ["Tự hoàn thiện hệ thống thực thi robot mà không cần cập nhật trọng số mô hình nền.", "Quy trình Reconstruct, Practice, Go Real: Tái tạo tác vụ luyện tập trong mô phỏng từ dữ liệu offline, chẩn đoán lỗi bằng trạng thái đặc quyền và video.", "Tự động sinh mới, tinh chỉnh kỹ năng ký hiệu (symbolic skills) tái sử dụng và tiến hóa system prompt.", "Áp dụng đánh giá chéo liên tác vụ (cross-task evaluation) để thẩm định các chỉnh sửa trước khi lưu vào thư viện.", "Tăng tỷ lệ thành công từ 28,6% lên 95,0% sau 15 vòng luyện tập trên 22 tác vụ mô phỏng và đạt 100% trên 30 thử nghiệm thực tế."], "sub_category": "Embodied AI & Robotics", "novelty_score": 87, "business_score": 82, "research_score": 90, "why_it_matters": "Nghiên cứu giải quyết rào cản lớn nhất của robot tự hành: chi phí kỹ thuật khổng lồ cho việc viết mã kỹ năng thủ công, thiết kế hàm thưởng và tích hợp nhận thức - điều khiển. Thay vì fine-tune tốn kém, RPG chứng minh khả năng tự tiến hóa thông qua mã ký hiệu và prompt, mang lại độ chính xác cao và khả năng chuyển giao thực tế ấn tượng.", "developer_score": 85, "importance_score": 88, "possible_use_cases": ["Tự động hóa kho vận và sản xuất: Tự học các kỹ năng bốc dỡ, phân loại và thao tác vật thể mới từ video mẫu mà không cần viết code điều khiển thủ công.", "Phát triển hệ thống Embodied AI: Xây dựng quy trình tự huấn luyện trong mô phỏng (sim-to-real) với chi phí thấp và độ an toàn cao.", "Chuẩn hóa thư viện kỹ năng robot: Tự động tổng hợp các kỹ năng ký hiệu có thể chia sẻ và tái sử dụng qua nhiều loại phần cứng robot khác nhau."], "actionability_score": 80}
← Trang trước Trang 1