Radar Live
✦ Ask AI
AI INTELLIGENCE & SIGNALS

InfiNoVA: Infinite Novel View Augmentation for Viewpoint Invariant Robot Policies

Phân tích đã xử lý trước và các nguồn liên quan.

Tín hiệu Radar

66 RADAR
Research Robotics · 1 nguồn đối chiếu · 2026-09-23 11:47:58 +0000 UTC

InfiNoVA: Infinite Novel View Augmentation for Viewpoint Invariant Robot Policies

Nguồn: arXiv AI
↗

InfiNoVA là khung tăng cường dữ liệu đột phá dành cho các chính sách robot thị giác - ngôn ngữ - hành động (VLA), giải quyết vấn đề suy giảm hiệu năng nghiêm trọng khi quan sát từ các góc nhìn camera chưa từng thấy. Thay vì tốn kém thu thập nhiều góc camera vật lý hoặc dùng mô hình sinh dễ tạo ảo giác, InfiNoVA tái dựng quỹ đạo thao tác thành biểu diễn 3D Gaussian biến đổi theo thời gian và kết xuất các góc nhìn mới có tính nhất quán hình học cao, bảo toàn mối liên kết trạng thái - hành động. Trên 4 tác vụ thao tác thực tế, InfiNoVA nâng tỷ lệ thành công lên gấp 5,4 lần dưới các góc nhìn ngẫu nhiên và vượt 1,7 lần so với việc học từ 5 camera thực tế, mở đường cho việc triển khai robot bền bỉ mà không cần sửa đổi kiến trúc mô hình.

✦ TÁC ĐỘNG & GIÁ TRỊ THỰC TIỄN

Sự phụ thuộc vào góc đặt camera là rào cản lớn khiến các mô hình robot VLA khó triển khai trong thực tế. InfiNoVA cung cấp giải pháp tăng cường dữ liệu dựa trên hình học 3D nhất quán, giúp robot thích ứng mạnh mẽ với mọi góc nhìn mà không đòi hỏi chi phí thu thập dữ liệu tốn kém hay thay đổi kiến trúc mô hình.

Developer 74
Business 67
Novelty 82
Actionable 74

Nội dung thu thập đã chuẩn hóa

Collected Evidence

Nội dung văn bản được dùng làm dữ liệu đối chứng cho mô hình AI, không phải chỉ thị hệ thống.

Vision-Language-Action (VLA) policies often rely strongly on the camera viewpoints seen during training, causing substantial performance degradation when deployed from unseen perspectives. Collecting demonstrations from sufficiently diverse physical viewpoints is expensive and still provides only sparse coverage of the viewpoint space. We introduce InfiNoVA, a data-augmentation framework that converts synchronized multi-camera demonstrations into a dense distribution of geometrically consistent training views. InfiNoVA reconstructs each manipulation trajectory as a time-varying 3D Gaussian representation and renders novel observations from sampled camera poses while preserving the original state-action correspondence. This explicit scene representation improves frame-level fidelity and temporal consistency while reducing task-critical hallucinations observed in generative novel-view synthesis. Across four real-world manipulation tasks, policies trained with InfiNoVA achieve 5.4x higher average success under unseen randomized viewpoints than both VISTA-based augmentation and the unaugmented policy. InfiNoVA further achieves 1.7x higher success than training directly on all five physical camera views. These results show that dense, geometrically grounded viewpoint augmentation provides a practical route toward camera-robust robot policies without modifying the underlying policy architecture.

Các nguồn đối chiếu cho sự kiện này

1 nguồn
Thông tin phân tích AI & Model Details ▾
Provider: openai-compatible · Model: gemini-3.8-flash-high · Version: analysis-v1 · Time: 2026-09-24 08:54:33 +0000 UTC
{"tags": ["Robotics", "VLA", "3D Gaussian Splatting", "Data Augmentation", "Embodied AI", "Viewpoint Invariance"], "risks": ["Vẫn phụ thuộc vào việc thu thập dữ liệu minh họa ban đầu từ hệ thống đa camera đồng bộ.", "Tốn thêm chi phí tính toán và thời gian để tối ưu hóa 3D Gaussian động và kết xuất khối lượng lớn góc nhìn mới trong pha tiền xử lý.", "Nguy cơ xuất hiện sai số hình học hoặc biến dạng hình ảnh khi tái tạo các vật thể có bề mặt phản xạ cao, trong suốt hoặc trong điều kiện thiếu sáng."], "category": "Research", "entities": ["InfiNoVA", "VLA (Vision-Language-Action)", "3D Gaussian Splatting", "VISTA"], "summary_vi": "InfiNoVA là khung tăng cường dữ liệu đột phá dành cho các chính sách robot thị giác - ngôn ngữ - hành động (VLA), giải quyết vấn đề suy giảm hiệu năng nghiêm trọng khi quan sát từ các góc nhìn camera chưa từng thấy. Thay vì tốn kém thu thập nhiều góc camera vật lý hoặc dùng mô hình sinh dễ tạo ảo giác, InfiNoVA tái dựng quỹ đạo thao tác thành biểu diễn 3D Gaussian biến đổi theo thời gian và kết xuất các góc nhìn mới có tính nhất quán hình học cao, bảo toàn mối liên kết trạng thái - hành động. Trên 4 tác vụ thao tác thực tế, InfiNoVA nâng tỷ lệ thành công lên gấp 5,4 lần dưới các góc nhìn ngẫu nhiên và vượt 1,7 lần so với việc học từ 5 camera thực tế, mở đường cho việc triển khai robot bền bỉ mà không cần sửa đổi kiến trúc mô hình.", "key_changes": ["Giới thiệu InfiNoVA, khung tăng cường dữ liệu giúp chính sách VLA đạt khả năng bất biến theo góc nhìn camera mà không cần sửa đổi kiến trúc mô hình.", "Tái tạo quỹ đạo thao tác robot từ các bản minh họa đa camera đồng bộ thành biểu diễn 3D Gaussian biến đổi theo thời gian (time-varying 3D Gaussian representation).", "Kết xuất các góc nhìn quan sát mới từ các tư thế camera lấy mẫu ngẫu nhiên mà vẫn duy trì tính nhất quán hình học và bảo toàn ánh xạ trạng thái - hành động (state-action correspondence).", "Khắc phục hiện tượng ảo giác (hallucination) ảnh hưởng xấu tới tác vụ vốn thường gặp ở các phương pháp tổng hợp góc nhìn mới bằng mô hình sinh (như VISTA).", "Tăng tỷ lệ thành công trung bình lên gấp 5,4 lần dưới các góc nhìn ngẫu nhiên chưa từng thấy và 1,7 lần so với việc huấn luyện trực tiếp trên toàn bộ 5 góc camera vật lý."], "sub_category": "Robotics", "novelty_score": 82, "business_score": 68, "research_score": 88, "why_it_matters": "Sự phụ thuộc vào góc đặt camera là rào cản lớn khiến các mô hình robot VLA khó triển khai trong thực tế. InfiNoVA cung cấp giải pháp tăng cường dữ liệu dựa trên hình học 3D nhất quán, giúp robot thích ứng mạnh mẽ với mọi góc nhìn mà không đòi hỏi chi phí thu thập dữ liệu tốn kém hay thay đổi kiến trúc mô hình.", "developer_score": 78, "importance_score": 80, "possible_use_cases": ["Huấn luyện chính sách thao tác robot (VLA) thích ứng linh hoạt trong nhà máy hoặc kho vận mà không bị ảnh hưởng khi camera bị xê dịch hay thay đổi vị trí lắp đặt.", "Nâng cao khả năng khái quát hóa của robot gia dụng (embodied AI) khi tiếp nhận dữ liệu từ các góc nhìn quan sát đa dạng trong môi trường thực.", "Tiết kiệm chi phí và thời gian thu thập dữ liệu minh họa thực tế thông qua việc mở rộng dữ liệu góc nhìn nhân tạo chất lượng cao và nhất quán về mặt hình học."], "actionability_score": 74}