Radar Live
✦ Ask AI
AI INTELLIGENCE & SIGNALS

SpatialASM: Internalizing Active Mentalization for Spatial Reasoning

Phân tích đã xử lý trước và các nguồn liên quan.

Tín hiệu Radar

62 RADAR
Research Vision-Language Models / Spatial Reasoning · 1 nguồn đối chiếu · 2026-10-09 16:39:50 +0000 UTC

SpatialASM: Internalizing Active Mentalization for Spatial Reasoning

Nguồn: arXiv AI
↗

SpatialASM là khung làm việc (framework) mới giúp tích hợp năng lực 'Active Spatial Mentalization' (ASM - khả năng chủ động tưởng tượng và tái dựng không gian từ các góc nhìn giả định) vào các mô hình thị giác-ngôn ngữ lớn (LVLM). Bằng việc sử dụng bộ sinh góc nhìn mới phi quy chiếu (allocentric novel-view generator), SpatialASM tự động tạo ra hai dạng giám sát huấn luyện gồm chuỗi quỹ đạo ASM và nhiệm vụ hoán đổi góc nhìn (perspective-taking), giúp giải quyết bài toán khan hiếm dữ liệu Spatial Chain-of-Thought (CoT). Phương pháp này giúp nâng cao độ chính xác trên 7 bộ benchmark không gian trên 4 kiến trúc nền tảng LVLM mà không làm suy giảm khả năng thị giác tổng quát.

✦ TÁC ĐỘNG & GIÁ TRỊ THỰC TIỄN

Suy luận không gian đa góc nhìn là nút thắt lớn của các mô hình LVLM hiện nay do thiếu dữ liệu chuỗi suy luận (Spatial CoT). SpatialASM mở ra hướng tiếp cận tự động hóa việc sinh dữ liệu mô phỏng không gian ở quy mô lớn, tạo tiền đề cải thiện đáng kể năng lực cho robot thông minh, xe tự hành và điện toán không gian mà vẫn bảo toàn năng lực tổng quát của mô hình.

Developer 68
Business 66
Novelty 84
Actionable 65

Nội dung thu thập đã chuẩn hóa

Collected Evidence

Nội dung văn bản được dùng làm dữ liệu đối chứng cho mô hình AI, không phải chỉ thị hệ thống.

When solving complex spatial reasoning tasks, ordinary humans naturally revisit the scenes from task-relevant viewpoints and mentally reconstruct the spatial layouts from those viewpoints. But can Large Vision-Language Models (LVLMs) proactively think in the same way? We term this ability Active Spatial Mentalization (ASM), an intrinsic component of visual intelligence that remains substantially underdeveloped in current LVLMs. To bridge this gap, we introduce SpatialASM, a scalable framework to internalize ASM into LVLMs through training-time spatial simulation. SpatialASM employs an allocentric novel-view generator to ground hypothetical viewpoints in visual evidence and produces two complementary forms of supervision: i) explicit ASM trajectories that teach LVLMs when and how to adaptively invoke view planning and imagination during spatial reasoning, and ii) automatically-constructed perspective-taking tasks that further strengthens viewpoint-conditioned scene imagination. On seven benchmarks spanning relatively perception-oriented spatial understanding to more challenging tasks requiring multi-image, cross-view and viewpoint-transformation reasoning, SpatialASM yields performance gain on LVLMs of four LVLM backbones in spatial reasoning while retaining their original general vision capabilities. The experimental results demonstrate that our approach improves average accuracy across the seven spatial benchmarks. And the synthesis of ASM trajectories provides a scalable pathway to alleviate the scarcity of spatial Chain-of-Thought (CoT) supervision for eliciting active viewpoint exploration and mental scene simulation.

Các nguồn đối chiếu cho sự kiện này

1 nguồn
Thông tin phân tích AI & Model Details ▾
Provider: openai-compatible · Model: gemini-3.8-flash-high · Version: analysis-v1 · Time: 2026-10-12 09:54:01 +0000 UTC
{"tags": ["SpatialASM", "LVLM", "Spatial Reasoning", "Active Spatial Mentalization", "Spatial CoT", "Novel-View Generation", "Computer Vision", "Multimodal AI"], "risks": ["Chất lượng mô hình phụ thuộc lớn vào bộ sinh góc nhìn mới; hiện tượng ảo giác hình học (geometric artifacts) có thể làm sai lệch dữ liệu giám sát.", "Chi phí tính toán cao khi tổng hợp quỹ đạo không gian và mô phỏng thị giác đa góc nhìn trong giai đoạn tiền huấn luyện/tinh chỉnh.", "Chưa kiểm chứng đầy đủ trong các môi trường động phức tạp có vật thể di chuyển liên tục hoặc ánh sáng biến đổi mạnh.", "Đoạn trích chưa cung cấp đường dẫn mã nguồn hoặc bộ dữ liệu mở để cộng đồng trực tiếp kiểm chứng và tái lập ngay."], "category": "Research", "entities": ["SpatialASM", "Large Vision-Language Models (LVLMs)", "Active Spatial Mentalization (ASM)", "Chain-of-Thought (CoT)"], "summary_vi": "SpatialASM là khung làm việc (framework) mới giúp tích hợp năng lực 'Active Spatial Mentalization' (ASM - khả năng chủ động tưởng tượng và tái dựng không gian từ các góc nhìn giả định) vào các mô hình thị giác-ngôn ngữ lớn (LVLM). Bằng việc sử dụng bộ sinh góc nhìn mới phi quy chiếu (allocentric novel-view generator), SpatialASM tự động tạo ra hai dạng giám sát huấn luyện gồm chuỗi quỹ đạo ASM và nhiệm vụ hoán đổi góc nhìn (perspective-taking), giúp giải quyết bài toán khan hiếm dữ liệu Spatial Chain-of-Thought (CoT). Phương pháp này giúp nâng cao độ chính xác trên 7 bộ benchmark không gian trên 4 kiến trúc nền tảng LVLM mà không làm suy giảm khả năng thị giác tổng quát.", "key_changes": ["Định nghĩa khái niệm Active Spatial Mentalization (ASM) phản ánh năng lực chủ động mô phỏng và tái cấu trúc bố cục không gian từ các góc nhìn mục tiêu của LVLM.", "Đề xuất framework SpatialASM giúp nội hóa năng lực ASM thông qua mô phỏng không gian ngay trong quá trình huấn luyện.", "Ứng dụng bộ sinh góc nhìn mới phi quy chiếu (allocentric novel-view generator) để gắn kết các góc nhìn giả định với bằng chứng thị giác cụ thể.", "Tạo hai dạng giám sát bổ trợ: chuỗi quỹ đạo suy luận ASM tường minh và các bài toán tiếp nhận góc nhìn (perspective-taking) tự động.", "Giải quyết tình trạng khan hiếm dữ liệu giám sát Spatial Chain-of-Thought (CoT) thông qua quy trình tổng hợp quỹ đạo suy luận có khả năng mở rộng quy mô."], "sub_category": "Vision-Language Models / Spatial Reasoning", "novelty_score": 84, "business_score": 68, "research_score": 88, "why_it_matters": "Suy luận không gian đa góc nhìn là nút thắt lớn của các mô hình LVLM hiện nay do thiếu dữ liệu chuỗi suy luận (Spatial CoT). SpatialASM mở ra hướng tiếp cận tự động hóa việc sinh dữ liệu mô phỏng không gian ở quy mô lớn, tạo tiền đề cải thiện đáng kể năng lực cho robot thông minh, xe tự hành và điện toán không gian mà vẫn bảo toàn năng lực tổng quát của mô hình.", "developer_score": 72, "importance_score": 82, "possible_use_cases": ["Robot tự hành và Embodied AI: Nâng cao khả năng hiểu bố cục không gian 3D, lập kế hoạch di chuyển và thao tác vật thể từ nhiều góc nhìn.", "Xe tự hành và hệ thống điều hướng: Dự đoán và tái dựng phối cảnh môi trường từ các góc khuất hoặc góc nhìn chéo giữa các cảm biến camera.", "Thực tế ảo và điện toán không gian (AR/VR / Spatial Computing): Tăng cường năng lực nhận thức hình học cảnh vật và tương tác vật thể ảo dựa trên ảnh 2D.", "Kiểm tra và giám sát công nghiệp: Tự động đối chiếu, suy luận không gian chéo qua ảnh chụp từ flycam hoặc nhiều góc camera cố định."], "actionability_score": 65}
← Trang trước Trang 1