Radar Live
✦ Ask AI
AI INTELLIGENCE & SIGNALS

Touvigation: Embodied Adaptive Object Acquisition for Blind and Low-Vision Users in Unfamiliar Indoor Environments

Phân tích đã xử lý trước và các nguồn liên quan.

Tín hiệu Radar

61 RADAR
Research Assistive Technology · 1 nguồn đối chiếu · 2026-09-18 14:29:21 +0000 UTC

Touvigation: Embodied Adaptive Object Acquisition for Blind and Low-Vision Users in Unfamiliar Indoor Environments

Nguồn: arXiv AI
↗

Touvigation là hệ thống hỗ trợ rảnh tay giúp người khiếm thị và thị lực kém tìm và lấy đồ vật trong môi trường trong nhà xa lạ. Bằng cách kết hợp mô hình thị giác - ngôn ngữ (VLM) với mô hình hóa không gian cục bộ liên tục, Touvigation cung cấp chỉ dẫn độ trễ thấp bám sát chuyển động cơ thể qua 4 giai đoạn: định hướng, bước đi, vươn tay và kiểm tra xúc giác. Thử nghiệm trên 12 người dùng cho thấy hệ thống đạt tỷ lệ thành công 100%, vượt xa trợ lý MLLM thông thường (58%) và tìm kiếm không trợ giúp (85%), đồng thời tối ưu thời gian và giảm tải nhận thức.

✦ TÁC ĐỘNG & GIÁ TRỊ THỰC TIỄN

Nghiên cứu giải quyết bài toán quan trọng trong AI tương tác thể nghiệm (Embodied AI) và công nghệ hỗ trợ: các mô hình MLLM hiện tại có độ trễ lớn và thiếu khả năng định vị gắn liền với cử động cơ thể. Touvigation chứng minh việc kết hợp mô hình không gian cục bộ liên tục với VLM là hướng tiếp cận hiệu quả để AI trở thành trợ lý thể nghiệm thực thụ, hỗ trợ người khuyết tật hòa nhập an toàn và độc lập.

Developer 68
Business 66
Novelty 80
Actionable 70

Nội dung thu thập đã chuẩn hóa

Collected Evidence

Nội dung văn bản được dùng làm dữ liệu đối chứng cho mô hình AI, không phải chỉ thị hệ thống.

Blind and low-vision users often face challenges when locating and physically acquiring objects in unfamiliar indoor environments. Existing vision-language-model-based assistants can provide semantic descriptions but may introduce latency, hallucinations, and guidance that is poorly aligned with embodied action. We present Touvigation, a hands-free object acquisition system that combines vision-language understanding with persistent local spatial modeling to provide low-latency, body-relative guidance. Drawing on formative interviews with eight blind and low-vision participants, we design a multi-stage guidance framework that adapts spatial references as users transition from orienting, to walking, to reaching and tactile verification. We evaluated Touvigation with 12 blind and low-vision participants against a multimodal large-language-model assistant and unassisted search. Touvigation achieved 100% task success, compared with 58% for the multimodal assistant and 85% for unassisted search, while reducing completion time and cognitive workload. Our findings demonstrate how persistent spatial grounding and adaptive embodied guidance can improve object acquisition for blind and low-vision users.

Các nguồn đối chiếu cho sự kiện này

1 nguồn
Thông tin phân tích AI & Model Details ▾
Provider: openai-compatible · Model: gemini-3.8-flash-high · Version: analysis-v1 · Time: 2026-09-21 08:35:21 +0000 UTC
{"tags": ["Embodied AI", "Assistive Technology", "Accessibility", "Spatial Computing", "VLM", "Human-AI Interaction"], "risks": ["Thử nghiệm đánh giá trên quy mô tương đối nhỏ (12 người tham gia), cần kiểm chứng thêm trong môi trường phức tạp và nhiều vật cản động.", "Yêu cầu phần cứng và cảm biến chính xác cao để duy trì mô hình hóa không gian liên tục theo thời gian thực trên thiết bị đeo gọn nhẹ.", "Hạn chế về tiêu thụ năng lượng và nhiệt năng khi xử lý đồng thời mô hình không gian và VLM trên thiết bị biên."], "category": "Research", "entities": ["Touvigation"], "summary_vi": "Touvigation là hệ thống hỗ trợ rảnh tay giúp người khiếm thị và thị lực kém tìm và lấy đồ vật trong môi trường trong nhà xa lạ. Bằng cách kết hợp mô hình thị giác - ngôn ngữ (VLM) với mô hình hóa không gian cục bộ liên tục, Touvigation cung cấp chỉ dẫn độ trễ thấp bám sát chuyển động cơ thể qua 4 giai đoạn: định hướng, bước đi, vươn tay và kiểm tra xúc giác. Thử nghiệm trên 12 người dùng cho thấy hệ thống đạt tỷ lệ thành công 100%, vượt xa trợ lý MLLM thông thường (58%) và tìm kiếm không trợ giúp (85%), đồng thời tối ưu thời gian và giảm tải nhận thức.", "key_changes": ["Kết hợp mô hình thị giác - ngôn ngữ (VLM) với mô hình hóa không gian cục bộ liên tục (persistent local spatial modeling) để giảm độ trễ và khắc phục hiện tượng ảo giác (hallucinations).", "Thiết kế khung chỉ dẫn đa giai đoạn thích ứng theo hệ quy chiếu cơ thể (body-relative) qua 4 bước: định hướng, di chuyển, vươn tay và xác nhận xúc giác.", "Cung cấp cơ chế hỗ trợ rảnh tay (hands-free) được tối ưu hóa từ phỏng vấn định hình với 8 người khiếm thị và thị lực kém (BLV).", "Đạt tỷ lệ thành công 100% trong thử nghiệm với 12 người dùng BLV, vượt trội so với trợ lý MLLM thông thường (58%) và tìm kiếm tự lực (85%), đồng thời giảm tải nhận thức và thời gian hoàn thành."], "sub_category": "Assistive Technology", "novelty_score": 80, "business_score": 68, "research_score": 85, "why_it_matters": "Nghiên cứu giải quyết bài toán quan trọng trong AI tương tác thể nghiệm (Embodied AI) và công nghệ hỗ trợ: các mô hình MLLM hiện tại có độ trễ lớn và thiếu khả năng định vị gắn liền với cử động cơ thể. Touvigation chứng minh việc kết hợp mô hình không gian cục bộ liên tục với VLM là hướng tiếp cận hiệu quả để AI trở thành trợ lý thể nghiệm thực thụ, hỗ trợ người khuyết tật hòa nhập an toàn và độc lập.", "developer_score": 72, "importance_score": 78, "possible_use_cases": ["Tích hợp vào kính thông minh (smart glasses) hoặc thiết bị đeo hỗ trợ người khiếm thị định vị và lấy đồ vật trong nhà.", "Hệ thống dẫn đường trong nhà tại các địa điểm công cộng (khách sạn, bệnh viện, sân bay) cho người suy giảm thị lực.", "Áp dụng kiến trúc định vị không gian kết hợp VLM cho robot phục vụ gia đình để tương tác và gắp vật thể theo thời gian thực."], "actionability_score": 70}
← Trang trước Trang 1