Radar Live
✦ Ask AI
AI INTELLIGENCE & SIGNALS

Leaving, Staying, or Living There? Duration Commonsense Reasoning with Human-LLM Co-annotations

Phân tích đã xử lý trước và các nguồn liên quan.

Tín hiệu Radar

59 RADAR
Research Multimodal Commonsense Reasoning · 1 nguồn đối chiếu · 2026-10-28 19:35:59 +0000 UTC

Leaving, Staying, or Living There? Duration Commonsense Reasoning with Human-LLM Co-annotations

Nguồn: arXiv AI
↗

Nghiên cứu khảo sát khả năng suy luận thường thức về thời lượng lưu trú (duration commonsense reasoning: rời đi, ở lại vài ngày, hay sinh sống) của các mô hình thị giác - ngôn ngữ (VLM) thông qua dữ liệu mạng xã hội kèm định vị được đồng gán nhãn bởi người và LLM. Kết quả cho thấy các mô hình SOTA hiện nay vẫn gặp nhiều hạn chế dù có Chain-of-Thought prompting, do quá phụ thuộc vào chi tiết thị giác bề nổi mà bỏ qua ngữ cảnh và sắc thái ngữ nghĩa.

✦ TÁC ĐỘNG & GIÁ TRỊ THỰC TIỄN

Nghiên cứu chỉ ra khoảng trống lớn trong khả năng hiểu ngữ cảnh sâu và suy luận thời gian thực tế của các mô hình VLM hiện đại, đặt nền tảng cho việc cải tiến khả năng tích hợp đa phương thức thay vì chỉ phụ thuộc vào tín hiệu thị giác trực quan.

Developer 54
Business 60
Novelty 76
Actionable 55

Nội dung thu thập đã chuẩn hóa

Collected Evidence

Nội dung văn bản được dùng làm dữ liệu đối chứng cho mô hình AI, không phải chỉ thị hệ thống.

Gardening in the backyard implies living there, while checking into an Airbnb more likely means staying for a few days. Such duration judgments are important for understanding human mobility, travel behavior, and social context. However, duration is rarely stated explicitly in social media posts and must instead be inferred from noisy textual, visual, and contextual cues. In this paper, we investigate whether vision-language models possess such duration commonsense. We create a new corpus of geotagged tweets co-annotated by humans and LLMs to serve as a testbed for this task. We find that state-of-the-art models struggle with duration inference, even when guided by multi-turn Chain-of-Thought prompting. Error analyses further reveal that models often fail to integrate critical contextual information, or they overly rely on prominent visual details while overlooking subtle hashtags and semantic nuances. These findings underscore the significant challenges remaining in context-aware multimodal understanding.

Các nguồn đối chiếu cho sự kiện này

1 nguồn
Thông tin phân tích AI & Model Details ▾
Provider: openai-compatible · Model: gemini-3.8-flash-high · Version: analysis-v1 · Time: 2026-10-30 10:01:57 +0000 UTC
{"tags": ["Multimodal AI", "Vision-Language Models", "Commonsense Reasoning", "Chain-of-Thought", "Human Mobility", "Social Media Analytics"], "risks": ["Suy luận sai thời lượng do mô hình thiên lệch vào hình ảnh có thể dẫn đến phân tích sai lệch hành vi người dùng.", "Rủi ro quyền riêng tư khi khai thác và suy luận thói quen sinh hoạt cá nhân từ dữ liệu mạng xã hội."], "category": "Research", "entities": ["Vision-Language Models", "Chain-of-Thought", "Geotagged Tweets", "Airbnb"], "summary_vi": "Nghiên cứu khảo sát khả năng suy luận thường thức về thời lượng lưu trú (duration commonsense reasoning: rời đi, ở lại vài ngày, hay sinh sống) của các mô hình thị giác - ngôn ngữ (VLM) thông qua dữ liệu mạng xã hội kèm định vị được đồng gán nhãn bởi người và LLM. Kết quả cho thấy các mô hình SOTA hiện nay vẫn gặp nhiều hạn chế dù có Chain-of-Thought prompting, do quá phụ thuộc vào chi tiết thị giác bề nổi mà bỏ qua ngữ cảnh và sắc thái ngữ nghĩa.", "key_changes": ["Đặt ra bài toán suy luận thường thức về thời lượng (duration commonsense reasoning) để phân biệt giữa rời đi, lưu trú ngắn ngày hay sinh sống lâu dài từ dữ liệu đa phương thức.", "Xây dựng bộ dữ liệu benchmark mới từ các bài đăng Twitter kèm định vị (geotagged tweets) được đồng gán nhãn bởi con người và LLM.", "Chứng minh các mô hình thị giác - ngôn ngữ SOTA vẫn gặp khó khăn lớn trong việc suy luận thời lượng, kể cả khi áp dụng Chain-of-Thought prompting nhiều lượt.", "Chỉ ra lỗi phổ biến của mô hình: phụ thuộc quá mức vào các chi tiết thị giác nổi bật trong khi bỏ qua ngữ cảnh ngữ nghĩa tinh tế và hashtag."], "sub_category": "Multimodal Commonsense Reasoning", "novelty_score": 76, "business_score": 60, "research_score": 85, "why_it_matters": "Nghiên cứu chỉ ra khoảng trống lớn trong khả năng hiểu ngữ cảnh sâu và suy luận thời gian thực tế của các mô hình VLM hiện đại, đặt nền tảng cho việc cải tiến khả năng tích hợp đa phương thức thay vì chỉ phụ thuộc vào tín hiệu thị giác trực quan.", "developer_score": 52, "importance_score": 72, "possible_use_cases": ["Phân tích hành vi di chuyển và lưu trú của khách du lịch hoặc cư dân phục vụ nghiên cứu đô thị và giao thông.", "Tối ưu hóa hệ thống gợi ý quảng cáo và dịch vụ lưu trú (khách sạn, homestay, bất động sản) theo thời gian lưu trú dự đoán.", "Cải thiện pipeline xử lý và đánh giá năng lực suy luận ngữ cảnh đa phương thức (multimodal context fusion) cho các mô hình VLM."], "actionability_score": 55}
← Trang trước Trang 1