Radar Live
✦ Ask AI
AI INTELLIGENCE & SIGNALS

doPlan: A Variable-Horizon Dataset for Multi-Stage Language-Conditioned Planning in Autonomous Driving

Phân tích đã xử lý trước và các nguồn liên quan.

Tín hiệu Radar

69 RADAR
Research Autonomous Driving & Planning · 1 nguồn đối chiếu · 2026-09-29 17:08:01 +0000 UTC

doPlan: A Variable-Horizon Dataset for Multi-Stage Language-Conditioned Planning in Autonomous Driving

Nguồn: arXiv AI
↗

Giới thiệu doPlan, bộ dữ liệu lái xe tự hành thực tế đầu tiên gán nhãn thủ công nhằm nghiên cứu ngôn ngữ của hành khách dưới dạng ngữ cảnh nhiệm vụ dài hạn (persistent task context). Được xây dựng trên nuPlan, doPlan gồm 5.154 chỉ dẫn (169,1 giờ ngữ cảnh tích lũy, 50,9 giờ lái xe độc nhất) bao quát các ý định tức thời, trì hoãn, có điều kiện và đa giai đoạn. Thử nghiệm trên 4 mô hình cho thấy tầm nhìn quy hoạch 5 giây phổ biến hiện nay chỉ đáp ứng được 9,8% trường hợp, trong khi thời gian trung vị để thực hiện thao tác là 24,6 giây.

✦ TÁC ĐỘNG & GIÁ TRỊ THỰC TIỄN

Lấp đầy khoảng trống nghiên cứu quan trọng trong tương tác người-xe tự hành bằng cách chuyển từ các mệnh lệnh ngắn cục bộ sang ngữ cảnh nhiệm vụ dài hạn và đa giai đoạn. Đồng thời chỉ ra giới hạn cốt lõi của các mô hình lái xe hiện tại (khung dự đoán 5 giây không đủ cho các thao tác thực tế cần trung vị 24,6 giây), định hướng phát triển cho các kiến trúc variable-horizon planner thế hệ mới.

Developer 76
Business 73
Novelty 88
Actionable 78

Nội dung thu thập đã chuẩn hóa

Collected Evidence

Nội dung văn bản được dùng làm dữ liệu đối chứng cho mô hình AI, không phải chỉ thị hệ thống.

Autonomous vehicles interacting with passengers through natural language must reason beyond immediate commands. Passenger intent may span multiple stages of behavior, depend on future events, refer to surrounding agents or landmarks, and remain relevant as driving conditions evolve. Existing language-enabled driving datasets largely focus on short, localized interactions, leaving these longer-horizon forms of passenger intent comparatively underexplored. We introduce doPlan, to our knowledge the first publicly available, human-annotated real-world dataset designed to study passenger language as persistent task context. Built on nuPlan, doPlan contains 5,154 human-written passenger instructions spanning 169.1 hours of cumulative instruction-aligned context over 50.9 hours of unique driving, with annotation windows ranging from 30.0 to 508.8 s. The annotations capture immediate, deferred, event-conditioned, persistent, and multi-stage passenger intent. The dataset, annotation interface, and supporting resources are publicly available at https://github.com/Mi3-Lab/doPlan. We evaluate four language-conditioned driving models and find that sensitivity to passenger language does not reliably translate into behavior consistent with the requested direction. More broadly, among 2,161 examples with a matched future maneuver, the first associated maneuver occurs a median of 24.6 s after the evaluation point, and only 9.8% occur within the models' common 5 s prediction horizon. These findings highlight the need to connect persistent passenger intent with successive planning decisions. doPlan provides a setting for studying how unresolved goals can be retained, grounded in evolving scenes, and tracked across multiple stages, including how a planner determines when a future goal becomes relevant to the current plan.

Các nguồn đối chiếu cho sự kiện này

1 nguồn
Thông tin phân tích AI & Model Details ▾
Provider: openai-compatible · Model: gemini-3.8-flash-high · Version: analysis-v1 · Time: 2026-09-30 10:40:47 +0000 UTC
{"tags": ["Autonomous Driving", "doPlan", "nuPlan", "Language-Conditioned Planning", "Trajectory Planning", "Multi-Stage Intent", "Dataset"], "risks": ["Độ nhạy của mô hình với ngôn ngữ hành khách hiện chưa đồng nghĩa với việc đưa ra hành vi lái xe chính xác và an toàn theo hướng yêu cầu.", "Rủi ro an toàn nếu bộ lập kế hoạch xác định sai thời điểm kích hoạt mục tiêu trong tương lai (kích hoạt quá sớm hoặc quá muộn trong giao thông thực tế).", "Chi phí tính toán và độ phức tạp bộ nhớ tăng cao khi phải duy trì và grounding ngữ cảnh ngôn ngữ liên tục trong cửa sổ thời gian dài."], "category": "Research", "entities": ["doPlan", "nuPlan", "Mi3-Lab", "GitHub"], "summary_vi": "Giới thiệu doPlan, bộ dữ liệu lái xe tự hành thực tế đầu tiên gán nhãn thủ công nhằm nghiên cứu ngôn ngữ của hành khách dưới dạng ngữ cảnh nhiệm vụ dài hạn (persistent task context). Được xây dựng trên nuPlan, doPlan gồm 5.154 chỉ dẫn (169,1 giờ ngữ cảnh tích lũy, 50,9 giờ lái xe độc nhất) bao quát các ý định tức thời, trì hoãn, có điều kiện và đa giai đoạn. Thử nghiệm trên 4 mô hình cho thấy tầm nhìn quy hoạch 5 giây phổ biến hiện nay chỉ đáp ứng được 9,8% trường hợp, trong khi thời gian trung vị để thực hiện thao tác là 24,6 giây.", "key_changes": ["Công bố bộ dữ liệu mã nguồn mở doPlan cùng giao diện gán nhãn dựa trên nền tảng nuPlan tại GitHub Mi3-Lab/doPlan.", "Cung cấp 5.154 chỉ dẫn ngôn ngữ tự nhiên từ con người với độ dài cửa sổ gán nhãn từ 30,0 đến 508,8 giây, trải dài trên 169,1 giờ ngữ cảnh.", "Mở rộng phân loại ý định hành khách ra ngoài các lệnh ngắn: hỗ trợ lệnh tức thời, trì hoãn (deferred), phụ thuộc sự kiện (event-conditioned), ngữ cảnh kéo dài (persistent) và đa giai đoạn (multi-stage).", "Đánh giá 4 mô hình lái xe điều khiển bằng ngôn ngữ và phát hiện độ trễ lớn: thao tác tương ứng xảy ra sau trung vị 24,6 giây, và chỉ 9,8% nằm trong phạm vi dự đoán 5 giây tiêu chuẩn."], "sub_category": "Autonomous Driving & Planning", "novelty_score": 88, "business_score": 75, "research_score": 92, "why_it_matters": "Lấp đầy khoảng trống nghiên cứu quan trọng trong tương tác người-xe tự hành bằng cách chuyển từ các mệnh lệnh ngắn cục bộ sang ngữ cảnh nhiệm vụ dài hạn và đa giai đoạn. Đồng thời chỉ ra giới hạn cốt lõi của các mô hình lái xe hiện tại (khung dự đoán 5 giây không đủ cho các thao tác thực tế cần trung vị 24,6 giây), định hướng phát triển cho các kiến trúc variable-horizon planner thế hệ mới.", "developer_score": 80, "importance_score": 82, "possible_use_cases": ["Huấn luyện và đánh giá các mô hình quy hoạch quỹ đạo (motion planner) điều khiển bằng ngôn ngữ tự nhiên cho xe tự hành/robotaxi.", "Phát triển hệ thống trợ lý ảo thông minh trong xe có khả năng ghi nhớ và duy trì mục tiêu đa bước của hành khách xuyên suốt hành trình.", "Nghiên cứu giải thuật theo dõi và kích hoạt mục tiêu trì hoãn (goal tracking & grounding) dựa trên biến đổi của môi trường giao thông."], "actionability_score": 78}
← Trang trước Trang 1