Radar Live
✦ Ask AI
AI INTELLIGENCE & SIGNALS

Tev: Scaling Long-Horizon Agentic Environments with Dense Progress Rewards

Phân tích đã xử lý trước và các nguồn liên quan.

Tín hiệu Radar

71 RADAR
Agents Long-Horizon Agents & Reinforcement Learning · 1 nguồn đối chiếu · 2026-10-13 17:59:51 +0000 UTC

Tev: Scaling Long-Horizon Agentic Environments with Dense Progress Rewards

Nguồn: arXiv AI
↗

Tev giải quyết điểm nghẽn thiếu dữ liệu và phần thưởng thưa (sparse rewards) trong huấn luyện agent tác vụ dài hạn. Nghiên cứu giới thiệu Tev-Gym gồm 1.170 môi trường tác vụ thuộc 7 domain với phần thưởng dày đặc dựa trên phương pháp 'latent-world-first'. Kết hợp kỹ thuật tạo thưởng PPRS (Progress-Potential Reward Shaping), mô hình mã nguồn mở Tev-27B được huấn luyện đạt kết quả Pass@5 ngang tầm GPT-6 Astra và Claude Opus 5 trên benchmark ALE-CM, đồng thời tổng quát hóa mạnh mẽ trên Terminal-Bench.

✦ TÁC ĐỘNG & GIÁ TRỊ THỰC TIỄN

Khả năng thực hiện tác vụ dài hạn là nền tảng cốt lõi để AI tạo ra giá trị kinh tế trực tiếp và hướng tới tự cải tiến đệ quy (RSI). Tev chứng minh rằng việc kết hợp thiết kế môi trường 'latent-world-first' với kỹ thuật định hình phần thưởng PPRS có thể giúp một mô hình mã nguồn mở 27B đạt hiệu năng tương đương các mô hình frontier độc quyền lớn nhất trên các tác vụ suy luận và tính toán phức tạp.

Developer 80
Business 78
Novelty 88
Actionable 82

Nội dung thu thập đã chuẩn hóa

Collected Evidence

Nội dung văn bản được dùng làm dữ liệu đối chứng cho mô hình AI, không phải chỉ thị hệ thống.

Long-horizon agents have drawn growing attention for their ability to work autonomously -- from hours to days -- on economically valuable tasks, a capability essential to automated discovery and recursive self-improvement (RSI). Yet open-source models still struggle on long-horizon tasks, largely for lack of both training data and a working recipe, and scaling both is hard: long, complex tasks are difficult to curate and verify, and their rewards are sparse. We address both. First, we introduce Tev-Gym, the first long-horizon agent training dataset with verifiable, dense, progressive rewards -- 1,170 verified task environments across 7 domains. It is built on a latent-world-first approach that first constructs a latent world: a complete and correct hidden specification of the task domain, workflow, and expected state after each step. Each task is then progressively rendered from this specification into an agent-facing environment, enabling controllable complexity and a natural progress metric. Second, we turn this metric into a training recipe: via progress-potential reward shaping (PPRS), we convert progress into a dense per-step reward that improves training efficiency and makes otherwise-intractable tasks trainable. Training with this recipe yields Tev-27B, which achieves substantial gains on the Agents' Last Exam computing and math sciences domains (ALE-CM), matching GPT-6 Astra and Claude Opus 5 at Pass@5. Despite training only on ALE-related data, it generalizes to the Terminal-Bench (TB) 3.0 and 4.0 subsets, surpassing GLM 5.2 and Gemini 3.7 Flash, and reaches Claude Opus 4.8-level performance on middle-horizon tasks such as TB 2.1.

Các nguồn đối chiếu cho sự kiện này

1 nguồn
Thông tin phân tích AI & Model Details ▾
Provider: openai-compatible · Model: gemini-3.8-flash-high · Version: analysis-v1 · Time: 2026-10-14 13:09:58 +0000 UTC
{"tags": ["AI Agents", "Long-Horizon Tasks", "Reinforcement Learning", "Reward Shaping", "Tev-Gym", "Tev-27B", "Open Source AI", "Recursive Self-Improvement"], "risks": ["Nguy cơ mất an toàn khi agent tự hành nhiều ngày và có khả năng tự cải tiến đệ quy (RSI) nếu thiếu chốt chặn kiểm soát của con người.", "Khả năng phụ thuộc vào giả định hoàn hảo của latent world giả lập, có thể suy giảm độ chính xác khi đối mặt với môi trường thực tế nhiễu loạn.", "Chi phí tài nguyên tính toán để mô phỏng và render các môi trường tác vụ dài hạn."], "category": "Agents", "entities": ["Tev", "Tev-Gym", "Tev-27B", "PPRS", "ALE-CM", "Terminal-Bench", "GPT-6 Astra", "Claude Opus 5", "Claude Opus 4.8", "GLM 5.2", "Gemini 3.7 Flash"], "summary_vi": "Tev giải quyết điểm nghẽn thiếu dữ liệu và phần thưởng thưa (sparse rewards) trong huấn luyện agent tác vụ dài hạn. Nghiên cứu giới thiệu Tev-Gym gồm 1.170 môi trường tác vụ thuộc 7 domain với phần thưởng dày đặc dựa trên phương pháp 'latent-world-first'. Kết hợp kỹ thuật tạo thưởng PPRS (Progress-Potential Reward Shaping), mô hình mã nguồn mở Tev-27B được huấn luyện đạt kết quả Pass@5 ngang tầm GPT-6 Astra và Claude Opus 5 trên benchmark ALE-CM, đồng thời tổng quát hóa mạnh mẽ trên Terminal-Bench.", "key_changes": ["Giới thiệu Tev-Gym: bộ dữ liệu huấn luyện tác vụ dài hạn đầu tiên có phần thưởng tiệm tiến, dày đặc và có thể xác minh với 1.170 môi trường trên 7 lĩnh vực.", "Áp dụng phương pháp tiếp cận 'latent-world-first', xây dựng đặc tả ẩn hoàn chỉnh về domain, workflow và trạng thái kỳ vọng trước khi render thành môi trường tương tác.", "Đề xuất công thức định hình phần thưởng PPRS (Progress-Potential Reward Shaping), biến tiến độ thành reward từng bước giúp tối ưu hiệu quả huấn luyện cho các tác vụ phức tạp.", "Huấn luyện thành công mô hình mã nguồn mở Tev-27B, đạt Pass@5 tương đương GPT-6 Astra và Claude Opus 5 trên ALE-CM, vượt GLM 5.2 và Gemini 3.7 Flash trên Terminal-Bench 3.0/4.0."], "sub_category": "Long-Horizon Agents & Reinforcement Learning", "novelty_score": 88, "business_score": 82, "research_score": 92, "why_it_matters": "Khả năng thực hiện tác vụ dài hạn là nền tảng cốt lõi để AI tạo ra giá trị kinh tế trực tiếp và hướng tới tự cải tiến đệ quy (RSI). Tev chứng minh rằng việc kết hợp thiết kế môi trường 'latent-world-first' với kỹ thuật định hình phần thưởng PPRS có thể giúp một mô hình mã nguồn mở 27B đạt hiệu năng tương đương các mô hình frontier độc quyền lớn nhất trên các tác vụ suy luận và tính toán phức tạp.", "developer_score": 85, "importance_score": 90, "possible_use_cases": ["Tự động hóa các quy trình phần mềm và DevOps phức tạp kéo dài nhiều giờ đến nhiều ngày qua terminal.", "Phát triển hệ thống khám phá khoa học tự động và tính toán toán học chuyên sâu.", "Nghiên cứu và hiện thực hóa các cơ chế tự cải tiến đệ quy (Recursive Self-Improvement - RSI) an toàn.", "Làm bộ khung dữ liệu và phương pháp chuẩn để huấn luyện các agent mã nguồn mở kích thước vừa."], "actionability_score": 82}