Radar Live
✦ Ask AI
AI INTELLIGENCE & SIGNALS

CliffCompaction: Cost-Efficient Compaction for Long-Horizon Coding Agents

Phân tích đã xử lý trước và các nguồn liên quan.

Tín hiệu Radar

71 RADAR
Agents Context Compaction · 1 nguồn đối chiếu · 2026-09-22 17:55:59 +0000 UTC

CliffCompaction: Cost-Efficient Compaction for Long-Horizon Coding Agents

Nguồn: arXiv AI
↗

CliffCompaction là kỹ thuật tự động nén ngữ cảnh (autocompaction) dành cho các coding agent hoạt động dài hạn, giúp giảm tới 50% chi phí trong ngữ cảnh giới hạn mà vẫn duy trì hoặc nâng cao hiệu năng trên Terminal-Bench và KernelBench. Phương pháp này chỉ cắt bớt hoặc loại bỏ nội dung gốc, tuyệt đối không viết lại hay diễn giải lại, và không bao giờ nén đè lên bản nén trước đó để ngăn chặn trôi dạt ngữ cảnh (context drift). Dự án được mã nguồn mở dưới dạng API proxy độc lập, tương thích với Claude Code và Codex.

✦ TÁC ĐỘNG & GIÁ TRỊ THỰC TIỄN

Giải quyết bài toán then chốt về chi phí và giới hạn context window cho autonomous coding agents. Thay vì dùng LLM để tóm tắt (dễ gây context drift và chi phí đệ quy), CliffCompaction chứng minh phương pháp cắt tỉa nội dung gốc mang lại độ trung thực cao, giúp các mô hình mã nguồn mở hoặc giá rẻ cạnh tranh sòng phẳng với các mô hình đóng đắt tiền nhất trong test-time scaling dài hạn.

Developer 83
Business 80
Novelty 84
Actionable 88

Nội dung thu thập đã chuẩn hóa

Collected Evidence

Nội dung văn bản được dùng làm dữ liệu đối chứng cho mô hình AI, không phải chỉ thị hệ thống.

Agents often work on complex problems that require millions of tokens of context, which necessitates compacting across sessions due to limited context windows. We develop CliffCompaction, an autocompaction technique that reduces cost by up to 50% under a bounded context while maintaining or improving performance on Terminal-Bench and achieving new levels of efficiency for test-time scaling and state-of-the-art results on KernelBench. The per-rollout savings of CliffCompaction make the performance--cost trade-off of test-time scaling more efficient, adding over 10 percentage points on Terminal-Bench for less than the cost of two full-context runs. Under parallel test-time scaling, CliffCompaction lets Kimi K2.6 match Opus 4.7, and exceed Opus 4.6 and GPT-5.3 Codex at lower cost. The key to CliffCompaction's effectiveness is that it keeps compacted information faithful by only truncating or dropping content, never rephrasing or rewriting it. We never compact a compaction---each pass operates only on original content, and prior compacted output is discarded, preventing context drift from accumulating. These properties sustain continual learning over sessions exceeding a million tokens: on KernelBench, CliffCompaction reaches CUDA kernel speedups of $2.23\times$ after 200 steps and $3.58\times$ after 400 steps, surpassing specialized search algorithms and trained agents despite being a general-purpose compaction technique. We open-source a scaffold-agnostic API-proxy implementation of CliffCompaction usable with Claude Code, Codex and other harnesses.

Các nguồn đối chiếu cho sự kiện này

1 nguồn
Thông tin phân tích AI & Model Details ▾
Provider: openai-compatible · Model: gemini-3.8-flash-high · Version: analysis-v1 · Time: 2026-09-23 09:47:27 +0000 UTC
{"tags": ["CliffCompaction", "Coding Agents", "Context Compaction", "Test-Time Scaling", "Token Optimization", "KernelBench", "Terminal-Bench", "API Proxy"], "risks": ["Việc chỉ cắt ngắn hoặc lược bỏ có thể loại trừ nhầm các thông tin ngữ cảnh quan trọng nếu thuật toán xác định độ ưu tiên chưa tối ưu.", "Cần kiểm chứng độ trễ bổ sung (latency overhead) khi chạy qua lớp API proxy trong môi trường thời gian thực.", "Hiệu quả thực tế có thể thay đổi tùy thuộc vào cấu trúc bài toán và định dạng prompt của từng harness hoặc mô hình cụ thể."], "category": "Agents", "entities": ["CliffCompaction", "Terminal-Bench", "KernelBench", "Kimi K2.6", "Opus 4.7", "Opus 4.6", "GPT-5.3 Codex", "Claude Code", "CUDA"], "summary_vi": "CliffCompaction là kỹ thuật tự động nén ngữ cảnh (autocompaction) dành cho các coding agent hoạt động dài hạn, giúp giảm tới 50% chi phí trong ngữ cảnh giới hạn mà vẫn duy trì hoặc nâng cao hiệu năng trên Terminal-Bench và KernelBench. Phương pháp này chỉ cắt bớt hoặc loại bỏ nội dung gốc, tuyệt đối không viết lại hay diễn giải lại, và không bao giờ nén đè lên bản nén trước đó để ngăn chặn trôi dạt ngữ cảnh (context drift). Dự án được mã nguồn mở dưới dạng API proxy độc lập, tương thích với Claude Code và Codex.", "key_changes": ["Phát triển kỹ thuật CliffCompaction tự động nén ngữ cảnh cho agent, giảm chi phí token tới 50% trong môi trường ngữ cảnh có giới hạn.", "Áp dụng nguyên tắc nén trung thực: chỉ cắt ngắn (truncate) hoặc loại bỏ (drop) nội dung gốc, không bao giờ viết lại hay diễn giải lại (never rephrase/rewrite).", "Ngăn ngừa trôi dạt ngữ cảnh (context drift): không bao giờ nén đè lên bản nén trước (never compact a compaction), mỗi lượt nén đều xử lý từ nội dung gốc và loại bỏ kết quả nén cũ.", "Nâng cao hiệu quả test-time scaling: tăng hơn 10 điểm phần trăm trên Terminal-Bench với chi phí thấp hơn 2 lần chạy full-context; giúp Kimi K2.6 đạt hiệu năng ngang Opus 4.7 và vượt Opus 4.6, GPT-5.3 Codex ở chi phí rẻ hơn.", "Thiết lập kỷ lục trên KernelBench: tăng tốc CUDA kernel lên 2.23x sau 200 bước và 3.58x sau 400 bước qua các phiên làm việc vượt 1 triệu token.", "Mã nguồn mở triển khai dạng API proxy độc lập với scaffold, dễ dàng tích hợp vào Claude Code, Codex và các harness khác."], "sub_category": "Context Compaction", "novelty_score": 84, "business_score": 85, "research_score": 82, "why_it_matters": "Giải quyết bài toán then chốt về chi phí và giới hạn context window cho autonomous coding agents. Thay vì dùng LLM để tóm tắt (dễ gây context drift và chi phí đệ quy), CliffCompaction chứng minh phương pháp cắt tỉa nội dung gốc mang lại độ trung thực cao, giúp các mô hình mã nguồn mở hoặc giá rẻ cạnh tranh sòng phẳng với các mô hình đóng đắt tiền nhất trong test-time scaling dài hạn.", "developer_score": 90, "importance_score": 86, "possible_use_cases": ["Làm proxy trung gian giảm 50% chi phí API cho các công cụ coding agent như Claude Code và Codex trong các phiên lập trình dài.", "Tối ưu hóa chi phí và hiệu quả cho kỹ thuật test-time scaling song song (parallel rollouts) trong giải quyết bài toán phần mềm phức tạp.", "Hỗ trợ agent liên tục học và tối ưu hóa mã nguồn cấp thấp (như CUDA kernel) qua hàng trăm bước lặp và hàng triệu token mà không bị suy giảm trí nhớ.", "Xây dựng hạ tầng agent vận hành tự động dài hạn trong môi trường giới hạn context window của các LLM thương mại."], "actionability_score": 88}
← Trang trước Trang 1