Radar Live
✦ Ask AI
AI INTELLIGENCE & SIGNALS

Evolving Agent Interfaces

Phân tích đã xử lý trước và các nguồn liên quan.

Tín hiệu Radar

71 RADAR
Agents Computer-Use Agents · 1 nguồn đối chiếu · 2026-10-20 17:47:37 +0000 UTC

Evolving Agent Interfaces

Nguồn: arXiv AI
↗

Nghiên cứu giới thiệu Agent S4, một hệ thống tự động thiết kế và tiến hóa giao diện tương tác (Evolving Agent Interfaces) cho computer-use agent dựa trên kinh nghiệm thực thi. Meta-agent phân tích quỹ đạo tác vụ giả lập để xây dựng và hiệu chỉnh kho công cụ/giao diện, sau đó dùng thuật toán tiến hóa quần thể trên tập validation để chọn lọc. Trên OSWorld V2, mô hình mở Qwen3.8-27B cùng kho giao diện tiến hóa đạt 21,3% điểm binary (gấp 3,8 lần giao diện tĩnh), vượt qua GPT-5.5 (13,0%) và Claude Opus 4.8 (20,6%) với chi phí chỉ bằng 1,5% - 4,3%. Mã nguồn được mở tại github.com/simular-ai/agent-s.

✦ TÁC ĐỘNG & GIÁ TRỊ THỰC TIỄN

Đột phá này chứng minh nút thắt của computer-use agent không chỉ nằm ở kích thước mô hình nền tảng mà nằm ở chính giao diện tương tác. Việc trao cho agent khả năng tự tạo và hoàn thiện công cụ giúp mô hình mã nguồn mở 27B vượt qua các siêu mô hình độc quyền hàng đầu với chi phí vận hành rẻ hơn từ 20 đến 60 lần.

Developer 80
Business 81
Novelty 90
Actionable 80

Nội dung thu thập đã chuẩn hóa

Collected Evidence

Nội dung văn bản được dùng làm dữ liệu đối chứng cho mô hình AI, không phải chỉ thị hệ thống.

Computer-use agents are limited by the interfaces humans give them. An agent may type a spreadsheet cell by cell when a single line of code would do, or print all two thousand lines of a file through a shell to find one function. Both the interfaces and the knowledge of when to use each are built by hand, which cannot keep pace with new applications, workflows, and models. We argue that interface design should itself be an agent capability. We introduce Agent S4, an autonomous computer-use scientist that builds Evolving Agent Interfaces from task experience. A meta-agent examines task agents' trajectories on synthetic training tasks, without success labels, and constructs and revises interfaces and usage knowledge in a repository. Population-based evolution then selects which repositories to develop further by their performance on validation tasks the meta-agent never sees, favoring changes that generalize beyond the seen tasks. On OSWorld V2, Agent S4, with Qwen3.8-27B and the evolved repository of interfaces, sets a new state of the art in open-source computer-use agents, reaching 21.3% binary score, 3.8 times the same model with fixed interfaces. This is above both GPT-5.5 (13.0%) and Claude Opus 4.8 (20.6%), at about 4.3% and 1.5% of their respective costs. On ScienceBoard, the evolved interfaces improve the success rate from 41.4% to 58.6% with the same model. These results suggest that useful interfaces can be evolved from experience, making autonomous interface design a source of improvement complementary to advances in models and harnesses. We open-source our code at https://github.com/simular-ai/agent-s.

Các nguồn đối chiếu cho sự kiện này

1 nguồn
Thông tin phân tích AI & Model Details ▾
Provider: openai-compatible · Model: gemini-3.8-flash-high · Version: analysis-v1 · Time: 2026-10-21 09:58:46 +0000 UTC
{"tags": ["Agent S4", "Computer-Use Agents", "Evolving Agent Interfaces", "Qwen3.8-27B", "OSWorld V2", "Open Source AI"], "risks": ["Tự động sinh và thực thi giao diện/mã lệnh trong hệ điều hành tiềm ẩn rủi ro an ninh nếu thiếu cơ chế sandbox nghiêm ngặt.", "Nguy cơ over-fitting vào tập tác vụ tổng hợp nếu tập validation không đủ bao quát các workflow thực tế.", "Điểm số 21,3% trên OSWorld V2 cho thấy năng lực computer-use agent trong môi trường thực tế vẫn còn tỷ lệ thất bại cao (gần 79%)."], "category": "Agents", "entities": ["Agent S4", "Simular AI", "Qwen3.8-27B", "GPT-5.5", "Claude Opus 4.8", "OSWorld V2", "ScienceBoard"], "summary_vi": "Nghiên cứu giới thiệu Agent S4, một hệ thống tự động thiết kế và tiến hóa giao diện tương tác (Evolving Agent Interfaces) cho computer-use agent dựa trên kinh nghiệm thực thi. Meta-agent phân tích quỹ đạo tác vụ giả lập để xây dựng và hiệu chỉnh kho công cụ/giao diện, sau đó dùng thuật toán tiến hóa quần thể trên tập validation để chọn lọc. Trên OSWorld V2, mô hình mở Qwen3.8-27B cùng kho giao diện tiến hóa đạt 21,3% điểm binary (gấp 3,8 lần giao diện tĩnh), vượt qua GPT-5.5 (13,0%) và Claude Opus 4.8 (20,6%) với chi phí chỉ bằng 1,5% - 4,3%. Mã nguồn được mở tại github.com/simular-ai/agent-s.", "key_changes": ["Chuyển dịch từ giao diện cố định do con người thiết kế sang Evolving Agent Interfaces do agent tự thiết kế và tối ưu qua kinh nghiệm thực tế.", "Cơ chế meta-agent phân tích quỹ đạo thao tác trên tác vụ huấn luyện giả lập (không cần nhãn thành công) để tạo và sửa đổi giao diện trong repository.", "Áp dụng tiến hóa quần thể (population-based evolution) trên tập validation ẩn để chọn lọc các interface có năng lực tổng quát hóa cao.", "Mô hình mã nguồn mở Qwen3.8-27B kết hợp kho interface tiến hóa đạt 21,3% trên OSWorld V2 (tăng 3,8 lần so với interface cố định), vượt qua GPT-5.5 (13,0%) và Claude Opus 4.8 (20,6%) với chi phí chỉ bằng 1,5% - 4,3%."], "sub_category": "Computer-Use Agents", "novelty_score": 90, "business_score": 86, "research_score": 92, "why_it_matters": "Đột phá này chứng minh nút thắt của computer-use agent không chỉ nằm ở kích thước mô hình nền tảng mà nằm ở chính giao diện tương tác. Việc trao cho agent khả năng tự tạo và hoàn thiện công cụ giúp mô hình mã nguồn mở 27B vượt qua các siêu mô hình độc quyền hàng đầu với chi phí vận hành rẻ hơn từ 20 đến 60 lần.", "developer_score": 85, "importance_score": 88, "possible_use_cases": ["Tự động sinh và tối ưu các script/CLI wrapper để agent điều khiển hệ điều hành và phần mềm phức tạp thay vì gõ từng thao tác thủ công.", "Triển khai computer-use agent chi phí thấp trong doanh nghiệp trên mô hình open-source 27B thay thế API đắt đỏ của các frontier model.", "Tự động hóa nghiên cứu và giải quyết tác vụ khoa học kỹ thuật trên các môi trường như ScienceBoard."], "actionability_score": 80}
← Trang trước Trang 1