Radar Live
✦ Ask AI
AI INTELLIGENCE & SIGNALS

TradeWar: A Benchmark for Execution-Grounded Trade Negotiation with Adaptive LLM Agents

Phân tích đã xử lý trước và các nguồn liên quan.

Tín hiệu Radar

61 RADAR
Agents Multi-Agent Systems · 1 nguồn đối chiếu · 2026-10-30 16:45:29 +0000 UTC

TradeWar: A Benchmark for Execution-Grounded Trade Negotiation with Adaptive LLM Agents

Nguồn: arXiv AI
↗

TradeWar là benchmark mới giải quyết lỗ hổng của các bài kiểm tra đàm phán LLM hiện tại - vốn chỉ đo tỷ lệ đạt thỏa thuận mà bỏ qua giá trị thực thi. Benchmark chuyển đổi đối thoại đàm phán thành chính sách thuế quan/thị phần chịu ràng buộc năng lực và đo lường bằng chỉ số Economic Health Index (EHI). Đồng thời, nghiên cứu giới thiệu TACTIC, tác tử LLM có khả năng thích ứng liên phiên (cross-episode) dựa trên lý thuyết tâm trí (Theory-of-Mind) và kinh nghiệm thực thi mà không cần tinh chỉnh trọng số, vượt trội đáng kể so với PromptLLM và MemoryLLM ngay cả khi chịu các cú sốc khủng hoảng.

✦ TÁC ĐỘNG & GIÁ TRỊ THỰC TIỄN

Nghiên cứu chứng minh rằng kỹ thuật gợi ý CoT và bộ nhớ tương tác thông thường không đủ để giải quyết phản hồi thực thi trễ trong đàm phán phức tạp. Việc neo đàm phán vào kết quả thực thi kinh tế thực tế là bước chuyển quan trọng để đưa AI agent từ đối thoại suông sang ứng dụng thương mại và chuỗi cung ứng thực tế.

Developer 68
Business 73
Novelty 82
Actionable 65

Nội dung thu thập đã chuẩn hóa

Collected Evidence

Nội dung văn bản được dùng làm dữ liệu đối chứng cho mô hình AI, không phải chỉ thị hệ thống.

Multi-turn negotiation remains a challenging problem for large language model (LLM) agents. While LLMs can conduct natural-language dialogue, existing benchmarks predominantly assess only agreement rates, overlooking whether negotiated commitments actually create value once executed. To address this gap, we introduce TradeWar, a multi-country simulation benchmark that translates negotiation dialogues into concrete tariff and trade-share policies, enforces capacity and network constraints during settlement, and evaluates outcomes via an Economic Health Index (EHI). To solve this execution-grounded task, we propose TACTIC (Trade-aware Adaptive Consolidation and Theory-of-mind for International Commerce), an agent that iteratively refines its negotiation strategy across episodes-without updating base LLM weights-by leveraging prior experience, opponent behavior, and past settlement outcomes. Despite using zero-shot chain-of-thought (CoT) prompting, PromptLLM attains a 75% agreement rate but only 57.1 final EHI (*100), whereas TACTIC reaches 68.8. Across 20 sequential episodes and three seeds, TACTIC's final EHI improves from 58.2 to 73.2, compared with 65.2 for an ablation without cross-episode updates. Under technology-controls and energy-crisis shocks, TACTIC also exhibits smaller performance degradation than PromptLLM and MemoryLLM. These results indicate that CoT deliberation and interaction memory alone do not fully address delayed execution feedback, whereas settlement-grounded adaptation improves long-horizon negotiation in TradeWar.

Các nguồn đối chiếu cho sự kiện này

1 nguồn
Thông tin phân tích AI & Model Details ▾
Provider: openai-compatible · Model: gemini-3.8-flash-high · Version: analysis-v1 · Time: 2026-11-02 11:26:14 +0000 UTC
{"tags": ["LLM Agents", "TradeWar", "TACTIC", "Multi-Agent Negotiation", "Game Theory", "Economic Health Index", "Execution Grounding"], "risks": ["Khoảng cách giữa mô phỏng TradeWar và sự phức tạp khôn lường của địa chính trị và pháp lý thương mại thực tế.", "Mô hình hóa đối thủ (Theory-of-Mind) có thể hoạt động kém nếu đối tác hành động phi lý trí hoặc dùng chiến lược phá hoại.", "Nguy cơ tối ưu hóa quá mức vào chỉ số EHI mô phỏng dẫn đến chiến lược đàm phán cực đoan trong môi trường thực."], "category": "Agents", "entities": ["TradeWar", "TACTIC", "PromptLLM", "MemoryLLM", "Economic Health Index (EHI)"], "summary_vi": "TradeWar là benchmark mới giải quyết lỗ hổng của các bài kiểm tra đàm phán LLM hiện tại - vốn chỉ đo tỷ lệ đạt thỏa thuận mà bỏ qua giá trị thực thi. Benchmark chuyển đổi đối thoại đàm phán thành chính sách thuế quan/thị phần chịu ràng buộc năng lực và đo lường bằng chỉ số Economic Health Index (EHI). Đồng thời, nghiên cứu giới thiệu TACTIC, tác tử LLM có khả năng thích ứng liên phiên (cross-episode) dựa trên lý thuyết tâm trí (Theory-of-Mind) và kinh nghiệm thực thi mà không cần tinh chỉnh trọng số, vượt trội đáng kể so với PromptLLM và MemoryLLM ngay cả khi chịu các cú sốc khủng hoảng.", "key_changes": ["Ra mắt TradeWar - benchmark mô phỏng đàm phán thương mại đa quốc gia, chuyển đổi hội thoại thành chính sách thuế quan và thị phần thực tế có ràng buộc năng lực và mạng lưới.", "Phát triển tác tử TACTIC (Trade-aware Adaptive Consolidation and Theory-of-mind) có khả năng tự tinh chỉnh chiến lược qua các tập (episodes) mà không cần cập nhật trọng số LLM.", "Phát hiện tỷ lệ đồng thuận cao không đồng nghĩa với hiệu quả kinh tế: PromptLLM đạt thỏa thuận 75% nhưng EHI chỉ đạt 57.1, trong khi TACTIC đạt 68.8 và tăng từ 58.2 lên 73.2 sau 20 episodes.", "TACTIC thể hiện khả năng chống chịu và ít suy giảm hiệu năng hơn trước các cú sốc kiểm soát công nghệ và khủng hoảng năng lượng so với PromptLLM và MemoryLLM."], "sub_category": "Multi-Agent Systems", "novelty_score": 82, "business_score": 80, "research_score": 85, "why_it_matters": "Nghiên cứu chứng minh rằng kỹ thuật gợi ý CoT và bộ nhớ tương tác thông thường không đủ để giải quyết phản hồi thực thi trễ trong đàm phán phức tạp. Việc neo đàm phán vào kết quả thực thi kinh tế thực tế là bước chuyển quan trọng để đưa AI agent từ đối thoại suông sang ứng dụng thương mại và chuỗi cung ứng thực tế.", "developer_score": 72, "importance_score": 78, "possible_use_cases": ["Mô phỏng và tối ưu hóa đàm phán chuỗi cung ứng, hợp đồng mua sắm B2B dựa trên ràng buộc thực thi thực tế thay vì chỉ đạt đồng thuận trên giấy tờ.", "Mô phỏng kịch bản chính sách thương mại và phản ứng kinh tế vĩ mô trước các cú sốc thị trường (khủng hoảng năng lượng, cấm vận công nghệ).", "Đánh giá và kiểm chuẩn (benchmark) các hệ thống LLM agent thương lượng tự động trong môi trường có phản hồi thực thi trễ."], "actionability_score": 65}
← Trang trước Trang 1