Radar Live
✦ Ask AI
AI INTELLIGENCE & SIGNALS

Test-Time Self-Play: Scaling without a Verifier

Phân tích đã xử lý trước và các nguồn liên quan.

Tín hiệu Radar

65 RADAR
Research Test-Time Compute · 1 nguồn đối chiếu · 2026-11-05 03:07:02 +0000 UTC

Test-Time Self-Play: Scaling without a Verifier

Nguồn: arXiv AI
↗

Nghiên cứu giới thiệu Test-Time Self-Play (TTSP), giải pháp mở rộng tính toán lúc suy luận (test-time scaling) dựa trên tự chơi bất đối xứng (asymmetric self-play) mà không cần bộ chấm điểm/xác minh (verifier). Trên tập dữ liệu LiveCodeBench v6, TTSP vượt trội hơn tất cả các phương pháp cơ sở ở mọi cấp độ verifier và đạt mức tăng tuyệt đối 35% mean@8 khi hoàn toàn không có verifier, duy trì hiệu quả trừ phi mô hình nền tảng có độ bao phủ nghiệm đúng gần bằng 0.

✦ TÁC ĐỘNG & GIÁ TRỊ THỰC TIỄN

Phần lớn các phương pháp test-time scaling hiện tại phụ thuộc chặt chẽ vào verifier chất lượng cao – thứ cực kỳ khó xây dựng trong thực tế triển khai. TTSP chứng minh khả năng khai thác compute lúc suy luận hiệu quả mà không cần verifier, giải quyết nút thắt lớn cho việc ứng dụng LLM vào các bài toán mở và tác vụ lập trình phức tạp.

Developer 71
Business 65
Novelty 85
Actionable 65

Nội dung thu thập đã chuẩn hóa

Collected Evidence

Nội dung văn bản được dùng làm dữ liệu đối chứng cho mô hình AI, không phải chỉ thị hệ thống.

Test-time scaling methods spend additional compute at deployment to improve a large language model's performance on a hard target problem. Most methods rely on a verifier that scores candidate solutions for correctness, using it to select among or refine the model's outputs. In many deployment regimes, however, a strong verifier on the target problem is unavailable. We introduce Test-Time Self-Play (TTSP), an approach to test-time scaling using asymmetric self-play without reliance on a verifier. On a difficulty-calibrated subset of LiveCodeBench v6, TTSP is the best-performing method at every verifier strength we evaluate, and the gap to the strongest baseline widens as the verifier weakens; in the no-verifier limit, TTSP yields a 35\% absolute improvement in mean@8. The gains hold across a range of verifier strengths, except when the base policy has near-zero coverage of the correct answer.

Các nguồn đối chiếu cho sự kiện này

1 nguồn
Thông tin phân tích AI & Model Details ▾
Provider: openai-compatible · Model: gemini-3.8-flash-high · Version: analysis-v1 · Time: 2026-11-06 09:52:40 +0000 UTC
{"tags": ["Test-Time Scaling", "Self-Play", "LLM Reasoning", "LiveCodeBench", "Inference Compute", "Verifier-Free"], "risks": ["Không thể khắc phục lỗi nếu mô hình nền tảng hoàn toàn không có khả năng tạo ra lời giải đúng ban đầu (near-zero coverage).", "Gia tăng đáng kể chi phí tính toán và độ trễ (latency) khi suy luận do yêu cầu asymmetric self-play.", "Độ phức tạp khi triển khai và kiểm soát hành vi hội tụ của self-play tại thời điểm deployment."], "category": "Research", "entities": ["TTSP", "Test-Time Self-Play", "LiveCodeBench v6"], "summary_vi": "Nghiên cứu giới thiệu Test-Time Self-Play (TTSP), giải pháp mở rộng tính toán lúc suy luận (test-time scaling) dựa trên tự chơi bất đối xứng (asymmetric self-play) mà không cần bộ chấm điểm/xác minh (verifier). Trên tập dữ liệu LiveCodeBench v6, TTSP vượt trội hơn tất cả các phương pháp cơ sở ở mọi cấp độ verifier và đạt mức tăng tuyệt đối 35% mean@8 khi hoàn toàn không có verifier, duy trì hiệu quả trừ phi mô hình nền tảng có độ bao phủ nghiệm đúng gần bằng 0.", "key_changes": ["Đề xuất Test-Time Self-Play (TTSP): phương pháp test-time scaling sử dụng cơ chế asymmetric self-play mà không cần verifier.", "Đạt mức cải thiện tuyệt đối 35% mean@8 trên tập dữ liệu LiveCodeBench v6 trong điều kiện không có verifier (no-verifier limit).", "Khoảng cách hiệu năng vượt trội so với các baseline mạnh nhất nới rộng dần khi chất lượng verifier suy giảm.", "Chỉ ra giới hạn: hiệu quả suy giảm mạnh khi policy cơ sở có độ bao phủ nghiệm đúng gần bằng 0 (near-zero coverage)."], "sub_category": "Test-Time Compute", "novelty_score": 85, "business_score": 65, "research_score": 88, "why_it_matters": "Phần lớn các phương pháp test-time scaling hiện tại phụ thuộc chặt chẽ vào verifier chất lượng cao – thứ cực kỳ khó xây dựng trong thực tế triển khai. TTSP chứng minh khả năng khai thác compute lúc suy luận hiệu quả mà không cần verifier, giải quyết nút thắt lớn cho việc ứng dụng LLM vào các bài toán mở và tác vụ lập trình phức tạp.", "developer_score": 75, "importance_score": 82, "possible_use_cases": ["Tối ưu hóa và nâng cao chất lượng sinh mã nguồn cho các bài toán lập trình phức tạp thiếu test case tự động.", "Mở rộng tính toán tại thời điểm suy luận (test-time compute) cho các bài toán giải quyết vấn đề mở (open-ended reasoning) không thể xây dựng reward model chính xác.", "Hỗ trợ các hệ thống tác nhân AI (AI agents) tự rà soát và tinh chỉnh giải pháp mà không cần phụ thuộc vào external validator."], "actionability_score": 65}
← Trang trước Trang 1