Radar Live
✦ Ask AI
AI INTELLIGENCE & SIGNALS

VStress: Correlation-Aware Auditing and Adaptive Budget Allocation for Repeated Verifiers

Phân tích đã xử lý trước và các nguồn liên quan.

Tín hiệu Radar

66 RADAR
Research AI Verifiers & Budget Allocation · 1 nguồn đối chiếu · 2026-09-29 07:59:03 +0000 UTC

VStress: Correlation-Aware Auditing and Adaptive Budget Allocation for Repeated Verifiers

Nguồn: arXiv AI
↗

VStress giới thiệu hợp đồng kiểm toán phát lại và chính sách phân bổ ngân sách VStress-CA cho các bộ kiểm định (verifier) lặp lại. VStress-CA ước tính thông tin biên có điều kiện của verifier trên tập hiệu chuẩn niêm phong, chiết khấu độ bất định, chuẩn hóa theo chi phí và dừng hoặc từ chối khi lượt gọi tiếp theo không mang lại giá trị thông tin. Hệ thống trang bị cảnh báo dịch chuyển phụ thuộc để quay về chế độ dừng chính xác. Thực nghiệm cho thấy ở độ nhiễu 35%, cơ chế majority-5 tăng độ chính xác cân bằng từ 0.6578 lên 0.7739, nhưng ở độ nhiễu 65% lại làm giảm 0.1226 điểm. So với phân bổ theo độ rộng (0.6048) và dư thừa (0.6375) dưới cùng mức ngân sách, VStress-CA đạt độ chính xác 0.6538 với 3.4216 lượt gọi/mục và điểm RLVR 0.6417. Kết quả cũng chỉ ra việc gọi chéo họ mô hình mang lại thông tin biên cao hơn nhiều (lên đến 0.0913) so với gọi lặp cùng một mô hình (0.0126).

✦ TÁC ĐỘNG & GIÁ TRỊ THỰC TIỄN

Nghiên cứu giải quyết vấn đề lãng phí tài nguyên và rủi ro sụt giảm chất lượng khi lạm dụng việc gọi lặp verifier trong các quy trình RLVR và scaling test-time compute. Bằng cách định lượng thông tin biên có điều kiện và chứng minh tính ưu việt của việc kết hợp chéo họ mô hình, VStress biến bài toán tương quan lỗi từ cảnh báo mang tính hậu kiểm thành một quyết định phân bổ ngân sách chủ động và có thể kiểm toán minh bạch.

Developer 74
Business 72
Novelty 82
Actionable 74

Nội dung thu thập đã chuẩn hóa

Collected Evidence

Nội dung văn bản được dùng làm dữ liệu đối chứng cho mô hình AI, không phải chỉ thị hệ thống.

Repeated verifier calls are useful only when they contribute conditional information. We introduce VStress, an auditable replay contract, and VStress-CA, a correlation-aware allocation policy that estimates the conditional marginal information of an unqueried verifier on a sealed calibration split, discounts uncertainty, normalizes by call cost, and stops or abstains when the next call is not informative. The controller freezes its decision and cost ledger before joining the clean oracle; a dependence-shift alarm disables channel preference and falls back to exact-stop. The controlled audit gives the mechanism boundary: at 35% symmetric corruption, majority-5 improves balanced accuracy from 0.6578 to 0.7739, whereas at 65% it loses 0.1226 points. In the matched fixed-budget comparison, breadth, redundancy, and adaptive allocation obtain balanced accuracies 0.6048, 0.6375, and 0.6538, with 3.4216 calls per item and an RLVR score of 0.6417 for VStress-CA. Dependence diagnostics also increase from same-model repeats to cross-family channels, with conditional marginal gains of 0.0126, 0.0462, and 0.0913. These measurements turn correlation from a post-hoc warning into an auditable allocation decision.

Các nguồn đối chiếu cho sự kiện này

1 nguồn
Thông tin phân tích AI & Model Details ▾
Provider: openai-compatible · Model: gemini-3.8-flash-high · Version: analysis-v1 · Time: 2026-09-30 09:32:30 +0000 UTC
{"tags": ["VStress", "VStress-CA", "Verifier Allocation", "RLVR", "Test-Time Compute", "Correlation-Aware", "Auditability"], "risks": ["Khi tỷ lệ nhiễu/lỗi hệ thống cao (ở mức 65% nhiễu đối xứng), cơ chế bỏ phiếu đa số gây sụt giảm mạnh độ chính xác (-0.1226).", "Hiện tượng dịch chuyển tương quan phụ thuộc trong môi trường thực tế có thể làm sai lệch ước tính thông tin biên nếu cảnh báo không kích hoạt kịp thời.", "Phụ thuộc vào chất lượng và tính đại diện của tập hiệu chuẩn niêm phong (sealed calibration split)."], "category": "Research", "entities": ["VStress", "VStress-CA", "RLVR"], "summary_vi": "VStress giới thiệu hợp đồng kiểm toán phát lại và chính sách phân bổ ngân sách VStress-CA cho các bộ kiểm định (verifier) lặp lại. VStress-CA ước tính thông tin biên có điều kiện của verifier trên tập hiệu chuẩn niêm phong, chiết khấu độ bất định, chuẩn hóa theo chi phí và dừng hoặc từ chối khi lượt gọi tiếp theo không mang lại giá trị thông tin. Hệ thống trang bị cảnh báo dịch chuyển phụ thuộc để quay về chế độ dừng chính xác. Thực nghiệm cho thấy ở độ nhiễu 35%, cơ chế majority-5 tăng độ chính xác cân bằng từ 0.6578 lên 0.7739, nhưng ở độ nhiễu 65% lại làm giảm 0.1226 điểm. So với phân bổ theo độ rộng (0.6048) và dư thừa (0.6375) dưới cùng mức ngân sách, VStress-CA đạt độ chính xác 0.6538 với 3.4216 lượt gọi/mục và điểm RLVR 0.6417. Kết quả cũng chỉ ra việc gọi chéo họ mô hình mang lại thông tin biên cao hơn nhiều (lên đến 0.0913) so với gọi lặp cùng một mô hình (0.0126).", "key_changes": ["Đề xuất hợp đồng kiểm toán phát lại VStress (auditable replay contract) giúp đóng băng quyết định và sổ cái chi phí trước khi đối chiếu với clean oracle.", "Phát triển chính sách VStress-CA ước tính thông tin biên có điều kiện trên tập hiệu chuẩn niêm phong, chiết khấu độ bất định, chuẩn hóa theo chi phí gọi và dừng/từ chối khi lượt gọi tiếp theo không đem lại thông tin.", "Tích hợp cảnh báo dịch chuyển phụ thuộc (dependence-shift alarm) giúp vô hiệu hóa ưu tiên kênh và chuyển về dừng chính xác (exact-stop).", "Xác định ranh giới cơ chế dưới nhiễu đối xứng: ở mức nhiễu 35%, majority-5 tăng độ chính xác cân bằng từ 0.6578 lên 0.7739; nhưng ở mức nhiễu 65%, độ chính xác giảm 0.1226 điểm.", "Trong bài toán ngân sách cố định tương đương, VStress-CA đạt độ chính xác cân bằng 0.6538 (vượt mức 0.6048 của độ rộng và 0.6375 của dư thừa) với 3.4216 lượt gọi/mục và điểm RLVR đạt 0.6417.", "Đo lường mức tăng thông tin biên có điều kiện tăng dần từ gọi lặp lại cùng mô hình (0.0126) sang các kênh chéo họ mô hình (0.0462 và 0.0913)."], "sub_category": "AI Verifiers & Budget Allocation", "novelty_score": 82, "business_score": 76, "research_score": 86, "why_it_matters": "Nghiên cứu giải quyết vấn đề lãng phí tài nguyên và rủi ro sụt giảm chất lượng khi lạm dụng việc gọi lặp verifier trong các quy trình RLVR và scaling test-time compute. Bằng cách định lượng thông tin biên có điều kiện và chứng minh tính ưu việt của việc kết hợp chéo họ mô hình, VStress biến bài toán tương quan lỗi từ cảnh báo mang tính hậu kiểm thành một quyết định phân bổ ngân sách chủ động và có thể kiểm toán minh bạch.", "developer_score": 78, "importance_score": 80, "possible_use_cases": ["Tối ưu hóa ngân sách tính toán lúc suy luận (test-time compute) và RLVR cho các mô hình lý luận (reasoning models) bằng cách cắt giảm các lượt gọi verifier dư thừa.", "Xây dựng hệ thống ensemble và cơ chế bỏ phiếu đa số thích ứng (adaptive voting) cho các pipeline tự động chấm code hoặc đánh giá dữ liệu.", "Thiết kế bộ định tuyến (router) đa mô hình verifier, ưu tiên kết hợp các mô hình khác họ kiến trúc thay vì gọi lặp lại cùng một mô hình.", "Thiết lập quy trình kiểm toán chi phí và độ tin cậy của verifier với cơ chế đóng băng sổ cái chi phí có thể kiểm chứng trong doanh nghiệp."], "actionability_score": 74}
← Trang trước Trang 1