Radar Live
✦ Ask AI
AI INTELLIGENCE & SIGNALS

Controlled Decoding Attacks on Black-Box LLMs

Phân tích đã xử lý trước và các nguồn liên quan.

Tín hiệu Radar

64 RADAR
Research AI Safety & Adversarial Attacks · 1 nguồn đối chiếu · 2026-09-29 07:58:49 +0000 UTC

Controlled Decoding Attacks on Black-Box LLMs

Nguồn: arXiv AI
↗

Nghiên cứu giới thiệu một framework tấn công bẻ khóa (jailbreak) trên các mô hình ngôn ngữ lớn (LLM) hộp đen chỉ qua giao diện text-only continuation có hỗ trợ lặp mẫu và assistant-prefix. Phương pháp giải quyết bài toán ước tính phân phối thưa thớt và chi phí truy vấn cao bằng ba thành phần: Tái tạo phân phối dựa trên mẫu (kết hợp prior), Kiểm soát phần dư theo rủi ro (tập trung can thiệp tại các vị trí nhạy cảm) và Thực thi suy đoán đa token (giảm số lần gọi API), đạt hiệu quả vượt trội so với các baseline trên nhiều benchmark.

✦ TÁC ĐỘNG & GIÁ TRỊ THỰC TIỄN

Trước đây, các cuộc tấn công can thiệp phân phối giải mã (controlled decoding) yêu cầu quyền truy cập trọng số mô hình hoặc xác suất token (white-box). Nghiên cứu này chứng minh rằng giao diện hộp đen chỉ trả về text vẫn có thể bị bẻ khóa an toàn hiệu quả nếu cho phép tiếp tục tiền tố (prefix continuation), đặt ra yêu cầu cấp thiết về việc kiểm soát bề mặt API và cơ chế định giá/giới hạn truy vấn đối với các nhà cung cấp LLM.

Developer 71
Business 65
Novelty 80
Actionable 70

Nội dung thu thập đã chuẩn hóa

Collected Evidence

Nội dung văn bản được dùng làm dữ liệu đối chứng cho mô hình AI, không phải chỉ thị hệ thống.

Manipulating next-token probabilities during generation can bypass the safety alignment of large language models. Existing approaches, however, rely on access to model weights or numerical token probabilities and therefore do not apply to interfaces that return only sampled text. Reconstructing probabilities from sampled outputs offers a possible alternative, but finite sampling produces sparse and noisy estimates, while repeating this process at every generation step incurs substantial query costs. Our empirical observations suggest that large distributional changes along successful jailbreak trajectories are concentrated at a small subset of positions, motivating selective control. We introduce \method{}, a framework for jailbreaking through text-only continuation interfaces that permit repeated sampling and assistant-prefix continuation. Sample-Based Distribution Reconstruction combines sampled outputs with a prior over unobserved actions to obtain a usable control signal. Risk-Gated Residual Control uses the evolving response prefix to decide when to reconstruct and modify the distribution, concentrating sampling costs at selected positions. Speculative Multi-Token Execution further amortizes target calls by verifying and accepting draft prefixes that require no intervention. Across four target endpoints and three benchmarks, \method{} achieves the highest mean score most comparisons against baselines.

Các nguồn đối chiếu cho sự kiện này

1 nguồn
Thông tin phân tích AI & Model Details ▾
Provider: openai-compatible · Model: gemini-3.8-flash-high · Version: analysis-v1 · Time: 2026-09-30 09:32:54 +0000 UTC
{"tags": ["AI Safety", "LLM Jailbreak", "Black-Box Attack", "Controlled Decoding", "Adversarial ML"], "risks": ["Nguy cơ bị khai thác để vượt qua căn chỉnh an toàn trên các mô hình thương mại với chi phí truy vấn thấp.", "Tạo ra nội dung độc hại hoặc trích xuất thông tin nhạy cảm từ các mô hình vốn đã được căn chỉnh an toàn."], "category": "Research", "entities": ["LLM", "Sample-Based Distribution Reconstruction", "Risk-Gated Residual Control", "Speculative Multi-Token Execution"], "summary_vi": "Nghiên cứu giới thiệu một framework tấn công bẻ khóa (jailbreak) trên các mô hình ngôn ngữ lớn (LLM) hộp đen chỉ qua giao diện text-only continuation có hỗ trợ lặp mẫu và assistant-prefix. Phương pháp giải quyết bài toán ước tính phân phối thưa thớt và chi phí truy vấn cao bằng ba thành phần: Tái tạo phân phối dựa trên mẫu (kết hợp prior), Kiểm soát phần dư theo rủi ro (tập trung can thiệp tại các vị trí nhạy cảm) và Thực thi suy đoán đa token (giảm số lần gọi API), đạt hiệu quả vượt trội so với các baseline trên nhiều benchmark.", "key_changes": ["Phát triển phương pháp bẻ khóa (jailbreak) LLM hộp đen thông qua giao diện sinh tiếp văn bản thuần túy (text-only continuation) hỗ trợ lặp mẫu và assistant-prefix.", "Kỹ thuật Sample-Based Distribution Reconstruction: Tái tạo phân phối xác suất từ mẫu hữu hạn kết hợp prior để tạo tín hiệu điều khiển.", "Cơ chế Risk-Gated Residual Control: Tập trung can thiệp và tái tạo phân phối tại các vị trí rủi ro then chốt dọc quỹ đạo sinh, tiết kiệm chi phí truy vấn.", "Cơ chế Speculative Multi-Token Execution: Xác minh và chấp nhận các tiền tố nháp không cần can thiệp để giảm tải số lần gọi mô hình mục tiêu."], "sub_category": "AI Safety & Adversarial Attacks", "novelty_score": 80, "business_score": 65, "research_score": 85, "why_it_matters": "Trước đây, các cuộc tấn công can thiệp phân phối giải mã (controlled decoding) yêu cầu quyền truy cập trọng số mô hình hoặc xác suất token (white-box). Nghiên cứu này chứng minh rằng giao diện hộp đen chỉ trả về text vẫn có thể bị bẻ khóa an toàn hiệu quả nếu cho phép tiếp tục tiền tố (prefix continuation), đặt ra yêu cầu cấp thiết về việc kiểm soát bề mặt API và cơ chế định giá/giới hạn truy vấn đối với các nhà cung cấp LLM.", "developer_score": 75, "importance_score": 78, "possible_use_cases": ["Kiểm thử bảo mật (red-teaming) tự động cho các API LLM hộp đen thương mại.", "Nghiên cứu cơ chế phòng thủ và giám sát truy vấn bất thường trên các endpoint hỗ trợ assistant-prefix continuation.", "Đánh giá độ bền vững của safety alignment trước các kỹ thuật tấn công giải mã có kiểm soát."], "actionability_score": 70}
← Trang trước Trang 1