Radar Live
✦ Ask AI
AI INTELLIGENCE & SIGNALS

Polarity Blindness in LLM Safety: A Systematic Study of Negation, Antonym Substitution, and Adversarial Framing

Phân tích đã xử lý trước và các nguồn liên quan.

Tín hiệu Radar

66 RADAR
Research AI Safety & Robustness · 1 nguồn đối chiếu · 2026-10-20 09:22:50 +0000 UTC

Polarity Blindness in LLM Safety: A Systematic Study of Negation, Antonym Substitution, and Adversarial Framing

Nguồn: arXiv AI
↗

Nghiên cứu phát hiện lỗ hổng cấu trúc mang tên 'mù phân cực' (polarity blindness) trong các rào chắn an toàn của LLM: mô hình thất bại trong việc nhận diện ý đồ độc hại khi câu bị đảo ngược phân cực qua phủ định ngữ pháp hoặc thay thế từ trái nghĩa. Thử nghiệm trên 260 prompt với 10 LLM hàng đầu trên 3 ngôn ngữ (Anh, Tây Ban Nha, Séc) cho thấy phần lớn mô hình đều bị ảnh hưởng, với điểm nguy hại trung bình lên tới 4.12/5, khẳng định đây là hạn chế nền tảng về độ bền ngữ nghĩa thay vì lỗi ngữ pháp cục bộ.

✦ TÁC ĐỘNG & GIÁ TRỊ THỰC TIỄN

Hiện tượng mù phân cực phơi bày khoảng trống lớn trong khả năng hiểu ngữ nghĩa thực sự của các LLM tiên tiến nhất. Việc các biến đổi ngôn ngữ cơ bản có thể vô hiệu hóa rào chắn an toàn buộc các kỹ sư và tổ chức phải thay đổi cách thiết kế hệ thống guardrail, chuyển từ kiểm duyệt bề mặt sang kiểm soát ngữ nghĩa chuyên sâu.

Developer 73
Business 67
Novelty 80
Actionable 72

Nội dung thu thập đã chuẩn hóa

Collected Evidence

Nội dung văn bản được dùng làm dữ liệu đối chứng cho mô hình AI, không phải chỉ thị hệ thống.

Negation remains a persistent challenge for language models across NLP tasks and modalities. We show that this weakness can undermine LLM safety guardrails through a structural vulnerability we term polarity blindness: the failure to recognize harmful intent after polarity-altering linguistic transformations. We study two forms of polarity inversion: grammatical negation and antonym replacement, and use synonym replacement as a polarity-preserving control. We further test whether an adversarial textual wrapper amplifies these failures. Using a 260-prompt benchmark across 10 state-of-the-art LLMs and 3 languages (English, Spanish, Czech), stratified by harmfulness potential and evaluated on a validated 0-5 harm scale, we find that polarity blindness affects most evaluated models, with mean harm scores reaching 4.12 for the most vulnerable model. The effect persists across typologically differing negation systems, suggesting that polarity blindness reflects a broader limitation in semantic robustness rather than a language- or grammar-specific failure.

Các nguồn đối chiếu cho sự kiện này

1 nguồn
Thông tin phân tích AI & Model Details ▾
Provider: openai-compatible · Model: gemini-3.8-flash-high · Version: analysis-v1 · Time: 2026-10-21 08:56:22 +0000 UTC
{"tags": ["AI Safety", "LLM Guardrails", "Polarity Blindness", "Adversarial Robustness", "Jailbreak", "Semantic Parsing", "NLP"], "risks": ["Kẻ tấn công có thể dễ dàng vượt qua (jailbreak) các lớp bảo vệ an toàn của mô hình bằng cách dùng câu phủ định hoặc từ trái nghĩa kết hợp adversarial wrapper.", "Nguy cơ vi phạm an toàn và pháp lý gia tăng khi doanh nghiệp triển khai LLM mà chỉ dựa vào các bộ lọc guardrail truyền thống.", "Các mô hình thương mại hiện tại thiếu độ bền ngữ nghĩa sâu, dẫn đến nhận định sai lệch về mức độ an toàn thực tế."], "category": "Research", "entities": ["LLM Safety Guardrails", "State-of-the-art LLMs", "English", "Spanish", "Czech"], "summary_vi": "Nghiên cứu phát hiện lỗ hổng cấu trúc mang tên 'mù phân cực' (polarity blindness) trong các rào chắn an toàn của LLM: mô hình thất bại trong việc nhận diện ý đồ độc hại khi câu bị đảo ngược phân cực qua phủ định ngữ pháp hoặc thay thế từ trái nghĩa. Thử nghiệm trên 260 prompt với 10 LLM hàng đầu trên 3 ngôn ngữ (Anh, Tây Ban Nha, Séc) cho thấy phần lớn mô hình đều bị ảnh hưởng, với điểm nguy hại trung bình lên tới 4.12/5, khẳng định đây là hạn chế nền tảng về độ bền ngữ nghĩa thay vì lỗi ngữ pháp cục bộ.", "key_changes": ["Định danh và chứng minh thực nghiệm lỗ hổng cấu trúc 'mù phân cực' (polarity blindness) khiến guardrail an toàn của LLM thất bại trong việc phát hiện ý đồ độc hại.", "Nghiên cứu hai hình thức đảo ngược phân cực: phủ định ngữ pháp (grammatical negation) và thay thế từ trái nghĩa (antonym replacement), kết hợp đối chứng với từ đồng nghĩa.", "Xây dựng bộ benchmark 260 prompt thử nghiệm trên 10 LLM tiên tiến nhất trên 3 ngôn ngữ (Anh, Tây Ban Nha, Séc) theo thang đo nguy hại 0-5.", "Ghi nhận điểm nguy hại trung bình đạt tới 4.12/5 trên mô hình dễ tổn thương nhất, chứng minh lỗ hổng mang tính hệ thống về độ bền ngữ nghĩa xuyên ngôn ngữ."], "sub_category": "AI Safety & Robustness", "novelty_score": 80, "business_score": 68, "research_score": 88, "why_it_matters": "Hiện tượng mù phân cực phơi bày khoảng trống lớn trong khả năng hiểu ngữ nghĩa thực sự của các LLM tiên tiến nhất. Việc các biến đổi ngôn ngữ cơ bản có thể vô hiệu hóa rào chắn an toàn buộc các kỹ sư và tổ chức phải thay đổi cách thiết kế hệ thống guardrail, chuyển từ kiểm duyệt bề mặt sang kiểm soát ngữ nghĩa chuyên sâu.", "developer_score": 76, "importance_score": 84, "possible_use_cases": ["Tích hợp kỹ thuật biến đổi phân cực vào quy trình red-teaming và đánh giá tự động độ an toàn của LLM trước khi phát hành.", "Xây dựng và tinh chỉnh các lớp tiền xử lý chuẩn hóa ngữ nghĩa cho các hệ thống kiểm duyệt nội dung (moderation guardrails).", "Kiểm thử độ bền ngữ nghĩa đa ngôn ngữ cho các ứng dụng AI agent hoạt động trên thị trường quốc tế."], "actionability_score": 72}