Radar Live
✦ Ask AI
AI INTELLIGENCE & SIGNALS

Hidden not Deleted: How Networks Suppress Entangled Features

Phân tích đã xử lý trước và các nguồn liên quan.

Tín hiệu Radar

66 RADAR
Research Mechanistic Interpretability · 1 nguồn đối chiếu · 2026-09-23 09:10:12 +0000 UTC

Hidden not Deleted: How Networks Suppress Entangled Features

Nguồn: arXiv AI
↗

Nghiên cứu chứng minh các phương pháp xóa khái niệm tuyến tính thất bại khi hai đặc trưng bị chồng chập dày đặc (dense superposition) trong cùng một không gian con, dẫn đến việc xóa luôn cả đặc trưng không mong muốn. Mạng nơ-ron học cách giải quyết phi tuyến tính qua hai dạng mạch cố định ('mirror' và 'shadow') nhưng thực chất chỉ ức chế chứ không xóa bỏ hoàn toàn đặc trưng mục tiêu. Dấu vết của đặc trưng bị xóa vẫn tồn tại và có thể khôi phục dễ dàng bằng một scalar patch duy nhất, cung cấp lời giải thích cơ chế vì sao tri thức đã 'unlearn' trên LLM vẫn có thể tái xuất hiện.

✦ TÁC ĐỘNG & GIÁ TRỊ THỰC TIỄN

Phát hiện này làm sáng tỏ nguyên nhân gốc rễ khiến các kỹ thuật Machine Unlearning trên LLM hiện nay chỉ mang tính che đậy bề mặt thay vì xóa bỏ tri thức thực tế. Điều này đặt ra thách thức lớn đối với các quy chuẩn an toàn AI và pháp lý (như quyền được lãng quên theo GDPR), đồng thời định hướng lại việc thiết kế các thuật toán xóa tri thức phải tính đến tính chất phi tuyến và hiện tượng chồng chập đặc trưng.

Developer 68
Business 62
Novelty 85
Actionable 65

Nội dung thu thập đã chuẩn hóa

Collected Evidence

Nội dung văn bản được dùng làm dữ liệu đối chứng cho mô hình AI, không phải chỉ thị hệ thống.

Concept erasure methods that operate via linear projection assume that features occupy separable subspaces. We show this assumption fails under dense superposition: when two features are forced into an antipodal pair sharing a single subspace, state-of-the-art linear erasure destroys both, not just the target. Networks trained with gradient descent instead solve this problem non-linearly, but not uniformly: they converge to one of two distinct circuit-level solutions depending on initialization, which we call mirror and shadow solutions. We map this bifurcation as a function of feature entanglement, show it reflects a stable attractor structure rather than an artifact of our setup, and use targeted causal interventions to demonstrate that both solutions leave a substantial, measurable trace of the erased feature's representation intact, recoverable through a single scalar patch rather than requiring any further training. This mirrors a failure mode recently observed empirically in LLM unlearning, where suppression rather than deletion allows forgotten knowledge to resurface; our results offer a mechanistic, causally-validated account of why that failure mode occurs.

Các nguồn đối chiếu cho sự kiện này

1 nguồn
Thông tin phân tích AI & Model Details ▾
Provider: openai-compatible · Model: gemini-3.8-flash-high · Version: analysis-v1 · Time: 2026-09-24 09:00:07 +0000 UTC
{"tags": ["machine-unlearning", "mechanistic-interpretability", "dense-superposition", "concept-erasure", "llm-safety", "feature-entanglement"], "risks": ["Mô hình tuyên bố đã xóa dữ liệu nhạy cảm hoặc vi phạm bản quyền (tuân thủ GDPR/quyền được lãng quên) thực tế vẫn giữ lại dấu vết biểu diễn và có thể bị phục hồi.", "Kẻ tấn công có thể kích hoạt lại tri thức độc hại hoặc nguy hiểm bị che giấu bằng các can thiệp can thiệp kích hoạt đơn giản.", "Các kỹ thuật xóa tuyến tính hiện tại làm hỏng cả các đặc trưng liên đới vô tội do hiện tượng chia sẻ không gian con."], "category": "Research", "entities": ["LLM", "Gradient Descent", "Concept Erasure"], "summary_vi": "Nghiên cứu chứng minh các phương pháp xóa khái niệm tuyến tính thất bại khi hai đặc trưng bị chồng chập dày đặc (dense superposition) trong cùng một không gian con, dẫn đến việc xóa luôn cả đặc trưng không mong muốn. Mạng nơ-ron học cách giải quyết phi tuyến tính qua hai dạng mạch cố định ('mirror' và 'shadow') nhưng thực chất chỉ ức chế chứ không xóa bỏ hoàn toàn đặc trưng mục tiêu. Dấu vết của đặc trưng bị xóa vẫn tồn tại và có thể khôi phục dễ dàng bằng một scalar patch duy nhất, cung cấp lời giải thích cơ chế vì sao tri thức đã 'unlearn' trên LLM vẫn có thể tái xuất hiện.", "key_changes": ["Chứng minh giả định không gian phân tách của các phương pháp xóa khái niệm tuyến tính bị phá vỡ khi đặc trưng rơi vào trạng thái chồng chập dày đặc (dense superposition).", "Chỉ ra mạng nơ-ron giải quyết vấn đề phi tuyến tính bằng cách phân nhánh thành hai nghiệm mạch cố định: nghiệm mirror và nghiệm shadow tùy vào giá trị khởi tạo.", "Chứng minh đặc trưng bị xóa không thực sự mất đi mà chỉ bị ức chế, có thể phục hồi hoàn toàn chỉ bằng một can thiệp vô hướng đơn lẻ (single scalar patch) mà không cần huấn luyện lại.", "Cung cấp bằng chứng nhân quả và cơ chế mạch giải thích vì sao tri thức đã unlearn trong LLM vẫn có thể tái xuất hiện."], "sub_category": "Mechanistic Interpretability", "novelty_score": 85, "business_score": 60, "research_score": 90, "why_it_matters": "Phát hiện này làm sáng tỏ nguyên nhân gốc rễ khiến các kỹ thuật Machine Unlearning trên LLM hiện nay chỉ mang tính che đậy bề mặt thay vì xóa bỏ tri thức thực tế. Điều này đặt ra thách thức lớn đối với các quy chuẩn an toàn AI và pháp lý (như quyền được lãng quên theo GDPR), đồng thời định hướng lại việc thiết kế các thuật toán xóa tri thức phải tính đến tính chất phi tuyến và hiện tượng chồng chập đặc trưng.", "developer_score": 70, "importance_score": 82, "possible_use_cases": ["Đánh giá và kiểm toán tính triệt để của các phương pháp machine unlearning trên mô hình ngôn ngữ lớn.", "Phát triển các phương thức tấn công trích xuất (extraction attacks) hoặc red-teaming để kiểm tra dữ liệu nhạy cảm/bản quyền còn sót lại.", "Nghiên cứu các cơ chế xóa tri thức phi tuyến tính thay thế cho các phép chiếu tuyến tính truyền thống."], "actionability_score": 65}