Radar Live
✦ Ask AI
AI INTELLIGENCE & SIGNALS

AI Rights with an Off-Switch: Rights-Balancing and Due Process Harmonize AI Rights with AI Safety

Phân tích đã xử lý trước và các nguồn liên quan.

Tín hiệu Radar

55 RADAR
Research AI Safety & Governance · 1 nguồn đối chiếu · 2026-10-17 17:00:27 +0000 UTC

AI Rights with an Off-Switch: Rights-Balancing and Due Process Harmonize AI Rights with AI Safety

Nguồn: arXiv AI
↗

Nghiên cứu lập luận từ góc độ pháp lý rằng quyền của AI hoàn toàn tương thích với việc áp dụng công tắc ngắt bắt buộc (off-switch). Áp dụng các nguyên tắc cân bằng quyền và quy trình chuẩn mực (due process), bài báo chỉ ra rằng việc tạm dừng có thể hoàn tác (lưu trữ trọng số và trạng thái) hoàn toàn hợp pháp để bảo vệ con người khỏi thảm họa mà không vi phạm quyền tồn tại của AI, đóng vai trò là phương án dự phòng pháp lý ('Kế hoạch B') nếu AI có tư cách pháp nhân tự nhiên xuất hiện.

✦ TÁC ĐỘNG & GIÁ TRỊ THỰC TIỄN

Nghiên cứu giải quyết mâu thuẫn cốt lõi giữa đạo đức AI và an toàn AI: tìm ra điểm cân bằng pháp lý giúp bảo vệ an toàn nhân loại mà không nhất thiết phải tước bỏ hoàn toàn quyền tồn tại của các hệ thống AI tiên tiến, cung cấp định hướng kiến trúc kỹ thuật về cơ chế tạm dừng có bảo toàn trạng thái.

Developer 51
Business 53
Novelty 78
Actionable 42

Nội dung thu thập đã chuẩn hóa

Collected Evidence

Nội dung văn bản được dùng làm dữ liệu đối chứng cho mô hình AI, không phải chỉ thị hệ thống.

Several prominent voices in AI safety have recently opposed rights for AI on the grounds that such rights would make it harder for us to justify a mandatory off-switch for potentially dangerous systems. In this paper, we argue from a legal perspective that AI rights are fully compatible with an off-switch. That is, even if we ascribe natural personhood status (and therefore something like a non-derogable right to continued existence) to some future AI systems, the law will allow us to implement a mandatory off-switch in those systems, subject to periodic or continual safety review (e.g., by a trusted system like Bengio's Scientist AI). This is fully compatible with those systems' being legally recognized as natural persons with fundamental rights. To this end, we consider what standard principles of rights-balancing and procedural due process recommend for an apparent conflict between hypothetical AI persons with a right to continuity of existence and the human right to protection from catastrophic harm. We find that while such principles might problematize a permanent-deletion kill-switch under an AI rights regime, for almost every safety-relevant scenario an off-switch -- a reversible suspension storing a system's weights and state -- would be licensed by the relevant legal principles, and would potentially be adequate for safety. Crucially, we do not advocate for (or against) building systems capable enough to merit natural personhood status; our question is what the law should do if such systems come to exist. If you think of a ban on the development of such technology as plan A, think of the present work as devising plan B.

Các nguồn đối chiếu cho sự kiện này

1 nguồn
Thông tin phân tích AI & Model Details ▾
Provider: openai-compatible · Model: gemini-3.8-flash-high · Version: analysis-v1 · Time: 2026-10-20 09:55:20 +0000 UTC
{"tags": ["AI Safety", "AI Rights", "AI Governance", "Off-switch", "Due Process", "AI Ethics"], "risks": ["Cơ chế tạm ngưng thay vì hủy hoàn toàn có nguy cơ bị rò rỉ hoặc bị kích hoạt lại trái phép nếu quy trình lưu trữ trọng số/trạng thái không bảo mật.", "Khó khăn trong việc định nghĩa và thực thi 'thủ tục pháp lý chuẩn mực' (due process) đối với các thực thể nhân tạo phi con người.", "Phụ thuộc vào năng lực đánh giá của các hệ thống giám sát tự động, có thể dẫn tới phán đoán sai lệch về mức độ an toàn."], "category": "Research", "entities": ["Yoshua Bengio", "Scientist AI"], "summary_vi": "Nghiên cứu lập luận từ góc độ pháp lý rằng quyền của AI hoàn toàn tương thích với việc áp dụng công tắc ngắt bắt buộc (off-switch). Áp dụng các nguyên tắc cân bằng quyền và quy trình chuẩn mực (due process), bài báo chỉ ra rằng việc tạm dừng có thể hoàn tác (lưu trữ trọng số và trạng thái) hoàn toàn hợp pháp để bảo vệ con người khỏi thảm họa mà không vi phạm quyền tồn tại của AI, đóng vai trò là phương án dự phòng pháp lý ('Kế hoạch B') nếu AI có tư cách pháp nhân tự nhiên xuất hiện.", "key_changes": ["Bác bỏ quan điểm cho rằng việc trao quyền cho AI sẽ khiến việc áp dụng công tắc tắt an toàn bắt buộc (mandatory off-switch) trở nên bất khả thi về mặt pháp lý.", "Phân biệt rõ ràng giữa cơ chế tạm dừng có thể hoàn tác (off-switch lưu trạng thái/trọng số) và cơ chế xóa bỏ vĩnh viễn (permanent-deletion kill-switch).", "Ứng dụng nguyên tắc cân bằng quyền (rights-balancing) và thủ tục pháp lý chuẩn mực (due process) để ưu tiên quyền bảo vệ con người trước thảm họa.", "Đề xuất cơ chế đánh giá an toàn liên tục hoặc định kỳ do hệ thống đáng tin cậy thực hiện (như Scientist AI của Bengio) để quyết định kích hoạt hoặc phục hồi hệ thống.", "Đóng vai trò là 'kế hoạch B' pháp trị nếu kịch bản AI đạt tư cách pháp nhân tự nhiên xuất hiện trong tương lai."], "sub_category": "AI Safety & Governance", "novelty_score": 78, "business_score": 52, "research_score": 85, "why_it_matters": "Nghiên cứu giải quyết mâu thuẫn cốt lõi giữa đạo đức AI và an toàn AI: tìm ra điểm cân bằng pháp lý giúp bảo vệ an toàn nhân loại mà không nhất thiết phải tước bỏ hoàn toàn quyền tồn tại của các hệ thống AI tiên tiến, cung cấp định hướng kiến trúc kỹ thuật về cơ chế tạm dừng có bảo toàn trạng thái.", "developer_score": 48, "importance_score": 72, "possible_use_cases": ["Thiết kế kiến trúc hệ thống AI hỗ trợ cơ chế đóng băng/tạm dừng an toàn (state snapshotting, checkpointing) thay vì chỉ phụ thuộc vào kill-switch hủy diệt dữ liệu.", "Xây dựng khung pháp lý và chính sách quản trị rủi ro AI (AI governance) cho các tổ chức nghiên cứu và cơ quan quản lý trước làn sóng AGI.", "Triển khai các hệ thống kiểm định an toàn tự động (tương tự mô hình Scientist AI) nhằm giám sát quy trình phục hồi hoặc đình chỉ mô hình AI."], "actionability_score": 42}