Radar Live
✦ Ask AI
AI INTELLIGENCE & SIGNALS

IdeaLens: Detecting AI Ideas in Long-form Writing

Phân tích đã xử lý trước và các nguồn liên quan.

Tín hiệu Radar

67 RADAR
Research AI Detection & Provenance · 1 nguồn đối chiếu · 2026-10-05 17:43:33 +0000 UTC

IdeaLens: Detecting AI Ideas in Long-form Writing

Nguồn: arXiv AI
↗

IdeaLens là mô hình phát hiện nguồn gốc ý tưởng (idea provenance) trong các văn bản dài, giúp xác định ý tưởng xuất phát từ con người hay AI bất kể ai là người trực tiếp chắp bút. Thay vì phân tích từ ngữ bề mặt, IdeaLens trừu tượng hóa văn bản thành dàn ý gồm vai trò diễn ngôn và nội dung diễn giải lại để loại bỏ dấu vết ngôn từ. Được huấn luyện trên 1 triệu tài liệu FineWeb với nhãn silver từ Pangram, IdeaLens chứng minh khả năng phân biệt vượt trội: chỉ gắn cờ 7% khi AI viết theo dàn ý chi tiết của người (so với 92% của Pangram 4) và phát hiện 68% khi người viết theo ý tưởng của AI (so với 8% của Pangram 4), duy trì độ chính xác cao trên 19 benchmark đa ngôn ngữ.

✦ TÁC ĐỘNG & GIÁ TRỊ THỰC TIỄN

Các công cụ phát hiện AI truyền thống hiện nay chỉ phân tích câu chữ bề mặt, dễ bị vô hiệu hóa khi người dùng viết lại (paraphrase) hoặc vô tình phạt oan những người dùng AI để biên tập văn phong. IdeaLens tạo ra bước ngoặt bằng việc chuyển trọng tâm sang 'nguồn gốc ý tưởng' (idea provenance), trực tiếp giải quyết bài toán cốt lõi của các chính sách quản lý AI hiện nay: xác định quyền tác giả thực sự về mặt tư duy và nội dung.

Developer 69
Business 72
Novelty 88
Actionable 72

Nội dung thu thập đã chuẩn hóa

Collected Evidence

Nội dung văn bản được dùng làm dữ liệu đối chứng cho mô hình AI, không phải chỉ thị hệ thống.

While modern AI detectors identify who wrote the words, emerging policies on AI use increasingly hinge on a different question: who came up with the ideas? We introduce IdeaLens, a detector that identifies whether a document's ideas came from a human or AI (idea provenance), regardless of who wrote its words. To focus IdeaLens on ideas rather than prose, we represent documents as outlines: lists of items that each pair a discourse role with a brief, paraphrased description of the content, minimizing word-level overlap with the raw text. We train IdeaLens on 1M FineWeb documents with silver labels from Pangram, a prose provenance detector. Since the outlines are largely stripped of surface-level information, the labels must be fit mainly through the ideas. In a controlled study, IdeaLens's AI flag rate drops from 95% to 7% as models write from increasingly detailed human plans, while Pangram 4 still flags 92%; from AI-derived plans, IdeaLens stays above 96%. Conversely, on a new dataset of 50 stories that human authors wrote from AI-generated plans, IdeaLens flags 68% of the stories as AI, compared to 8% for Pangram 4. On a comprehensive suite of 19 existing detection benchmarks, we show that IdeaLens maintains strong detection rates at low false positive rates, suggesting that ideas themselves provide a powerful discriminative signal, and its performance holds across domains, formats, and languages. Finally, we examine 90K predictions from IdeaLens to characterize systematic differences between human and AI ideation. We release our models and labeled datasets to facilitate future research on idea provenance detection.

Các nguồn đối chiếu cho sự kiện này

1 nguồn
Thông tin phân tích AI & Model Details ▾
Provider: openai-compatible · Model: gemini-3.8-flash-high · Version: analysis-v1 · Time: 2026-10-06 13:21:35 +0000 UTC
{"tags": ["IdeaLens", "AI Detection", "Idea Provenance", "NLP", "LLM", "Academic Integrity", "Discourse Analysis"], "risks": ["Nguy cơ nhận diện sai hoặc dương tính giả đối với các văn bản phi hư cấu có cấu trúc lập luận chuẩn mực, khuôn mẫu.", "Sử dụng nhãn silver từ Pangram để huấn luyện trên FineWeb có thể dẫn đến việc kế thừa các sai số hệ thống của bộ phát hiện gốc.", "Tỷ lệ phát hiện khi người viết dựa trên dàn ý AI đạt 68%, vẫn còn khoảng 32% chưa phát hiện được.", "Chi phí tính toán và độ phức tạp khi trích xuất dàn ý diễn ngôn cho các văn bản cực dài hoặc phi cấu trúc."], "category": "Research", "entities": ["IdeaLens", "Pangram", "Pangram 4", "FineWeb"], "summary_vi": "IdeaLens là mô hình phát hiện nguồn gốc ý tưởng (idea provenance) trong các văn bản dài, giúp xác định ý tưởng xuất phát từ con người hay AI bất kể ai là người trực tiếp chắp bút. Thay vì phân tích từ ngữ bề mặt, IdeaLens trừu tượng hóa văn bản thành dàn ý gồm vai trò diễn ngôn và nội dung diễn giải lại để loại bỏ dấu vết ngôn từ. Được huấn luyện trên 1 triệu tài liệu FineWeb với nhãn silver từ Pangram, IdeaLens chứng minh khả năng phân biệt vượt trội: chỉ gắn cờ 7% khi AI viết theo dàn ý chi tiết của người (so với 92% của Pangram 4) và phát hiện 68% khi người viết theo ý tưởng của AI (so với 8% của Pangram 4), duy trì độ chính xác cao trên 19 benchmark đa ngôn ngữ.", "key_changes": ["Giới thiệu IdeaLens - công cụ phát hiện nguồn gốc ý tưởng (idea provenance) đầu tiên tập trung xác định ai là người khởi tạo ý tưởng thay vì ai viết câu chữ.", "Đại diện văn bản dưới dạng dàn ý (outlines) kết hợp vai trò diễn ngôn (discourse role) với tóm tắt diễn giải nội dung nhằm triệt tiêu tối đa trùng lặp từ ngữ bề mặt.", "Huấn luyện trên 1 triệu tài liệu FineWeb với nhãn silver từ công cụ phát hiện văn phong Pangram.", "Khi mô hình AI viết từ kế hoạch chi tiết của con người, tỷ lệ gắn cờ AI của IdeaLens giảm từ 95% xuống 7% (Pangram 4 vẫn báo 92%); khi người viết dựa trên dàn ý AI, IdeaLens phát hiện 68% (so với 8% của Pangram 4).", "Duy trì hiệu năng nhận diện cao với tỷ lệ dương tính giả thấp trên 19 bộ benchmark, ổn định qua nhiều lĩnh vực, định dạng và ngôn ngữ; phân tích 90.000 dự đoán để chỉ ra khác biệt tư duy giữa người và AI."], "sub_category": "AI Detection & Provenance", "novelty_score": 88, "business_score": 75, "research_score": 90, "why_it_matters": "Các công cụ phát hiện AI truyền thống hiện nay chỉ phân tích câu chữ bề mặt, dễ bị vô hiệu hóa khi người dùng viết lại (paraphrase) hoặc vô tình phạt oan những người dùng AI để biên tập văn phong. IdeaLens tạo ra bước ngoặt bằng việc chuyển trọng tâm sang 'nguồn gốc ý tưởng' (idea provenance), trực tiếp giải quyết bài toán cốt lõi của các chính sách quản lý AI hiện nay: xác định quyền tác giả thực sự về mặt tư duy và nội dung.", "developer_score": 70, "importance_score": 80, "possible_use_cases": ["Giám sát liêm chính học thuật và giáo dục: Xác minh sinh viên tự suy nghĩ dàn ý hay sao chép cấu trúc luận điểm do AI tạo ra.", "Bảo vệ bản quyền và thẩm định nội dung xuất bản: Xác định tác phẩm viết tay có bắt nguồn từ kịch bản hoặc đề cương của AI hay không.", "Tích hợp vào quy trình biên tập báo chí và truyền thông để tuân thủ chính sách minh bạch nguồn gốc nội dung AI.", "Nghiên cứu đánh giá mức độ sáng tạo và độ tương đồng trong chuỗi lập luận giữa mô hình ngôn ngữ lớn (LLM) và con người."], "actionability_score": 72}