TRIDENT and SHAKTI: A Framework and Benchmark for Hindi AI-Text Detection

{"tags": ["AI Text Detection", "SHAKTI", "TRIDENT", "Hindi NLP", "Round-Trip Translation", "LLMs", "Content Integrity"], "risks": ["Phụ thuộc lớn vào chất lượng và năng lực của mô hình dịch thuật được sử dụng (translation model sensitivity).", "Độ trễ và chi phí tính toán cao do quy trình dịch vòng (RTT) hai chiều qua lại giữa các ngôn ngữ.", "Nguy cơ suy giảm hiệu năng đối với các ngôn ngữ cực hiếm tài nguyên hoặc các phương ngữ mà công cụ dịch máy hỗ trợ kém.", "Rủi ro sai lệch kết quả trước các kỹ thuật prompt đối kháng phức tạp mới phát sinh."], "category": "Research", "entities": ["SHAKTI", "TRIDENT", "TRIDENT-S", "TRIDENT-D", "TRIDENT-C", "LLM"], "summary_vi": "Nghiên cứu giới thiệu SHAKTI - bộ dữ liệu benchmark quy mô lớn cho tiếng Hindi bao phủ 4 thể loại, 8 họ LLM và các biến đổi đối kháng, nhằm giải quyết sự thiếu hụt công cụ đánh giá cho ngôn ngữ ít tài nguyên ngoài tiếng Anh. Đồng thời, nghiên cứu đề xuất TRIDENT, framework phát hiện văn bản AI dựa trên tính nhất quán ngữ nghĩa qua dịch vòng (round-trip translation) với 3 biến thể: TRIDENT-S (ngưỡng tĩnh), TRIDENT-D (ngưỡng động) và TRIDENT-C (hồi quy logistic). Kết quả cho thấy TRIDENT-S đạt hiệu năng cao nhất, vượt trội các baseline hiện có và hoạt động tốt trên 7 ngôn ngữ khác cùng các LLM mới, dù phụ thuộc vào chất lượng mô hình dịch.", "key_changes": ["Xây dựng SHAKTI: Bộ dữ liệu benchmark tiếng Hindi quy mô lớn bao gồm 4 thể loại, 8 họ LLM, nhiều chiến lược prompt và các biến đổi đối kháng.", "Phân tích chuyên sâu sự khác biệt về ngôn ngữ học, ngữ pháp và cảm xúc giữa văn bản do người viết và AI tạo ra, được thẩm định qua gán nhãn thủ công.", "Đề xuất TRIDENT: Framework phát hiện văn bản AI tận dụng tính nhất quán ngữ nghĩa từ kỹ thuật dịch vòng (Round-Trip Translation - RTT).", "Phát triển 3 biến thể TRIDENT: TRIDENT-S (ngưỡng tĩnh), TRIDENT-D (ngưỡng động) và TRIDENT-C (hồi quy logistic sử dụng đặc trưng RTT đa khoảng cách).", "Kiểm nghiệm thực nghiệm chứng minh TRIDENT vượt trội các baseline truyền thống và có giám sát (TRIDENT-S đạt kết quả tốt nhất), mở rộng hiệu quả sang 7 ngôn ngữ khác và các LLM chưa từng thấy."], "sub_category": "AI Text Detection", "novelty_score": 78, "business_score": 65, "research_score": 86, "why_it_matters": "Nghiên cứu thu hẹp khoảng cách lớn trong việc bảo vệ tính toàn vẹn thông tin ở các ngôn ngữ ít tài nguyên như tiếng Hindi, nơi các công cụ phát hiện văn bản AI của tiếng Anh không phát huy hiệu quả. Phương pháp dịch vòng của TRIDENT mở ra hướng tiếp cận có khả năng mở rộng đa ngôn ngữ mà không phụ thuộc vào việc tái huấn luyện mô hình phức tạp.", "developer_score": 67, "importance_score": 75, "possible_use_cases": ["Kiểm duyệt nội dung tự động trên các nền tảng mạng xã hội và diễn đàn trực tuyến cho ngôn ngữ tiếng Hindi và đa ngôn ngữ.", "Phát hiện gian lận học thuật, bài luận hoặc nội dung tuyển dụng do AI tạo tại thị trường Ấn Độ.", "Hỗ trợ các cơ quan báo chí và truyền thông xác minh nguồn gốc văn bản, phòng chống tin giả do AI tạo tự động.", "Kiểm thử và đánh giá độ bền bỉ của các hệ thống AI text detector trước các kỹ thuật biến đổi đối kháng (adversarial transformations)."], "actionability_score": 68}