UkrMeme: Multimodal Explainable Persuasion Detection in Ukrainian Memes

{"tags": ["Multimodal", "Vision-Language Models", "Persuasion Detection", "Explainable AI", "Layer-wise Relevance Propagation", "UkrMeme", "Social Media Analysis"], "risks": ["Kích thước tập dữ liệu còn khiêm tốn (200 meme cho UkrMeme), hạn chế khả năng khái quát hóa của mô hình trên quy mô lớn.", "Việc dịch benchmark PTM-UA có thể làm giảm bớt ngữ cảnh văn hóa địa phương vốn rất đặc thù trong văn hóa meme.", "Các kỹ thuật giải thích (LRP, token attribution) có thể đưa ra kết quả không nhất quán giữa các kiến trúc mô hình khác nhau."], "category": "Research", "entities": ["UkrMeme", "PTM-UA", "Propaganda 950", "Layer-wise Relevance Propagation (LRP)"], "summary_vi": "Nghiên cứu giới thiệu UkrMeme (tập dữ liệu 200 meme thời chiến Ukraine được gán nhãn kỹ thuật thuyết phục) và PTM-UA (bản dịch tiếng Ukraine của benchmark Propaganda 950). Các tác giả đánh giá khả năng zero-shot của các mô hình thị giác-ngôn ngữ (VLM) trên đầu vào ảnh, văn bản và đa phương thức bằng chỉ số hierarchical F1, đồng thời so sánh phương pháp giải thích Layer-wise Relevance Propagation (LRP) với token attribution.", "key_changes": ["Công bố UkrMeme: Bộ dữ liệu gồm 200 meme thời chiến Ukraine được thu thập tự nhiên và gán nhãn các kỹ thuật thuyết phục.", "Phát triển PTM-UA: Bản dịch tiếng Ukraine của tập con từ benchmark Propaganda 950, giữ nguyên hình ảnh gốc và dịch phần văn bản.", "Đánh giá zero-shot VLM: Thử nghiệm các mô hình thị giác - ngôn ngữ trên dữ liệu ảnh, văn bản và đa phương thức sử dụng chỉ số hierarchical F1.", "Phân tích giải thích mô hình (XAI): So sánh Layer-wise Relevance Propagation (LRP) với cơ chế phân bổ token (token attributions) theo các danh mục bằng chứng ngữ nghĩa."], "sub_category": "Multimodal NLP & Explainability", "novelty_score": 68, "business_score": 46, "research_score": 84, "why_it_matters": "Meme kết hợp hình ảnh và câu chữ là phương tiện định hướng dư luận phổ biến nhưng khó phân tích tự động. Nghiên cứu đóng góp tài nguyên quan trọng cho ngôn ngữ tiếng Ukraine và cung cấp góc nhìn sâu sắc về khả năng giải thích (XAI) của VLM khi xử lý thông tin nhạy cảm.", "developer_score": 55, "importance_score": 62, "possible_use_cases": ["Giám sát và phân tích chiến dịch truyền thông, thông tin tuyên truyền đa phương thức trong bối cảnh xung đột chính trị.", "Hỗ trợ các nền tảng mạng xã hội phát hiện nội dung meme mang tính thao túng hoặc thuyết phục tinh vi.", "Nghiên cứu và kiểm toán tính minh bạch (XAI) của các mô hình VLM đối với tác vụ phân tích hình ảnh kết hợp ngôn ngữ địa phương."], "actionability_score": 52}