Radar Live
✦ Ask AI
AI INTELLIGENCE & SIGNALS

GitScholar: A Dataset for Predicting AI Research Impact from GitHub Engagement

Phân tích đã xử lý trước và các nguồn liên quan.

Tín hiệu Radar

66 RADAR
Research AI Research Impact & Datasets · 1 nguồn đối chiếu · 2026-09-22 13:03:31 +0000 UTC

GitScholar: A Dataset for Predicting AI Research Impact from GitHub Engagement

Nguồn: arXiv AI
↗

GitScholar là bộ dữ liệu mới liên kết hoạt động GitHub từ 444.000 kho lưu trữ với hơn 558.000 bài báo arXiv AI nhằm dự đoán sớm tầm ảnh hưởng nghiên cứu. Kết quả thực nghiệm cho thấy tương tác trên GitHub giúp tăng độ chính xác dự đoán ban đầu lên tới 12% so với mô hình cơ sở học thuật, đồng thời có độ bao phủ gần như toàn diện đối với các bài báo AI có tác động cao và tương quan nhất quán với thành công học thuật tương lai. Dữ liệu hiện được phát hành mở trên Hugging Face bởi huawei-csl.

✦ TÁC ĐỘNG & GIÁ TRỊ THỰC TIỄN

Số lượng công bố AI trên arXiv tăng quá nhanh khiến việc theo dõi thủ công trở nên bất khả thi, trong khi chỉ số trích dẫn truyền thống mất nhiều tháng hoặc nhiều năm để tích lũy. Việc chứng minh tương tác thực tế trên GitHub là nguồn tín hiệu sớm, chính xác và có độ bao phủ cao giúp các nhà nghiên cứu, kỹ sư và doanh nghiệp nhanh chóng sàng lọc và nắm bắt các công nghệ then chốt mà không bị quá tải thông tin.

Developer 72
Business 69
Novelty 78
Actionable 80

Nội dung thu thập đã chuẩn hóa

Collected Evidence

Nội dung văn bản được dùng làm dữ liệu đối chứng cho mô hình AI, không phải chỉ thị hệ thống.

With the rapid pace of AI research and the hundreds of daily new publications, staying up-to-date with the latest developments has become increasingly difficult. For researchers, quickly identifying impactful work is essential, yet manually reviewing each new publication is impractical. Automated impact prediction methods help address this challenge, usually by combining various information sources available, such as a paper's content or citation history. In this work, we propose using GitHub engagement as an additional source and demonstrate that it provides both a timely and accurate signal. To this end, we introduce GitScholar, a novel dataset that links GitHub activity from 444,000 repositories to over 558,000 AI arXiv papers. Our experiments show that GitHub reactions improve early prediction precision by up to 12% over a strong academic baseline. Additionally, we find that GitHub signal offers near-complete coverage of high-impact AI papers, and consistently correlates with future academic success. GitScholar is publicly available at https://huggingface.co/datasets/huawei-csl/GitScholar.

Các nguồn đối chiếu cho sự kiện này

1 nguồn
Thông tin phân tích AI & Model Details ▾
Provider: openai-compatible · Model: gemini-3.8-flash-high · Version: analysis-v1 · Time: 2026-09-23 08:48:03 +0000 UTC
{"tags": ["GitScholar", "AI Research", "GitHub Engagement", "arXiv", "Research Impact", "Scientometrics", "Dataset", "Open Source"], "risks": ["Nguy cơ thao túng chỉ số (gaming the metrics) thông qua tài khoản ảo tăng sao (stars), forks hoặc tương tác giả tạo trên GitHub.", "Độ trễ hoặc thiếu sót dữ liệu đối với các nghiên cứu AI lý thuyết thuần túy không phát hành mã nguồn mở.", "Mức độ phổ biến của repository có thể không phản ánh đầy đủ tính chính xác hoặc giá trị học thuật lâu dài của nghiên cứu."], "category": "Research", "entities": ["GitScholar", "GitHub", "arXiv", "Hugging Face", "huawei-csl"], "summary_vi": "GitScholar là bộ dữ liệu mới liên kết hoạt động GitHub từ 444.000 kho lưu trữ với hơn 558.000 bài báo arXiv AI nhằm dự đoán sớm tầm ảnh hưởng nghiên cứu. Kết quả thực nghiệm cho thấy tương tác trên GitHub giúp tăng độ chính xác dự đoán ban đầu lên tới 12% so với mô hình cơ sở học thuật, đồng thời có độ bao phủ gần như toàn diện đối với các bài báo AI có tác động cao và tương quan nhất quán với thành công học thuật tương lai. Dữ liệu hiện được phát hành mở trên Hugging Face bởi huawei-csl.", "key_changes": ["Giới thiệu GitScholar, bộ dữ liệu liên kết hoạt động từ 444.000 repository GitHub với hơn 558.000 bài báo AI trên arXiv.", "Cải thiện độ chính xác dự đoán sớm (early prediction precision) về tác động nghiên cứu lên tới 12% so với baseline học thuật.", "Chứng minh tín hiệu tương tác GitHub bao phủ gần như toàn bộ các bài báo AI có tác động cao và tương quan nhất quán với thành công học thuật tương lai.", "Phát hành mở toàn bộ tập dữ liệu trên Hugging Face tại huawei-csl/GitScholar."], "sub_category": "AI Research Impact & Datasets", "novelty_score": 78, "business_score": 70, "research_score": 88, "why_it_matters": "Số lượng công bố AI trên arXiv tăng quá nhanh khiến việc theo dõi thủ công trở nên bất khả thi, trong khi chỉ số trích dẫn truyền thống mất nhiều tháng hoặc nhiều năm để tích lũy. Việc chứng minh tương tác thực tế trên GitHub là nguồn tín hiệu sớm, chính xác và có độ bao phủ cao giúp các nhà nghiên cứu, kỹ sư và doanh nghiệp nhanh chóng sàng lọc và nắm bắt các công nghệ then chốt mà không bị quá tải thông tin.", "developer_score": 75, "importance_score": 76, "possible_use_cases": ["Xây dựng hệ thống phát hiện sớm và xếp hạng các bài báo AI đột phá dành cho kỹ sư và nhà nghiên cứu.", "Hỗ trợ các quỹ đầu tư mạo hiểm và bộ phận R&D doanh nghiệp theo dõi xu hướng công nghệ AI tiềm năng trước khi chỉ số trích dẫn tích lũy.", "Tích hợp tín hiệu tương tác mã nguồn vào các công cụ tìm kiếm và đề xuất tài liệu học thuật.", "Nghiên cứu trắc lượng khoa học (scientometrics) về mối liên hệ giữa hoạt động mã nguồn mở và phát triển học thuật."], "actionability_score": 80}