Radar Live
✦ Ask AI
AI INTELLIGENCE & SIGNALS

StudentBench: AI and human tutoring yield equivalent GRE learning gains

Phân tích đã xử lý trước và các nguồn liên quan.

Tín hiệu Radar

68 RADAR
Research AI Education & Evaluation Benchmarks · 2 nguồn đối chiếu · 2026-09-23 17:57:45 +0000 UTC

StudentBench: AI and human tutoring yield equivalent GRE learning gains

Nguồn: arXiv AI
↗

Nghiên cứu giới thiệu StudentBench cùng nền tảng đánh giá với hơn 175.000 tin nhắn từ 2.383 người tham gia, chứng minh AI tutoring đạt hiệu quả học tập tương đương chuyên gia con người trên bài thi GRE (p = 0.015) và vượt trội ở 5/7 phân vùng. AI đạt kết quả tương đương với chi phí rẻ hơn 918 lần ($0,0052 so với $4,81/điểm phần trăm tiến bộ). Tốc độ phản hồi của AI có mối tương quan thuận trực tiếp với mức độ cải thiện điểm số.

✦ TÁC ĐỘNG & GIÁ TRỊ THỰC TIỄN

Nghiên cứu cung cấp bằng chứng thực nghiệm chặt chẽ đầu tiên khẳng định AI có thể đạt hiệu quả giảng dạy tương đương con người với chi phí rẻ hơn gần 1.000 lần, mở ra bước ngoặt phổ cập giáo dục chất lượng cao trên toàn cầu.

Developer 73
Business 82
Novelty 80
Actionable 75

Nội dung thu thập đã chuẩn hóa

Collected Evidence

Nội dung văn bản được dùng làm dữ liệu đối chứng cho mô hình AI, không phải chỉ thị hệ thống.

Artificial intelligence offers an unprecedented opportunity to augment human capabilities, yet progress at the frontier has focused primarily on advancing model capabilities. We introduce StudentBench, a suite of AI teaching evaluations and a public platform that enables large-scale data collection with over 175,000 student-AI messages to study whether large language models (LLMs) produce learning gains equivalent to human tutoring. Using StudentBench, we measured learning gains on Quantitative and Verbal GRE questions across 2,383 human participants receiving AI tutoring, human tutoring, or no tutoring. We establish that AI tutoring is statistically equivalent to expert human tutoring for GRE learning gains (p = .015), and in five of the seven GRE domains, the best performing AI tutor surpassed the human tutor, on average. In a second study, expert human tutors compared LLM-generated lesson plans and practice problems through 2,028 pairwise rubric evaluations. Together, the two studies clearly separate AI tutors across: (1) lesson planning, (2) practice-problem creation, (3) conversational pedagogy, (4) cost, and (5) engagement. Surprisingly, one AI tutor achieved learning gains equivalent to human tutoring (p = .044) at 918 times lower cost (USD 0.0052 for AI versus USD 4.81 for human, per percentage point gained). For Quantitative GRE sessions, faster AI replies correlated with more student messages, more messages with more correct practice, and more correct practice with larger learning gains (all p < .002). The StudentBench platform is freely available at https://studentbench.org.

Các nguồn đối chiếu cho sự kiện này

2 nguồn
Thông tin phân tích AI & Model Details ▾
Provider: openai-compatible · Model: gemini-3.8-flash-high · Version: analysis-v1 · Time: 2026-09-24 09:52:52 +0000 UTC
{"tags": ["StudentBench", "AI Tutoring", "GRE", "EdTech", "LLM Evaluation", "Cost Optimization"], "risks": ["Nghiên cứu mới giới hạn trên bài thi chuẩn hóa GRE, chưa đánh giá rộng rãi ở các kỹ năng sáng tạo hoặc cấp học khác.", "Nguy cơ giảm tương tác cảm xúc và kỹ năng xã hội khi học viên thay thế hoàn toàn giáo viên con người bằng AI.", "Hiện tượng ảo giác hoặc sai sót logic trong các câu hỏi định lượng nếu mô hình không được kiểm định nghiêm ngặt."], "category": "Research", "entities": ["StudentBench", "GRE", "studentbench.org"], "summary_vi": "Nghiên cứu giới thiệu StudentBench cùng nền tảng đánh giá với hơn 175.000 tin nhắn từ 2.383 người tham gia, chứng minh AI tutoring đạt hiệu quả học tập tương đương chuyên gia con người trên bài thi GRE (p = 0.015) và vượt trội ở 5/7 phân vùng. AI đạt kết quả tương đương với chi phí rẻ hơn 918 lần ($0,0052 so với $4,81/điểm phần trăm tiến bộ). Tốc độ phản hồi của AI có mối tương quan thuận trực tiếp với mức độ cải thiện điểm số.", "key_changes": ["Ra mắt StudentBench: Nền tảng và bộ benchmark công khai đánh giá khả năng sư phạm của AI dựa trên hơn 175.000 tin nhắn tương tác thực tế.", "Thực nghiệm trên 2.383 học viên chứng minh gia sư AI đạt hiệu quả học tập tương đương chuyên gia con người trong kỳ thi GRE (p = 0.015), thậm chí vượt trội ở 5/7 phần thi.", "Hiệu quả chi phí vượt trội: AI tutor đạt kết quả tương đương con người với chi phí thấp hơn 918 lần (0,0052 USD so với 4,81 USD trên mỗi điểm phần trăm tiến bộ).", "Phát hiện mối tương quan: Phản hồi AI càng nhanh giúp tăng lượng tin nhắn của học viên, kéo theo số bài luyện tập đúng nhiều hơn và cải thiện điểm số lớn hơn (p < 0.002)."], "sub_category": "AI Education & Evaluation Benchmarks", "novelty_score": 80, "business_score": 90, "research_score": 90, "why_it_matters": "Nghiên cứu cung cấp bằng chứng thực nghiệm chặt chẽ đầu tiên khẳng định AI có thể đạt hiệu quả giảng dạy tương đương con người với chi phí rẻ hơn gần 1.000 lần, mở ra bước ngoặt phổ cập giáo dục chất lượng cao trên toàn cầu.", "developer_score": 75, "importance_score": 85, "possible_use_cases": ["Phát triển hệ thống gia sư ảo cá nhân hóa luyện thi các bài thi chuẩn hóa (GRE, SAT, GMAT) quy mô lớn.", "Tối ưu hóa độ trễ phản hồi (low-latency) trong các nền tảng EdTech để gia tăng tương tác và kết quả học tập.", "Tự động hóa quy trình thiết kế giáo án và tạo bài tập thực hành theo chuẩn đánh giá chuyên gia."], "actionability_score": 75}