用 AI 寫作業、問 AI 解題,感覺自己懂了——但真的學會了嗎?這一集我們拆解近兩年的同行評審研究,看看生成式 AI 對學習成效的證據到底有多強:統合分析說效果是中等正向,但小樣本研究效果特別大,數字可能被高估;GPT-4 給的提示約有三成太籠統、錯誤或直接洩漏答案;而一場大學經濟學課的隨機實驗發現,「AI 家教+讀書小組」的組合進步最多。
🎧 這集你會聽到:
・課程專屬 AI 家教 Macro Buddy 搭配小組學習的隨機對照試驗,以及它的設計限制
・ChatGPT 對學業成就的統合分析:Hedges' g = 0.577 代表什麼、為什麼可能高估
・GPT-4 在智慧家教系統中的回饋品質:35% 的提示有問題
・學生怎麼看 AI 回饋 vs. 老師回饋:方便,但不夠可信
・「有 AI 時的表現」與「撤除 AI 後的學習」為何必須分開看
📚 本集引用文獻:
Babaei-Balderlou, S., & Shakya, S. (2026). Can structured AI tutoring and study groups improve learning outcomes? Evidence from a randomized controlled trial. The Journal of Economic Education, 1–18.
https://doi.org/10.1080/00220485.2026.2695361
Liu, Z., Zuo, H., & Lu, Y. (2025). The Impact of ChatGPT on Students' Academic Achievement: A Meta-Analysis. Journal of Computer Assisted Learning, 41(4), e70096.
https://doi.org/10.1111/jcal.70096
Reddig, J. M., Arora, A., & MacLellan, C. J. (2025). Generating In-Context, Personalized Feedback for Intelligent Tutors with Large Language Models. International Journal of Artificial Intelligence in Education, 35(6), 3459–3500.
https://doi.org/10.1007/s40593-025-00505-6
(另提及:Henderson et al., 2025;Usher, 2025;Heung & Chiu, 2025)
⚠️ 本集內容依論文摘要整理,語音由 AI 生成,可能簡化細節,引用前請以原始論文為準。
▶️ YouTube 影片版:
https://youtu.be/GazObuu-klg
AI 研究室|把論文聽進去 🎙️