跳到正文
原文
Hacker News · AI· Erikun·· 1 天前精选AI 评分78

随机实验显示生成式 AI 提升学生测试成绩但论文质量收益取决于使用方式

Experimental Evidence on the Learning Impact of Generative AI

AI 导读

一项随机实验研究生成式 AI 对本科生学习的影响:在有监考的环境中,学生就陌生主题撰写分析性文章,部分人可使用现成生成式 AI,随后立即及一周后完成无辅助测评。结果显示,AI 使用使即时测试成绩提高 0.27 个标准差,且一周后仍保持;但论文质量在使用 AI 期间变化不大,只有在一周后无辅助写作时,文风和相关性才出现提升。

研究进一步区分两类使用方式:增强型用户让 AI 解释概念,自动化用户让 AI 生成文本。增强型用户的一周后收益更大,自动化用户的短期质量提升在 AI 移除后消失。机制证据显示,学生把时间从起草文本转向阅读和检索信息,并报告更高学习愉悦感。

事实层面,实验证明 AI 可提升知识测试成绩,但写作收益依赖使用方式;推断层面,若用于概念解释而非代写,AI 更可能促进学习;猜测层面,这一结论对教育产品设计的启示是应优先支持解释与检索,而非直接生成文本。

推荐理由

论文区分增强型与自动化使用,能改变对 AI 辅助学习是否真正提升能力的判断。

来源:Hacker News · AI · arxiv.org