在线学习场景下大语言模型辅助教学评测

	在线学习场景下大语言模型辅助教学评测
	张欢 1; 郑晨 2; 赵艳 1; 贺媛婧1 ; 来雨轩2,3
	2024-11-15
发表期刊	现代教育技术
ISSN	1009-8097
卷号	34 期号:11 页码:15-26
摘要	大语言模型为各行各业提效赋能，在线学习凭借其丰富的应用场景和海量的学习数据，成为教育领域引入大语言模型的理想“试验田”。然而，当前针对在线学习场景下大语言模型辅助教学的系统性评测较少。基于此，文章首先梳理了在线学习“教学准备-教学实施-教学评价”三个阶段的大语言模型应用场景，从中选取视频摘要生成、视频知识点提取、单选题生成、讨论题生成、单选题答疑、讨论题答疑等6个任务开展评测实验。之后，文章采用人工评价与自动评价相结合的方式，分析了Qwen-7B-chat、ChatGLM3-6B等11个大语言模型在前述6个在线学习任务中的表现。最后，文章总结了评测实验的结论：在国产大语言模型中，GLM-3-Turbo在视频摘要生成、视频知识点提取、讨论题生成、讨论题答疑四个任务中表现突出，而Qwen-max-1201在单选题生成、单选题答疑两个任务中表现较好；同系列模型参数量越大，在线学习任务表现越好。文章的研究可为在线学习场景下大语言模型的选取提供实证参考，助力大语言模型更好地赋能在线学习。
关键词	大语言模型在线学习任务表现教学评测
URL	查看原文
收录类别	CSSCI
语种	中文
资助项目	国家自然科学基金青年项目“基于领域知识预训练的人机对话关键技术研究”（项目编号：62206070）;中国成人教育协会“十四五”成人继续教育科研规划2023年度一般课题“新一代人工智能赋能终身学习创新与实施路径研究”（项目编号：2023-769Y）;国家开放大学2023年度重点科研项目子课题“数字化大学的技术框架研究与实践”（项目编号：Z23C0004）的阶段性研究成果
原始文献类型	学术期刊
文献类型	期刊论文
条目标识符	http://ir.library.ouchn.edu.cn/handle/39V7QQFX/172611
专题	国家开放大学总部_信息化部（工程中心）_运维中心国家开放大学总部_理工教学部_计算机科学与技术学院
通讯作者	来雨轩
作者单位	1.国家开放大学数字化部; 2.数字化学习技术集成与应用教育部工程研究中心; 3.国家开放大学理工学院
第一作者单位	国家开放大学
通讯作者单位	国家开放大学
第一作者的第一单位	国家开放大学
推荐引用方式 GB/T 7714	张欢,郑晨,赵艳,等. 在线学习场景下大语言模型辅助教学评测[J]. 现代教育技术,2024,34(11):15-26.
APA	张欢,郑晨,赵艳,贺媛婧,&来雨轩.(2024).在线学习场景下大语言模型辅助教学评测.现代教育技术,34(11),15-26.
MLA	张欢,et al."在线学习场景下大语言模型辅助教学评测".现代教育技术 34.11(2024):15-26.