生成式人工智能工具时代的高等教育评估实践
应对人工智能和生成人工智能在高等教育中的崛起需要进行评估改革,本研究通过探讨学生和学术人员对人工智能和生成人工智能工具的熟悉程度和舒适度,着眼于当前和未来在学习和评估中的应用,填补了关键空白。在线调查收集到来自越南的两所大学和新加坡的一所大学的 35 名学术人员和 282 名学生的数据,调查了生成人工智能的熟悉程度、其在评估标记和反馈、知识检测和参与中的应用以及生成人工智能文本检测的经验。描述性统计和思考性主题分析揭示了两个群体对生成人工智能的熟悉程度普遍较低。生成人工智能反馈受到负面评价,然而当与教师反馈结合时,评价更为积极。学术人员对生成人工智能文本检测工具以及基于检测结果的成绩调整更加接受,相对于学生而言。定性分析确定了三个主题:对文本检测工具的理解不清晰,对生成人工智能检测器的经验存在差异,以及对生成人工智能对教育评估未来影响感受复杂。这些发现对高等教育中生成人工智能评估和反馈的政策和实践的发展具有重要意义。
Jun, 2024
该研究通过对相关文献的系统回顾,概述了在高等教育中利用生成人工智能进行教学和学习的最新研究现状。研究发现,文献中存在研究缺口,需要进一步研究如何将生成人工智能融入教学和学习过程,加强跨学科、多维度的合作,以制定生成人工智能的使用指南、框架和政策。
Jun, 2024
通过研究 116 所美国高研活跃度大学产生的文件,全面了解高校为机构相关利益相关者提供的关于生成人工智能的建议与指导。基于我们的研究发现,大多数高校鼓励使用生成人工智能,并提供了详细指导,尤其是在课堂中的使用。然而,要注意的是,该研究建议教师指导的指南可能会加重其工作负担,因为往往需要对教学方法进行广泛的修订。
Jan, 2024
本研究探讨了大学生对生成式人工智能 (GenAI) 技术(例如 ChatGPT)在高等教育中的看法,关注对技术的熟悉程度、参与意愿、潜在好处和挑战以及有效整合。从对香港来自不同学科的 399 名本科生和研究生的调查结果显示,学生普遍对利用 GenAI 进行教学和学习持积极态度。学生们认识到个性化学习支持、写作和头脑风暴的辅助以及研究和分析能力的潜力。然而,他们也表达了对准确性、隐私、伦理问题以及对个人发展、职业前景和社会价值的影响的关注。根据 John Biggs 的 3P 模型,学生的看法显著影响学习方法和成果。通过了解学生的看法,教育工作者和政策制定者可以量身定制 GenAI 技术,以解决需求和关注点,同时促进有效的学习成果。本研究的发现可以指导有关将 GenAI 技术集成到高等教育中的政策制定。通过了解学生的看法并解决他们的关注点,政策制定者可以制定明智的指南和策略,以负责任且有效地实施 GenAI 工具,从而增强高等教育的教学和学习体验。
Apr, 2023
研究论文探讨了生成人工智能(GAI)模型,如 ChatGPT,对大学生和高等教育机构的影响,采用综合调查和情景分析的混合方法,结果表明当前技术在学术上的使用对学生取得学业目标有积极帮助,但是技术的不负责任和过度使用可能会带来重大挑战,因此高等教育机构需要制定严格的政策、重新评估学习目标、提升讲师能力、调整课程并重新考虑考试方式。
Apr, 2024
近年来,生成人工智能(GenAI)的发展在社会多个领域引起了一次范式转变,而这些技术的使用可能成为未来几十年教育的一个定义性特征。GenAI 提供了变革性的教育机会,同时也带来了伦理和学术方面的挑战。在这个背景下,我们提出了一个实用、简单且足够全面的工具来将 GenAI 工具融入教育评估中:AI 评估量表(AIAS)。AIAS 使教育工作者能够根据他们希望解决的学习成果选择适当的 GenAI 使用水平进行评估。AIAS 为学生和教育工作者提供了更清晰、更透明的方式,为机构提供了公平、公正的政策工具,并提供了一种细致入微的方法,既拥抱了 GenAI 的机会,又意识到在某些情况下这样的工具可能在教学上不合适或不必要。通过采用一种实用、灵活、可快速实施的方法,AIAS 可以成为应对当前关于教育中的 GenAI 存在的不确定性和焦虑的迫切起点。作为次要目标,我们参与当前的文献研究,倡导关注 GenAI 教育工具的重新聚焦的讨论,突出技术如何帮助支持和增强教学和学习,与当前关注 GenAI 作为学术不端行为便利工具的焦点形成对比。
Dec, 2023
该研究调查了六种主要的生成型人工智能(GenAI)文本检测器在面对经过修改以逃避检测的机器生成内容时的效力(n=805)。结果表明,当面对被篡改的内容时,这些检测器的准确率(39.5%)会大幅下降(17.4%),而某些技术在逃避检测方面比其他技术更有效。这些结果显示,当前这些工具的准确性限制和潜在的错误指控表明它们目前不能用于确定是否存在学术诚信的违规行为,突显了教育工作者在维持包容和公平的评估实践方面面临的挑战。然而,它们在非惩罚性的使用中可能在支持学生学习和维护学术诚信方面发挥作用。这些结果强调了在学术界处理生成型人工智能所带来的挑战时需采用综合方法来促进这些新兴技术的负责和公平使用。该研究得出结论,AI 文本检测器目前的局限性要求在高等教育中对其实施采取批判性的方法,并提示了 AI 评估策略的可能替代方案。
Mar, 2024
英国越南大学举行的一项试点研究结果表明,将生成人工智能(GenAI)技术纳入教育评估中,在提高学习体验的同时促进学术诚信,并降低与 GenAI 相关的学术不端行为,使学生的成绩和模块通过率都得到了显著提升。
Mar, 2024
数字人文学者对生成人工智能(GenAI)技术的采用、实践以及批评评估方面的研究过程进行调查,结果表明,数字人文学者对于 GenAI 在数字人文学科中的价值持不同意见,而实际使用情况在个体和研究任务上多样化。该调查分析有助于进一步研究 GenAI 对数字人文学科发展的影响。
Apr, 2024
直接或间接地影响教学与学习的生成式人工智能(GAI)正影响着各种学科和学科的教育。作为教育者,我们需要了解 AI 在人机交互教育中的潜力和局限,并确保我们的人机交互设计专业的毕业生了解 AI 在此领域中的潜力和局限。本文报告了将生成式人工智能纳入为期 10 周的本科模块所得出的主要教学见解。我们设计了这个模块,以鼓励学生在设计任务要求和计划实践会话与讨论中进行 GAI 模型的实验。我们的见解基于学生在完成模块后的调查回复。对于人机交互设计教育者而言,我们的主要发现是 AI 作为发展项目想法和创建设计资源的一个人物角色,以及 AI 作为反映学生对关键概念和想法的理解并突出知识差距的一面镜子。我们还讨论了应该考虑的潜在陷阱以及评估学生对 GAI 作为教学工具的识字能力和假设的需求。最后,我们提出了教育者以 GAI 作为教育工具所带来的机会,并在实践中富有实验性、创意性和勇气的案例。最后,我们就我们的发现与人机交互中的 TPACK 框架进行了讨论。
May, 2024