评估是学习过程中必不可少的一部分，因为它有助于确定学生是否真正掌握了所教授的概念。题目难度指数(题目或问题的难度)在评估中起着关键作用，它表示选择正确答案的学生人数与回答每个问题的学生总数的比例。因此，该指数可以大致衡量考试的难度。此外，教育工作者创建题目和预测其难度指数的能力会显著影响评估过程。

一个反复出现的挑战是，教育工作者可能会高估题目难度，这凸显了提高预测能力的必要性。然而，针对旨在提高教师预测和调整题目难度能力的教师发展计划的研究却很有限。

为了解决这一差距，釜山国立大学医学事务副校长、医学教育教授兼家庭医学教授 Sang Lee 教授领导的研究小组进行了一项研究，研究结果发表在《BMC 医学教育》上。该研究调查了医学院教师的重复项目开发培训是否提高了他们预测和调整多项选择题 (MCQ) 难度的能力。

李教授在解释研究背景时表示：“就像一幅画的最后一笔画成了一幅完美的画，教育也是通过评估来完善的。医学院的教职员工如果没有经过适当的培训，就无法创造出高质量的项目。项目开发培训是必不可少的，这项研究表明，这种培训的有效性会随着重复而提高。”

2016 年和 2018 年，共有 62 名参与者参加了项目开发研讨会，并比较了项目难度预测的估计准确度。在研讨会之前，教师们开发了新起草的项目，然后对其进行了审查。项目开发委员会对教师进行了培训，通过提供持续的反馈，帮助他们根据国家考试标准修改新起草的项目，使其具有理想的难度范围和基于应用的重点。此外，还将参与者预测的难度指数与四年级医学生评估分析进行了比较。

研究发现，在培训之前，只有心脏病学这一科目预测和实际项目难度指数之间存在显著一致性。相比之下，心脏病学、神经病学、内科和预防医学这四个科目都存在显著一致性。这些发现表明，系统有效的培训可以提高医学教育中 MCQ 评估的质量。

反复的培训课程显著提高了教职员工准确预测和调整题目难度的能力，从而实现有效的评估和更好的教育成果。尽管研讨会有很多好处，但由于为期三天且参与的教职员工日程繁忙，维持这些成果可能具有挑战性。然而，接受题目开发和修改培训的教育工作者将能够更好地创建题目并精确调整难度，从而改善评估实践。

此外，这些培训计划可应用于所有学术领域。总之，本研究提倡持续的教师发展计划，以确保创建符合评估目的的适当项目。

谈及这项研究的潜在应用，李教授表示：“重复的项目开发训练，不但有助调整难度，更能强化项目的构造，提高其辨别力，并妥善解决效度问题。

“很快就会迎来使用人工智能进行项目开发的时代。为此，像我们这样的研究对于提供有关现有项目和学生答案数据的必要信息非常重要，这将有助于开发由人工智能驱动的自动化项目开发程序。”

版权说明：本站所有作品图文均由用户自行上传分享，仅供网友学习交流。若您的权利被侵害，请联系我们

标签：