利用数据通过课程评估和评价胜任力
听听专家的意见。
听听专家的意见。
如果您从事护理教育,您的学校很可能正在收集多种形式的数据。您可能会发现,这些数据来自不同的来源,并整理成筒仓,但并不总是被使用。但是当您能够将所有数据编织在一起形成有意义的东西时,它能够讲述一个有力的故事 - 这对您的机构、项目、教职员工和学生都很重要。
我们与三所护理学院的一些专家进行了座谈,了解他们如何利用数据的力量在其课程中采用基于胜任力的教育。下面,我们将分享一些来自我们网络研讨会《通过课程评估和评价胜任力》的收获。
马萨诸塞大学波士顿分校临床教育与研究中心主任 Rosemary Samia,护理科学硕士、注册护士、临床护士专员、认证医疗模拟教育者,引入了同伴互评和使用 SimCapture for Skills 进行技能实践评估,用于她所在学校第一个临床学期的健康评估和护理基础课程。SimCapture for Skills 通过结合同伴互评学习方法的有效性与数字评估和评价工具,拉近了教员与学生之间的距离。
在研究生或模拟教育工作者的指导下,每三名学生为一组,轮流以学员的身份执行技能,以导师的身份评估和评价另一个执行技能的人,并以病人的身份接受技能操作。
Rosemary 在查看实施这种方法后的学生考试成绩时发现,那些经常使用同伴互评教学法的实验室教员的学生首次通过率远高于其他组。她解释说,“我们可以看到,这种方法很有用。”
使用 SimCapture for Skills 进行练习后,重考次数从一个学期的 60 次减少到下一个学期的 9 次。
为了提高效率,马萨诸塞大学波士顿分校还采用同伴互评方法来简化其补救流程。
- Rosemary Samia,护理科学硕士、注册护士、临床护士专员、认证医疗模拟教育者
马萨诸塞大学波士顿分校临床教育与研究中心主任

使用 SimCapture for Skills 使他们能够每小时辅导 30 名学生,同时减少了教员人数。
对于宾夕法尼亚州立大学的副教授兼模拟实验室主任 Chris Garrison 博士、注册护士、注册护士教育家、认证医疗模拟教育者来说,收集学生表现数据就是讲述故事,这促使他重新思考其学校在大型执业前培训项目中的技能培训方法。
与许多其他护理项目一样,宾夕法尼亚州立大学传统上使用学生满意度调查来评估基于模拟的体验。但他们开始意识到,他们需要开始收集客观的绩效数据来衡量学习成果。“我们希望有客观且有效的依据来做决策。”Chris 解释道。而且,由于新的 AACN Essentials 要求基于胜任力进行评估,他们知道自己需要这些数据来记录学生是如何达到这些 AACN 胜任力要求的。
他们使用带有 Creighton 胜任力评估工具的 SimCapture 模拟学习管理系统 (LMS) 来评估高保真模拟,发现了学生在许多技能上表现出强大的胜任力。深入调查后,他们发现学生们在其他方面还没有达到应有的水平,比如安全用药的一些要素和正确执行程序。看到这些数据,Chris 和他的同事们不禁自问:“我们如何才能让学生达到他们实践所需要的胜任力水平?”
Chris 解释说,前置技能而不是重新审视它们是一个常见问题。

- Christopher Garrison 博士、注册护士、临床护士专员、认证医疗模拟教育者
宾夕法尼亚州立大学主任、副教授
最终,这些数据促使我们决定采取一种更加刻意的练习方法,并在整个课程中重温这些技能。他们确保为学生提供重新发展胜任力的机会,并开始使用同伴互评方法和评分表,以便学生在实践中获得反馈。随着他们继续收集有关这种方法的数据,Chris 希望看到目前这批人在这些方面有重大改进。
专家们分享了一些例子,说明数据如何帮助他们提升专业发展:
在查看使用 Lasater Clinical Judgment Rubric 收集的学生分数后,Rosemary 观察到这些分数堪称典范,尽管这是学生们进行的第一次模拟。她说:“我看到这里有一些教员发展的机会。”他们解决了学期之间的需求。在尝试解决问题后,数据显示没有改善,于是他们改变了教员回答问题的形式,以便向学生提供反馈。他们没有采用 1 到 4 的评分标准,而是使用相同的类别,并要求教员向学生提供自由格式文本的评论。“在该学期结束时,我们看到所提供的反馈更有价值,导师们花时间阅读评价和反思,然后真正引导学生完成这四个阶段。”
Rosemary 分享说,UMass Boston 不再使用学生满意度调查来衡量模拟效果,而是开始使用医疗保健模拟反馈评估工具© (DASH)。DASH 工具由波士顿医学模拟中心开发,采用客观的方法评估汇报情况。马萨诸塞大学波士顿分校起初采用了 DASH 学生版的工具,该版本允许学生评价导师。后来,他们采用了该工具的导师版本,让他们的模拟教育工作者查看汇报并自行核对,确定需要专注于专业发展的方向。
Jennifer Roye,护理科学硕士、注册护士、认证医疗模拟教育者、注册护士教育家,是德克萨斯大学阿灵顿分校的模拟与技术助理院长兼临床助理教授,她在学校采用了一种名为 Plus Delta 的标准化、易于使用的反馈方法。她已经开展了许多教员发展研讨会,以确保有效和持续地利用这些资源。Jenny 认识到利用客观数据衡量成效的重要性,因此还计划利用 DASH 工具来评估教员使用 Plus Delta 方法的情况。

在网络研讨会结束后,我们请专家为刚开始使用数据的学校分享一些建议。

Rosemary Samia,护理科学硕士、注册护士、临床护士专员、认证医疗模拟教育者,是马萨诸塞大学波士顿分校临床教育与研究中心的主任。她的临床背景包括在内外科护理领域工作了 15 年,然后在 2014 年转入学术环境进行模拟教学。2020 年,她完成了美国护理大联盟为期一年的模拟教育者领导力发展计划。Rosemary 为大波士顿地区的模拟教育工作者提供便利的本地网络小组,并协助开发和组织区域模拟研讨会。她是 safeMedicate 模拟用药虚拟环境的顾问委员会成员。2020 年,Rosemary 因在护理实践中的卓越表现而获得 Sigma Theta Alpha 的认可,并荣获 Maureen Oh Eigartaigh 奖。

Christopher Garrison 博士、注册护士、注册护士教育家、认证医疗模拟教育者,是宾夕法尼亚州立大学罗斯和卡罗尔·内斯护理学院的副教学教授,并且是大学公园校区模拟实验室的主任。他的临床背景包括内外科、心脏病学、家庭保健以及成人/老年病学执业护士的经验。他是一名注册护士教育家 (CNE) 和认证医疗模拟教育者 (CHSE)。Christopher 拥有北弗吉尼亚社区学院的副学士学位、宾夕法尼亚州立大学的学士学位、乔治梅森大学的护理科学硕士 (MSN) 学位,以及诺瓦东南大学的护理教育博士学位。他在宾夕法尼亚州立大学 BSN 课程的课堂、模拟和临床环境中授课。2020 年,Christopher 获得了宾夕法尼亚州立大学护理学院颁发的 Janet A. Williamson 卓越教学奖。他在设计和提供基于模拟的学习方面拥有 13 年的经验。他的研究兴趣包括评估模拟和虚拟模拟作为教育策略的有效性。Christopher 曾在国内和国际会议上发表过有关模拟和其他护理教育主题的演讲。

Jennifer Roye,护理科学硕士、注册护士、认证医疗模拟教育者、注册护士教育家,是德克萨斯大学阿灵顿分校护理与健康创新学院的模拟与技术助理院长兼临床助理教授。她是健康信息学证书项目中远程医疗基本技能课程的主讲教师。Roye 女士于 2003 年获得 UTA 的护理科学硕士学位,目前正在阿拉巴马大学攻读教育博士 (EdD) 教学领导力课程。她在私人诊所担任了 10 年的 CPNP,并在 Ft 的 Cook Children's Medical Center 急诊科担任注册护士。在德克萨斯州沃思市生活了 16 年。她的研究兴趣领域包括模拟、远程医疗、学生参与、增强在线教育,以及本科护理学生的道德困扰。