Aprovechamiento de los datos para evaluar y valorar la competencia a través del currículo
Escuche a los expertos.
Escuche a los expertos.
Si estás en la educación de enfermería, es probable que tu escuela esté recopilando muchas formas de datos. Puede que encuentres que estos datos provienen de diferentes fuentes y se organizan en silos – pero no siempre se utilizan. Sin embargo, cuando puedes integrar todos tus datos en algo significativo, pueden contar una historia poderosa – una que importa a tu institución, tu programa, tu profesorado y tus estudiantes.
Nos sentamos con algunos expertos de tres escuelas de enfermería para aprender cómo aprovecharon el poder de los datos para adoptar la educación basada en competencias en sus programas. A continuación, compartimos algunos puntos clave de nuestro webinar: Evaluar y Valorar la Competencia a lo Largo del Currículo.
Rosemary Samia, MSN, RN, CNS, CHSE, Directora del Centro de Educación Clínica e Investigación de la Universidad de Massachusetts Boston, introdujo la evaluación por pares y la evaluación de la práctica de habilidades utilizando SimCapture for Skills en los cursos de evaluación de salud y fundamentos de enfermería durante el primer semestre clínico. SimCapture for Skills acerca a los profesores a los estudiantes al combinar la eficacia de la metodología de aprendizaje entre pares con herramientas digitales de evaluación y valoración.
Bajo la supervisión de un estudiante de posgrado o educador en simulación, grupos de tres estudiantes se turnan para realizar la habilidad como aprendiz, evaluar a otra persona realizando la habilidad como facilitador y experimentar la habilidad como el paciente.
Al analizar las calificaciones de los estudiantes después de implementar este enfoque, Rosemary descubrió que el personal del laboratorio que utilizó de manera regular la metodología entre pares tenía estudiantes con resultados notablemente más altos en sus aprobaciones iniciales en comparación con otros grupos. "Pudimos ver que esta era una estrategia útil", explicó.
El uso de SimCapture for Skills durante el tiempo de práctica resultó en una disminución de 60 repeticiones a solo 9 repeticiones de un semestre al siguiente.
En un esfuerzo por aumentar la eficiencia, UMass Boston también recurrió al enfoque entre pares para optimizar su proceso de remediación.
- Rosemary Samia, MSN, RN, CNS, CHSE
Directora, Centro de Educación Clínica e Investigación, Universidad de Massachusetts Boston

El uso de SimCapture for Skills les permitió realizar la remediación para 30 estudiantes por hora, con menos personal docente.
Para Chris Garrison, PhD, RN, CNE, CHSE, Profesor Asociado y Director del Laboratorio de Simulación en la Universidad Estatal de Pensilvania, recopilar datos sobre el rendimiento de los estudiantes contó una historia que llevó a replantear el enfoque de su escuela en la formación de habilidades dentro de su amplio programa de prelicenciatura.
Como en muchos otros programas de enfermería, Penn State tradicionalmente utilizaba encuestas de satisfacción de los estudiantes para evaluar las experiencias basadas en simulaciones. Pero comenzaron a darse cuenta de que necesitaban empezar a recopilar datos de rendimiento objetivos para medir los resultados de aprendizaje. "Queríamos algo objetivo y válido para tomar decisiones", explicó Chris. Y, con los nuevos AACN Essentials que requieren evaluación basada en competencias, sabían que necesitarían estos datos para documentar cómo los estudiantes estaban cumpliendo con esas competencias de AACN.
Usando el sistema de gestión de aprendizaje en simulación SimCapture junto con el Instrumento de Evaluación de Competencias de Creighton para evaluar simulaciones de alta fidelidad, descubrieron una serie de habilidades en las cuales los estudiantes mostraban una fuerte competencia. Al profundizar más, encontraron que los estudiantes no estaban al nivel que deberían en otras áreas – como algunos de los elementos de la administración segura de medicamentos y la realización correcta de procedimientos. Ver estos datos dejó a Chris y a sus colegas preguntándose, "¿Cómo podemos conseguir que nuestros estudiantes alcancen el nivel de competencia que necesitan para practicar?"
Chris explicó que enseñar habilidades al principio y no volver a reforzarlas es un problema común.

- Christopher Garrison, PhD, RN, CNS, CHSE
Director, Profesor Asociado, Universidad Estatal de Pensilvania
Finalmente, los datos llevaron a la decisión de adoptar un enfoque más deliberado en la práctica y repasar las habilidades a lo largo del currículo. Se aseguraron de dar a los estudiantes oportunidades para volver a desarrollar su competencia, y comenzaron a utilizar metodologías entre pares con rúbricas para que los estudiantes pudieran recibir comentarios mientras practicaban. A medida que continúan recopilando datos sobre este enfoque, Chris espera ver grandes mejoras en estas áreas con la cohorte actual.
Los expertos compartieron algunos ejemplos de cómo los datos les ayudaron a mejorar el desarrollo profesional:
Al observar las calificaciones de los estudiantes recopiladas usando el Lasater Clinical Judgment Rubric, Rosemary notó que las puntuaciones eran ejemplares – a pesar de ser la primera simulación que los estudiantes habían realizado. “Vi que había una oportunidad para un desarrollo del profesorado aquí,” dijo. Abordaron la necesidad entre semestres. Cuando los datos no mostraron mejoría después de tratar de abordar el problema, cambiaron el formato de las preguntas que los profesores debían responder para dar retroalimentación a los estudiantes. En lugar de una calificación del 1 al 4, tomaron las mismas categorías y pidieron a los profesores que proporcionaran comentarios en texto libre para los estudiantes. “Al final de ese semestre, vimos que los comentarios proporcionados eran mucho más valiosos, los instructores se estaban tomando el tiempo para leer las evaluaciones y reflexiones, y realmente guiaban a los estudiantes a través de esas cuatro fases.”
Rosemary compartió que UMass Boston dejó de utilizar las encuestas de satisfacción de estudiantes para medir la efectividad de las simulaciones y empezó a utilizar la herramienta Debriefing Assessment for Simulation in Healthcare© (DASH). Desarrollada por el Center for Medical Simulation en Boston, la herramienta DASH adopta un enfoque objetivo para evaluar los procesos de reflexión. UMass Boston comenzó con la versión para estudiantes de la herramienta DASH, que permite que los estudiantes evalúen a los facilitadores. Posteriormente adoptaron la versión para instructores, con sus educadores de simulación evaluando sus propios procesos de reflexión y marcando áreas donde necesitan centrarse en su desarrollo profesional.
Jennifer Roye, MSN, RN, CHSE, CNE, Decana Asistente de Simulación y Tecnología y Profesora Adjunta Clínica en la Universidad de Texas en Arlington, implementó un método de reflexión estandarizado y fácil de usar llamado Plus Delta en su escuela. Ha llevado a cabo numerosos talleres de desarrollo del profesorado para garantizar una utilización efectiva y consistente. Reconociendo la importancia de apoyarse en datos objetivos para medir la efectividad, Jenny también planea utilizar la herramienta DASH para evaluar el uso de la metodología Plus Delta por parte del profesorado.

Después del seminario web, les pedimos a los expertos que compartieran algunos consejos para las escuelas que están comenzando a usar datos.

Rosemary Samia, MSN, RN, CNS, CHSE, es la directora del Centro para la Educación Clínica e Investigación de la Universidad de Massachusetts Boston. Su experiencia clínica incluye 15 años en enfermería médico-quirúrgica antes de hacer la transición a la docencia con simulación en el ámbito académico en 2014. En 2020, completó el Programa de Desarrollo de Liderazgo para Educadores en Simulación de la Liga Nacional de Enfermería con una duración de un año. Rosemary facilita un grupo de trabajo local para educadores de simulación en el área metropolitana de Boston y asiste en el desarrollo y organización de simposios regionales de simulación. Es miembro del consejo asesor de safeMedicate, un entorno virtual para la administración simulada de medicamentos. En 2020, Rosemary fue reconocida por Sigma Theta Alpha por su excelencia en la práctica de enfermería y recibió el premio Maureen Oh Eigartaigh.

Christopher Garrison, PhD, RN, CNE, CHSE, es Profesor Asociado de Enseñanza en el Ross and Carol Nese College of Nursing de la Universidad Estatal de Pensilvania y Director del Laboratorio de Simulación en el campus de University Park. Su experiencia clínica incluye áreas de enfermería médico-quirúrgica, cardiología, atención domiciliaria y como enfermero practicante en adultos/gerontología. Es un Educador de Enfermería Certificado (CNE) y un Educador de Simulación para la Atención de la Salud Certificado (CHSE). Christopher tiene un título asociado de Northern Virginia Community College, una licenciatura de la Universidad Estatal de Pensilvania, un MSN de George Mason University y un doctorado en Educación de Enfermería de Nova Southeastern University. Enseña en aulas, simulaciones y entornos clínicos a lo largo del plan de estudios del programa BSN en Penn State. En 2020, Christopher recibió el Premio de Excelencia en la Enseñanza Janet A. Williamson del Colegio de Enfermería de Penn State. Posee 13 años de experiencia en el diseño y la implementación de aprendizaje basado en simulación. Sus intereses de investigación incluyen evaluar la efectividad de la simulación y la simulación virtual como estrategia educativa. Christopher ha presentado en conferencias nacionales e internacionales sobre simulación y otros temas de educación en enfermería.

Jennifer Roye, MSN, RN, CHSE, CNE, es Decana Adjunta de Simulación y Tecnología y Profesora Asociada Clínica en el Colegio de Enfermería e Innovación en Salud de la Universidad de Texas en Arlington. Es profesora principal del curso de Habilidades Fundamentales de Telemedicina en el Programa de Certificado de Informática de la Salud. La Sra. Roye obtuvo su MSN en UTA en 2003 y actualmente está matriculada en el programa de Doctorado en Liderazgo Educativo de la Universidad de Alabama. Ejerció como CPNP en la práctica privada durante 10 años y como RN en el Departamento de Emergencias del Cook Children’s Medical Center en Ft. Worth, Texas, durante 16 años. Sus áreas de investigación incluyen la simulación, la telemedicina, el compromiso estudiantil, la mejora de la educación en línea y el estrés moral en la población de estudiantes de enfermería de pregrado.