Utnyttelse av data for å vurdere og evaluere kompetanse gjennom læreplanen
Hør fra ekspertene.
Hør fra ekspertene.
Hvis du er innen sykepleierutdanning, samler skolen din sannsynligvis inn mange former for data. Du kan oppdage at disse dataene stammer fra forskjellige kilder og blir organisert i siloer – men de blir ikke alltid brukt. Men når du klarer å veve alle dataene sammen til noe meningsfullt, kan de fortelle en kraftfull historie – en som betyr noe for institusjonen din, programmet ditt, fakultetet ditt og studentene dine.
Vi satte oss ned med noen eksperter fra tre sykepleieskoler for å lære hvordan de utnyttet kraften av data for å ta i bruk kompetansebasert utdanning i sine programmer. Nedenfor deler vi noen funn fra vårt webinar: Vurdering og Evaluering av Kompetanse Gjennom Pensum.
Rosemary Samia, MSN, RN, CNS, CHSE, direktør for Center for Clinical Education & Research ved University of Massachusetts Boston, introduserte peer-to-peer vurdering og evaluering av ferdighetstrening ved bruk av SimCapture for Skills for helsevurderingskursene og grunnlaget for sykepleie i den første kliniske semesteret. SimCapture for Skills bringer fakultetet nærmere studentene ved å kombinere effektiviteten av peer-to-peer læringsmetodikk med digitale verktøy for vurdering og evaluering.
Under tilsyn av en masterstudent eller simuleringslærer, tar grupper på tre studenter tur til å utføre ferdigheten som lærende, vurdere og evaluere en annen person som utfører ferdigheten som fasilitator, og få ferdigheten utført på seg selv som pasient.
Ved å se på studentenes testresultater etter å ha implementert denne tilnærmingen, fant Rosemary ut at labfakultetet som regelmessig brukte peer-to-peer hadde studenter med mye høyere førstegangsbestått-resultater enn andre grupper. "Vi kunne se at dette var en strategi som var nyttig," forklarte hun.
Bruken av SimCapture for Skills under øvingstiden førte til en reduksjon fra 60 retester til 9 retester fra ett semester til det neste.
I et forsøk på å øke effektiviteten, vendte UMass Boston også til peer-to-peer tilnærmingen for å effektivisere prosessen med forbedring.
- Rosemary Samia, MSN, RN, CNS, CHSE
Direktør, Center for Clinical Education & Research, University of Massachusetts Boston

Bruken av SimCapture for Skills tillot dem å forbedre 30 studenter per time, med færre fakultetet.
For Chris Garrison, PhD, RN, CNE, CHSE, førsteamanuensis og direktør for simuleringslaboratoriet ved Pennsylvania State University, fortalte innsamling av data om studentprestasjoner en historie som resulterte i en revurdering av skolens tilnærming til ferdighetstrening i det store prelisensieringsprogrammet.
Som i mange andre sykepleierprogrammer hadde Penn State tradisjonelt brukt studentundersøkelser for å evaluere simuleringsbaserte erfaringer. Men de begynte å innse at de måtte starte innsamling av objektive resultatdata for å måle læringsutbytte. "Vi ønsket noe objektivt og gyldig å basere beslutningene våre på," forklarte Chris. Og med de nye AACN Essentials som krever kompetansebasert evaluering, visste de at de trengte disse dataene for å dokumentere hvordan studentene oppfylte AACN-kompetansene.
Ved å bruke SimCapture simuleringslæringsstyringssystemet (LMS) med Creighton Competency Evaluation Instrument for å evaluere høyfidelitetsimuleringer, avdekket de flere ferdigheter der studentene viste sterk kompetanse. Ved å grave dypere fant de at studentene ikke var der de burde være i andre områder – som enkelte elementer av sikker medisinadministrasjon og korrekt utførelse av prosedyrer. Disse dataene fikk Chris og kollegene til å stille spørsmålet, "hvordan kan vi få studentene våre til kompetansenivået de trenger for praksis?"
Chris forklarte at det er et vanlig problem å lære ferdigheter tidlig uten å gjennomgå dem senere.

- Christopher Garrison, PhD, RN, CNS, CHSE
Direktør, Førsteamanuensis, Pennsylvania State University
Til slutt førte dataene til beslutningen om å ta en mer målrettet praksistilnærming og å gjennomgå ferdighetene gjennom hele pensumet. De sørget for å gi studentene muligheter til å gjenutvikle sin kompetanse, og begynte å bruke kollegabasert metodikk med rubrikker for å muliggjøre tilbakemelding mens de øvde. Ved å fortsette å samle inn data om denne tilnærmingen, forventer Chris store forbedringer på disse områdene hos det nåværende kullet.
Ekspertene delte noen eksempler på hvordan data hjalp dem med å heve den faglige utviklingen:
Ved å se på studentresultater samlet inn ved hjelp av Lasater Clinical Judgment Rubric, observerte Rosemary at resultatene var eksemplariske – til tross for at det var den første simuleringen studentene noensinne hadde fullført. “Jeg så at det var en mulighet for litt fakultetsutvikling her,” sa hun. De adresserte behovet mellom semestrene. Når dataene ikke viste noen forbedring etter å ha forsøkt å ta tak i problemet, endret de formatet på spørsmålene som fakultetet skulle besvare for å gi tilbakemelding til studentene. I stedet for en vurdering fra 1 til 4, tok de de samme kategoriene og ba fakultetene gi fritekstkommentarer til studentene. “På slutten av det semesteret så vi at tilbakemeldingene som ble gitt var mye mer verdifulle, instruktørene tok seg tid til å lese evalueringene og refleksjonene, og veiledet virkelig studentene gjennom disse fire fasene.”
Rosemary delte at UMass Boston gikk bort fra studenttilfredshetsundersøkelser for å måle simuleringseffektivitet og begynte å bruke Debriefing Assessment for Simulation in Healthcare© (DASH)-verktøyet. Utviklet av Center for Medical Simulation i Boston, tar DASH-verktøyet en objektiv tilnærming til vurdering av veiledninger. UMass Boston startet med DASH-studentversjonen av verktøyet, som lar studentene evaluere fasilitatorene. De tok senere i bruk instruktørversjonen av verktøyet, med deres simuleringspedagoger som ser sine veiledninger og sjekker seg selv av for å se hvor de trenger å fokusere på faglig utvikling.
Jennifer Roye, MSN, RN, CHSE, CNE, assisterende dekan for simulering og teknologi og klinisk assisterende professor ved University of Texas at Arlington, innførte en standardisert, brukervennlig veiledningsmetode kalt Plus Delta på skolen sin. Hun har gjennomført flere utviklingsverksteder for fakultetet for å sikre effektiv og konsistent bruk. Ved å erkjenne viktigheten av å lene seg på objektive data for å måle effektivitet, planlegger Jenny også å bruke DASH-verktøyet for å evaluere fakultetets bruk av Plus Delta-metoden.

Etter webinaret ba vi ekspertene dele noen tips for skoler som nettopp har begynt å bruke data.

Rosemary Samia, MSN, RN, CNS, CHSE, er direktør for Center for Clinical Education & Research ved University of Massachusetts Boston. Hennes kliniske bakgrunn inkluderer 15 år innen medisinsk-kirurgisk sykepleie før hun gikk over til undervisning med simulering i den akademiske settingen i 2014. I 2020 fullførte hun National League for Nursing’s ettårige Leadership Development Program for Simulation Educators. Rosemary leder en lokal nettverksgruppe for simuleringspedagoger i storbyområdet Boston og bistår med utvikling og organisering av regionale simuleringssymposier. Hun sitter i rådgivningsstyret for safeMedicate, et virtuelt miljø for simulert medikamentadministrasjon. I 2020 ble Rosemary anerkjent av Sigma Theta Alpha for Excellence in Nursing Practice og mottok Maureen Oh Eigartaigh-prisen.

Christopher Garrison, PhD, RN, CNE, CHSE, er førsteamanuensis ved Ross og Carol Nese College of Nursing ved Pennsylvania State University og direktør for Simuleringslaboratoriet på University Park-campus. Hans kliniske bakgrunn inkluderer erfaringer innen medisinsk-kirurgisk sykepleie, kardiologi, hjemmesykepleie og som voksen-/gerontologisk sykepleiepraksis. Han er en sertifisert sykepleiepedagog (CNE) og en sertifisert helsevesen-simuleringspedagog (CHSE). Christopher har en Associate’s degree fra Northern Virginia Community College, en bachelorgrad fra Pennsylvania State University, en MSN fra George Mason University og en PhD fra Nova Southeastern University i sykepleieutdanning. Han underviser i klasserom, simulering og kliniske omgivelser gjennom læreplanen i BSN-programmet ved Penn State. I 2020 mottok Christopher Janet A. Williamson Excellence in Teaching Award fra Penn State College of Nursing. Han har 13 års erfaring med å designe og levere simuleringsbasert læring. Hans forskningsinteresser inkluderer evaluering av effektiviteten av simulering og virtuell simulering som en utdanningsstrategi. Christopher har presentert på nasjonale og internasjonale konferanser om simulering og andre emner innen sykepleieutdanning.

Jennifer Roye, MSN, RN, CHSE, CNE, er assisterende dekan for simulering og teknologi og en klinisk førsteamanuensis ved University of Texas at Arlington College of Nursing and Health Innovation. Hun er hovedfakultet for kurset Fundamental Telehealth Skills i Health Informatics Certificate Program. Mrs. Roye mottok sin MSN fra UTA i 2003 og er for tiden innskrevet ved University of Alabama i EdD Instructional Leadership-programmet. Hun praktiserte som CPNP i privat praksis i 10 år og som RN i akuttavdelingen ved Cook Children’s Medical Center i Ft. Worth, Texas, i 16 år. Hennes forskningsområder inkluderer simulering, telehelse, studentengasjement, forbedring av nettbasert utdanning og moralsk stress i studentpopulasjonen innen bachelor sykepleie.