Användning av data för att bedöma och utvärdera kompetens genom läroplanen
Hör från experterna.
Om du arbetar med utbildning inom omvårdnad samlar din skola sannolikt in många olika typer av data. Du kanske märker att denna data kommer från olika källor och organiseras i silos – men det används inte alltid. Men när du har möjlighet att väva ihop all din data till något meningsfullt, kan det berätta en kraftfull berättelse – en som är viktig för din institution, ditt program, din fakultet och dina studenter.
Vi satte oss ner med några experter från tre omvårdnadsskolor för att lära oss hur de utnyttjade kraften i data för att omfamna kompetensbaserad utbildning i sina program. Nedan delar vi några insikter från vårt webbseminarium: Att bedöma och utvärdera kompetens genom läroplanen.
1. Data kan hjälpa dig att maximera läranderesultat med stor effektivitet
Rosemary Samia, MSN, RN, CNS, CHSE, Director för Center for Clinical Education & Research vid University of Massachusetts Boston, introducerade peer-to-peer-bedömning och utvärdering av färdighetsövning med SimCapture for Skills för sin skolas kurser i hälsobedömning och grunderna i omvårdnad under den första kliniska terminen. SimCapture for Skills för samman lärare och studenter genom att kombinera effektiviteten av peer-to-peer-lärandemetodiken med digitala bedömnings- och utvärderingsverktyg.
Under handledning av en masterstudent eller simulatorpedagog turas grupper om tre studenter om att utföra färdigheten som lärande, bedöma och utvärdera en annan person som utför färdigheten som handledare, och få färdigheten utförd på sig själva som patient.
Efter att ha analyserat studenters testresultat efter att ha implementerat detta tillvägagångssätt fann Rosemary att laboratorielärare som regelbundet använde peer-to-peer hade studenter med mycket högre förstapassresultat än andra grupper. "Vi kunde se att detta var en strategi som var hjälpsam," förklarade hon.
Användning av SimCapture for Skills för övningstid resulterade i en minskning från 60 omtagningar till 9 omtagningar från en termin till nästa.
I ett försök att öka effektiviteten vände sig UMass Boston också till peer-to-peer-metoden för att effektivisera sin remediationsprocess.
"Sjuksköterskeprogram utmanas av alla möjliga problem. Vi har färre lärare, högre personalomsättning, våra grupper ökar i storlek – och därför behövde vi vara riktigt strategiska kring hur vi närmade oss remediation eftersom det inte var ett alternativ att försvaga processen."
- Rosemary Samia, MSN, RN, CNS, CHSE
Director, Center for Clinical Education & Research, University of Massachusetts Boston
Användning av SimCapture for Skills gjorde det möjligt för dem att ge remediation till 30 studenter per timme, med färre lärare.
2. Data kan hjälpa dig att upptäcka behovet av förändring i tillvägagångssättet
För Chris Garrison, PhD, RN, CNE, CHSE, Associate Teaching Professor och Director of the Simulation Lab vid Pennsylvania State University, visade insamling av data om studenternas prestationer en berättelse som ledde till ett omvärderande av skolans tillvägagångssätt för färdighetsträning i dess stora prelicensprogram.
Liksom i många andra sjuksköterskeprogram hade Penn State traditionellt använt studentnöjdhetsundersökningar för att utvärdera upplevelser baserade på simulering. Men de började inse att de behövde börja samla in objektiva prestationsdata för att mäta inlärningsresultat. "Vi ville ha något objektivt och giltigt att fatta beslut utifrån," förklarade Chris. Och med de nya AACN Essentials som kräver kompetensbaserad utvärdering, visste de att de skulle behöva dessa data för att dokumentera hur studenterna uppnådde dessa AACN-kompetenser.
Med hjälp av SimCapture, ett system för hantering av simuleringsinlärning (LMS), kombinerat med Creighton Competency Evaluation Instrument för att utvärdera högfidelitetsimuleringar, identifierade de ett antal färdigheter där studenterna visade stark kompetens. Vid närmare granskning upptäckte de att studenterna inte låg där de borde inom andra områden – såsom vissa moment av säker läkemedelsadministration och korrekt utförande av procedurer. Genom att se denna data ställde sig Chris och hans kollegor frågan: "Hur kan vi få våra studenter att nå den kompetensnivå som de behöver för yrkeslivet?"
Chris förklarade att det är ett vanligt problem att börja med färdigheter tidigt och sedan inte återbesöka dem.
"Jag tycker att det är en felaktig antagning att när du väl har godkänt någon som kompetent i din grund- eller introduktionskurs, att de bibehåller den kompetensen genom hela utbildningen."
- Christopher Garrison, PhD, RN, CNS, CHSE
Director, Associate Teaching Professor, Pennsylvania State University
Så småningom ledde datan till beslutet att anta ett mer genomtänkt praktiskt tillvägagångssätt och återbesöka färdigheterna genom hela utbildningen. De säkerställde att studenterna fick möjlighet att återskapa sin kompetens och började använda kamratmetoder med matriser för att ge studenterna feedback medan de övade. Eftersom de fortsätter att samla in data om detta tillvägagångssätt, förväntar sig Chris att se stora förbättringar inom dessa områden med den nuvarande kohorten.
3. Data kan hjälpa dig att upptäcka möjligheter för professionell utveckling
Experterna delade några exempel på hur data hjälpte dem att förbättra professionell utveckling:
Ge effektiv återkoppling till studenter
Genom att granska studenternas resultat som samlades in med hjälp av Lasater Clinical Judgment Rubric, observerade Rosemary att resultaten var exemplariska – trots att det var första gången studenterna hade gjort en simulering. “Jag såg att det fanns en möjlighet till utveckling för vissa lärare här,” sa hon. Behovet adresserades mellan terminerna. När datan inte visade någon förbättring efter att ha försökt ta itu med problemet, ändrade de formatet på frågorna som lärarna skulle svara på för att ge feedback till studenterna. Istället för att använda en skala mellan 1 och 4, ombads lärarna i stället att ge kommentarer i fri text tillbaka till studenterna. “I slutet av den terminen märkte vi att återkopplingen som gavs var mycket mer värdefull, lärarna tog sig tid att läsa utvärderingarna och reflektionerna, och guidade verkligen studenterna genom de fyra faserna.”
Säkerställa kompetens vid återkoppling
Rosemary berättade att UMass Boston gick från att använda enkäter om studentnöjdhet för att mäta simuleringens effektivitet till att börja använda Debriefing Assessment for Simulation in Healthcare© (DASH) verktyget. Utvecklat av Center for Medical Simulation i Boston, ger DASH-verktyget ett objektivt sätt att bedöma återkopplingar. UMass Boston började med studentversionen av DASH-verktyget, vilket låter studenter utvärdera handledarna. De adopterade senare lärarversionen av verktyget, där deras simuleringsutbildare granskade sina återkopplingar och kontrollerade sig själva för att se var de behövde fokusera på professionell utveckling.
Jennifer Roye, MSN, RN, CHSE, CNE, biträdande dekan för simulering och teknik och klinisk biträdande professor vid University of Texas at Arlington, tog fram en standardiserad och användarvänlig metod för återkoppling vid sin skola som kallas Plus Delta. Hon har genomfört flera workshops för lärarutveckling för att säkerställa effektiv och konsekvent användning. Genom att inse vikten av att luta sig mot objektiva data för att mäta effektiviteten, planerar Jenny även att använda DASH-verktyget för att utvärdera lärarnas användning av Plus Delta-metoden.
Bonus: Var ska man börja?
Efter webbseminariet bad vi experterna att dela med sig av några tips för skolor som precis har börjat använda data.
Titta på hela webbseminariet på begäran
Bedöma och utvärdera kompetens genom läroplanen
Talare Biografier
Rosemary Samia, MSN, RN, CNS, CHSE
Rosemary Samia, MSN, RN, CNS, CHSE, är chef för Center for Clinical Education & Research vid University of Massachusetts Boston. Hennes kliniska bakgrund inkluderar 15 år inom medicinskirurgisk omvårdnad innan hon övergick till undervisning med simulering i akademisk miljö 2014. År 2020 slutförde hon National League for Nursing’s årslånga ledarskapsutvecklingsprogram för simuleringspedagoger. Rosemary leder en lokal nätverksgrupp för simuleringspedagoger i storstadsområdet Boston och hjälper till med utveckling och organisering av regionala simuleringssymposier. Hon sitter i rådgivande styrelse för safeMedicate, en virtuell miljö för simulerad läkemedelsadministration. År 2020 erkändes Rosemary av Sigma Theta Alpha för Excellence in Nursing Practice och mottog Maureen Oh Eigartaigh-priset.
Christopher Garrison PhD, RN, CNE, CHSE
Christopher Garrison, PhD, RN, CNE, CHSE, är docent i Ross and Carol Nese College of Nursing vid Pennsylvania State University och chef för simuleringslaboratoriet vid University Park campus. Hans kliniska bakgrund omfattar erfarenheter inom medicinskirurgisk vård, kardiologi, hemsjukvård och som vuxen-/gerontologisk sjuksköterskepraktiker. Han är Certifierad Sjuksköterskelärare (CNE) och Certifierad Hälso- och Sjukvårdssimuleringslärare (CHSE). Christopher har en Associate’s-examen från Northern Virginia Community College, en kandidatexamen från Pennsylvania State University, en MSN från George Mason University och en doktorsexamen från Nova Southeastern University inom omvårdnadsutbildning. Han undervisar i klassrum, simulering och kliniska miljöer inom hela läroplanen för BSN-programmet vid Penn State. År 2020 mottog Christopher Janet A. Williamson Excellence in Teaching Award från Penn State College of Nursing. Han har 13 års erfarenhet av att designa och leverera simuleringsbaserat lärande. Hans forskningsintressen inkluderar att utvärdera effektiviteten av simulering och virtuell simulering som en utbildningsstrategi. Christopher har presenterat vid nationella och internationella konferenser om simulering och andra ämnen inom omvårdnadsutbildning.
Jennifer Roye, MSN, RN, CHSE, CNE
Jennifer Roye, MSN, RN, CHSE, CNE är biträdande dekan för simulering och teknik samt klinisk adjunkt vid University of Texas at Arlington College of Nursing and Health Innovation. Hon är huvudansvarig lärare för kursen Fundamental Telehealth Skills inom Certifikatprogrammet för Hälsoinformatik. Mrs. Roye erhöll sin MSN från UTA 2003 och är för närvarande inskriven vid University of Alabama i EdD-programmet för Instruktionsledning. Hon arbetade som CPNP inom privat praktik i 10 år och som RN på akutmottagningen vid Cook Children’s Medical Center i Ft. Worth, Texas i 16 år. Hennes forskningsintressen inkluderar simulering, telehälsa, studentengagemang, att förbättra onlineutbildning och moralisk stress bland studenter på grundnivå i omvårdnad.
