BEDÖMA & UTVÄRDERA ST-LÄKARE -varför, vad, hur och när? Fredrik Walentin Vi utbildar läkare som utbildar läkare Läkarförbundets studierektorskonferens 190314 Läkarförbundets studierektorskonferens 190314 Läkarförbundets studierektorskonferens 190314
VARFÖR? Läkarförbundets studierektorskonferens 190314 VARFÖR VÄRDERA KOMPETENS? Få veta vad som fungerar + förbättringspunkter -för individen + i klinikens utbildning Kunna påverka och förbättra - i tid! Förbättrad feedback - ökad motivation Förbättrat bemötande Patientsäkerhet Uppnått delmål i målbeskrivning? Uppnått målen för examen/leg/specialistansökan? Läkarförbundets studierektorskonferens 190314 Avsluta utbildning/at/st
Socialstyrelsens ST 2015: Den utbildning som handledaren ska ha genomgått bör omfatta handledning, pedagogik, metoder för bedömning, kommunikation och etik. Socialstyrelsens ST 2015: 4 Handledaren och verksamhetschefen bedöma ST-läkarens kompetensutveckling kontinuerligt med utgångspunkt i målbeskrivningen för specialiteten och det individuella utbildningsprogrammet. Bedömningen ska dokumenteras och ligga till grund för det intyg om uppnådd specialistkompetens som ska utfärdas efter fullgjord specialiseringstjänstgöring. VAD? Klicka här för att ändra format på bakgrundsrubriken Organisation Klicka här för att Kommunikation ändra format på bakgrundstexten Nivå två Nivå tre Pedagogik Nivå fyra Nivå fem Medicinsk Prevention Ledarskap Mångfald & Genus Vetenskap & kvalitet Etik
Klicka här för att ändra format på bakgrundsrubriken Klicka här för att ändra format på bakgrundstexten Nivå två Nivå tre Nivå fyra Nivå fem Vårdhygien Läkemedel Patientsäkerhet Föreskrifter & lagar Försäkrings medicin Palliativ medicin Klicka här för att ändra format på bakgrundsrubriken Klicka här för att ändra format på bakgrundstexten Nivå två Nivå tre Nivå fyra Nivå fem HUR? There is evidence that competence does not reliably predict performance in clinical practice Competency-based assessments were defined as measures of what doctors do in testing situations, while performance-based assessments were defined as measures of what doctors do in practice Several studies have shown that there are differences between what doctors can do in controlled high stakes situations and what they really do in actual practice Rethans JJ, Norcini JJ, Baron-Maldonado M, Blackmore D, Jolly BC, LaDuca T, et al. The relationship between competence and performance: implications for assessing practice performance. Med Educ 2002;36:901-9.
Workplace based assessment Bedömning Mål Inlärning Bedömning Ökad förståelse för vad man skall lära sig Bedömningar kontinuerligt Patient, anhöriga, övrig personal, system Kunskap färdigheter förhållningssätt VERKTYG FÖR BEDÖMNING Den som håller i verktyget är den viktiga - inte verktyget i sig Erfarenheter från England Klicka här för att ändra CBD format på bakgrundsrubriken Skriftlig examination Klicka här för att ändra format på bakgrundstexten Nivå två Nivå tre Nivå fyra Nivå fem CASE BASED DISCUSSION Strukturerad diskussion om kliniska fall Sker mellan handledare och utbildningsläkaren Handledaren tittar på - förmågan till klinisk bedömning och handläggande av patienten - förmågan att skapa adekvata journalanteckningar - Utbildningsläkarens fördjupade kunskaper i det aktuella kliniska ämnet
DIRECT OBSERVATION OF PROCEDURAL SKILLS (DOPS) MINI-CEX (KORT SIT-IN / MEDSITTNING) Observation - innan - under - efter ett praktiskt moment Patient ST-läkare Handledare Tittar på: kommunikationsförmåga, teknisk skicklighet och hygienaspekter Observation av utbildningsläkaren tillsammans med en verklig patient Används för att bedöma professionalism 1 OTILLFREDS- STÄLLANDE 2 3 4 5 6 Det räcker inte att återkoppla siffran! UTMÄRKT Klicka här för att ändra format på bakgrundsrubriken FUNGERAR DET? Klicka här för att ändra format på bakgrundstexten Nivå två Nivå tre Nivå fyra Nivå fem
FOUNDATION ASSESSMENT PROGRAMME (FAP) 6 X MINI-CEX MINI-CLINICAL EVALUATION EXERCISE 6 X DOPS DIRECT OBSERVATION OF PROCEDURAL SKILLS 6 X CBD CASE BASED DISCUSSION 2 X MINI-PAT MINI-PEER ASSESSMENT TOOL TOTAL TIDSÅTGÅNG 9 TIMMAR INKL FEEDBACK! MÅNGA SMÅ UTVÄRDERINGAR ISTÄLLET FÖR ENSTAKA STORA! STARK EVIDENS FÖR: Observera autentiskt kliniskt arbete i en verklig klinisk situation Förberedd adepten på observationen och dess mål samt förväntningar inklusive konsekvenser av bedömningen Bedöm klinisk förmåga genom direkt observation istället för att använda indirekt information Kognitiva faktorer, spontana intryck, omedvetna fördomar kan påverka bedömningen UNDVIK Att enbart ge feedback utifrån kvantitativ skala Feedback inför patient utan att förbereda både adept och patient Feedback efter observation koncenteras på observerade beteenden Adepter kan känna motstånd mot bedömning, förbered dig på strategier för att försöka överbrygga detta
UTBILDNINGSVÄRDE mini-cex + DOPS Andel av studier Mini-cex - 61 % högt, 22% medium DOPS- 28,5% högt, 43% medium Bättre resultat visade med DOPS än mini-cex avseende att åstadkomma förbättrad kunskap och kompetens METODER För samlad bedömning? MULTISOURCE FEEDBACK 360 GRADER Bedömning av ST-läkarens kompetens Om bedömningen visar att ST-läkaren inte har uppfyllt kompetenskraven, bör det leda till - justeringar i det individuella utbildningsprogrammet - förändringar i verksamhetens utbildningsinsatser, eller - tydligare krav på ST-läkarens insatser
VAD ÄR SPECIALISTKOLLEGIUM? Studierektorn leder! Självskattning för ST + strukturerad diskussion mellan verksamhetschef, handledare, studierektor och övriga specialister Bedöma en ST-läkares kompetens - identifiera svaga och starka områden för att kunna ge en förbättrad utbildning Respektfullhet! 131205 Jonas Andersson 3,5 år Blanketten ifylles enskilt i förväg! Handledaren får värdefull information för fortsatta observationer och feedback
Slutsatserna av diskussionen återges som respektfull konstruktiv feedback Sammanfattande feedback utgående från självskattning FÖR LITE KONKRETA OBSERVATIONER UNDVIKA DISKUTERA ANTAL KRYSS UNDVIK ANDRAS OKÄNDA HISTORIER FEEDBACK efteråt! Vi har uppfattat att dina kunskaper och färdigheter är goda, över förväntan snarare än under förväntan som du fyllt i Handledare ST-Läkare Handledare ST-Läkare
Vi upplever däremot att du ofta frågar om sådant som vi uppfattar att du kan Handledare ST-Läkare Styrkor med specialistkollegium? Bättre rättsäkerhet? Vid problem - vad är problemet? Istället för korridorssnack!...och vad kan kliniken göra?
Take Home Message ST-läkaren informeras och självskattar Deltagarna fyller i formuläret enskilt Omdömen baseras på observationer i klinik inkl formaliserade bedömningar Gynnar klinikens utbildningsklimat Slutsatserna av diskussionen återges som respektfull konstruktiv feedback Sammanfattande feedback utgående från självskattning Undvik okända exempel! Where are you? EXPERT A milestone is an observable marker of an individual s ability along a developmental continuum Royal College, Canada http://www.royalcollege.ca/rcsite/cbd/implementation/epa HUR SKER UTVECKLINGEN I OMVÄRLDEN? NOVIS
EPA - Entrusted professional activity A task in the clinical setting that may be entrusted to a learner by the supervisor once sufficient competence has been demonstrated HUR FÅR MAN TILL DET?? EPAs integrate multiple milestones in real-world tasks MÅNGA KORTA UTVÄRDERINGAR - INTEGRERA I VARDAGEN! REDOVISA / FÖLJ UPP vid Specialistkollegium? LOGGBOK över bedömningar ST-LÄKARE tar INITIATIV till BEDÖMNINGAR BESLUTA & FÖRANKRA METODER + INTERVALL
Med kunskap om implementering genomförs i genomsnitt 80 procent av det planerade förändringsarbetet efter tre år. Utan sådan kunskap genomförs 14 procent av förändringsarbetet efter i genomsnitt 17 år. GAFFELMOTTAGNING Patient ST-läkare Patient ST-läkare Patient ST-läkare Fixsen, D. L., Blase, K. A., Timbers, G. D., & Wolf, M. M. (2001). In search of program implementation: 792 replications of the Teach- ing-family Model. In G. A. Bernfeld, D. P. Farrington & A. W. Leschied (Eds.), Offender rehabilitation in practice: Implementing and evaluating effective programs (pp. 149 166). London: Wiley. Handledare SAMMANFATTNING Bedömning av klinisk kompetens -på kliniken! Bedömning sker på flera sätt -DOPS, CBD, Mini-CEX Regelbunden bedömning - lite i taget Flera olika bedömare - ser olika Metoder för att sammanställa bedömningar från flera 360 bedömning + specialistkollegium Ange målet med bedömningen - ge konkret respektfull feedback! Bestämt intervall och metoder - ST väljer när Fredrik Walentin www.hjarntanken.se/links.html info@hjarntanken.se