Coaching färdigheter för yrkesverksamma vuxenutbildare COACH4U Uppföljning och utvärdering Arbetspaket 6: Preliminär rapport, Uppföljning och Utvärdering och Post-piloting data analys Upphovsman: KONSTANTIN PRESLAVSKY UNIVERSITY Datum: juli 215 Projekt nr: 5989-LLP-1-21-1-UK-GRUNDTVIG-GMP författaren, och kommissionen kan inte hållas ansvarig för någon användning som kan göras av informationen däri. 1 / 12
COACH4U Coaching färdigheter för yrkesverksamma vuxenutbildare Projekt Partners: Wandsworth Borough Council (WBC) www.wandsworth.gov.uk ILC Inspired Learning Centre Ltd. www.inspired-learning.eu University of Humanities and Economics in Lodz www.ahe.lodz.pl Asociación de Servicios a las Empresas y Actividades Diversas de Madrid www.adesema.org Konstantin Preslavsky University shu-bg.net Folkuniversitetet Kursverksamheten vid Lunds Universitetet www.folkuniversitetet.se Rapporten är skriven av Shumen University, Shumen, Bulgarien (Prof. Rumyana Todorova, Ph.D., docent. Prof. Penka Kozhuharova, Ph.D., docent Irina Ivanova, Ph.D.) med bidrag från alla projekt partner Projekt nr: 5989-LLP-1-21-1-UK-GRUNDTVIG-GMP författaren, och kommissionen kan inte hållas ansvarig för någon användning som kan göras av informationen däri. Sida 2 of 12
Innehåll 1. Syftet med rapporten 2. Uppföljning och utvärdering 2.1. Indikatorer för systematisk insamling av data 2.2. Uppföljning och datainsamling. Data analys.1. Resultat i Spanien.2. Resultat i Sverige.. Resultat i Polen.4. Resultat i Cypern.5. Resultat i Bulgarien.6. Resultat i Storbritannien 4. Övergripande utvärdering Projekt nr: 5989-LLP-1-21-1-UK-GRUNDTVIG-GMP författaren, och kommissionen kan inte hållas ansvarig för någon användning som kan göras av informationen däri. Sida of 12
1. Syftet med rapporten Systemet för uppföljning och utvärdering har utarbetats och förhandlats fram med partners. Systemet innefattar: 1. Uppföljning: - identifierar specificerade indikatorer för systematisk insamling av data under utförandet; tillhandahåller hantering och drar slutsatser på grunder av data från utförandet; 2. Utvärdering: - gör en systematisk och objektiv bedömning av genomförandet av kurserna inklusive deras utformning, genomförande och resultat; avgör relevans och måluppfyllelse, utveckling och effektivitet, inverkan och hållbarhet av kurserna. Utvärderingen görs med de principer och verktyg som anges i arbetspaket 8. Varje partner tog fram en rapport med en utvärdering av pilotkurser som hållits i partner landet och data analyseras och syntetiseras av arbetspaketsledaren. 2. Uppföljning och utvärdering 2.1. Indikatorer för systematisk insamling av data Indikatorerna presenteras i form av frågor som syftar till att bedöma seminariernas effektivitet inom följande områden: Målen för seminarierna Användbarheten av information Tillämpning av seminariernas innehåll inom ramen för vuxenutbildningen Materialets användbarhet Kvaliteten på utbildningen Kvaliteten på inlärningsmiljön Kvaliteten på hur pilot testen organiserades 2.2. Uppföljning och datainsamling Uppföljningen skedde genom ett slutligt frågeformulär för deltagarna (se bilaga 1). Två seminarier genomfördes hos var och en av partnerorganisationerna enligt följande: seminarium 1 och 2 - i Spanien och Sverige, seminarium 1 och - i Polen och Cypern, och seminarium 2 och - i Storbritannien och Bulgarien. Seminarierna i alla organisationerna genomfördes av coacher.. Data analys Uppgifterna presenteras för varje land och tar hänsyn till resultaten för all seminarium som genomförts Varje seminarium bedöms separat men skillnaderna är inte beskrivna i denna rapport, eftersom de diskuteras i detalj i dataanalysen. Syftet med denna rapport är att bedöma den övergripande kvaliteten på processen av seminariernas genomförande och deltagarnas totala belåtenhet med hur pilot testerna organiserades. Projekt nr: 5989-LLP-1-21-1-UK-GRUNDTVIG-GMP författaren, och kommissionen kan inte hållas ansvarig för någon användning som kan göras av informationen däri. Sida 4 of 12
.1. Resultat i Spanien Data visar att målen för seminarierna var tydliga och genomförbara. Belåtenheten med resultatet var hög (М = 2.75 av ). De spanska deltagarna fann att den information som presenterades var användbar och aktuell, och de enades om att den lagts i deras kunskaper inom vuxenutbildningen. Informationen kunde tillämpas inom ramen för vad de arbetar med. De flesta av deltagarna bedömde informationen som användbar (М = 2,75) och gillade det sätt coachen presenterade den för dem. Alla deltagare var eniga i sin stora utvärdering av coachens kompetens att genomföra seminarierna. Men deltagarna påpekade att de skulle vilja ha ytterligare utbildning i ämnet för seminariet. De var också nöjda med organisationen av kurserna och inlärningsmiljön. Har seminariet uppfyllt dina förväntningar? Var syftet med seminariet klart? Har syftet med seminariet uppnåtts? Har utbildningen gett dig nyttig aktuell information som lagts till i dina kunskaper inom området? Lärde du dig något som du kan använda sen? Fann du materialet för seminariet användbart? Har coachen presenterat materialet på ett tydligt, strukturerat och logiskt sätt? Använde coachen olika metoder för att presentera materialet? Skapade coachen förutsättningar för dialoger och uppmuntrade ett aktivt deltagande i diskussionen om ämnen och frågor? Använde coachen tiden för seminariet på bästa möjliga sätt? Var seminariet användbart för din professionella utveckling? Behöver du ytterligare utbildning i ämnet för seminariet? Var du nöjd med kvaliteten på inlärningsmiljön under utbildningen? Var du nöjd med organisationen av seminariet?,5,5,5 1, 1,9 5 8 2,7 2,59 8 1 2 Medel för alla Medel Standard avvikelse Fig. 1. Resultat i Spanien Projekt nr: 5989-LLP-1-21-1-UK-GRUNDTVIG-GMP författaren, och kommissionen kan inte hållas ansvarig för någon användning som kan göras av informationen däri. Sida 5 of 12
. 2. Resultat i Sverige Deltagarna i Sverige var nöjda med kvaliteten på den genomförda utbildningen och därför gav det lägre värden för behovet av ytterligare utbildning i ämnet (M = 1,). De fann material för seminarierna användbara och välstrukturerade i allmänhet, men ansåg att det skulle ha varit bättre om dem fått göra dem mer praktiskt. I allmänhet, gav utbildningen deltagarna aktuell information som lagts till i deras befintliga kunskaper inom området. Deltagarna gav höga värden för sin belåtenhet med coachens kompetens och hans förmåga att presentera information genom olika metoder. Den höga kvaliteten på utbildningen och bra organisation bidrog till förverkligandet av seminariets målsättningar. Har seminariet uppfyllt dina förväntningar? Var syftet med seminariet klart? Har syftet med seminariet uppnåtts? Har utbildningen gett dig nyttig aktuell information som lagts till i dina kunskaper inom området? Lärde du dig något som du kan använda sen? Fann du materialet för seminariet användbart? Har coachen presenterat materialet på ett tydligt, strukturerat och logiskt sätt? Använde coachen olika metoder för att presentera materialet? Skapade coachen förutsättningar för dialoger och uppmuntrade ett aktivt deltagande i diskussionen om ämnen och frågor? Använde coachen tiden för seminariet på bästa möjliga sätt? Var seminariet användbart för din professionella utveckling? Behöver du ytterligare utbildning i ämnet för seminariet? Var du nöjd med kvaliteten på inlärningsmiljön under utbildningen? Var du nöjd med organisationen av seminariet?,7,7,48,78,69 1,9 1,85 5 8 5 2,7 5 2,71 2,59 2,57 8 1 2 Medel för alla Medel Standard avvikelse Fig. 2. Resultat i Sverige Projekt nr: 5989-LLP-1-21-1-UK-GRUNDTVIG-GMP författaren, och kommissionen kan inte hållas ansvarig för någon användning som kan göras av informationen däri. Sida 6 of 12
.. Resultat i Polen Deltagare från Polen konstaterade att målen för seminarierna var tydliga och uppnåeliga, och dess innehåll var tillämplig inom ramen för vuxenutbildningen. Något lägre värden gavs för praktisk inriktning av seminarierna vad gäller deras användbarhet för professionell utveckling av deltagarna. Det påpekades att tiden var otillräcklig för att utveckla praktiska färdigheter med hjälp av coachningstekniker. Coachen ansågs ha skapat en god lärandemiljö och organisation genom att uppmuntra dialog och aktivt deltagande i diskussioner. Har seminariet uppfyllt dina förväntningar? Var syftet med seminariet klart? Har syftet med seminariet uppnåtts? Har utbildningen gett dig nyttig aktuell information som lagts till i dina kunskaper inom området? Lärde du dig något som du kan använda sen? Fann du materialet för seminariet användbart? Har coachen presenterat materialet på ett tydligt, strukturerat och logiskt sätt? Använde coachen olika metoder för att presentera materialet? Skapade coachen förutsättningar för dialoger och uppmuntrade ett aktivt deltagande i diskussionen om ämnen och frågor? Använde coachen tiden för seminariet på bästa möjliga sätt? Var seminariet användbart för din professionella utveckling? Behöver du ytterligare utbildning i ämnet för seminariet? Var du nöjd med kvaliteten på inlärningsmiljön under utbildningen? Var du nöjd med organisationen av seminariet?,41,5,46,74,7 1,9 2,7 5 8 2,7 7 2,7 2,59 2,6 8,5 1 1,5 2 2,5 Medel för alla Medel Standard avvikelse Fig.. Resultat i Polen Projekt nr: 5989-LLP-1-21-1-UK-GRUNDTVIG-GMP författaren, och kommissionen kan inte hållas ansvarig för någon användning som kan göras av informationen däri. Sida 7 of 12
.4. Resultat i Cypern Uppgifter från uppföljningen visar att deltagarna har gett höga värden för innehållet i seminarierna, träningsprocessen och dess resultat. Målen var tydliga och uppnåeliga, och utbildningen gav deltagarna aktuell och användbar information som lagts till i deras befintliga kunskaper och färdigheter inom området. Något lägre är siffrorna för användbarheten av seminariet för deltagarnas kompetensutveckling (М = 1,62), vilket kan kopplas till behovet av mer omfattande utbildning med hjälp av coachning inom vuxenutbildningen. Högre värden ges till coachens kompetens i att presentera metoder och material, och skapa en miljö och organisation som främjade inlärningen. Har seminariet uppfyllt dina förväntningar? Var syftet med seminariet klart? Har syftet med seminariet uppnåtts? Har utbildningen gett dig nyttig aktuell information som lagts till i dina kunskaper inom området? Lärde du dig något som du kan använda sen? Fann du materialet för seminariet användbart? Har coachen presenterat materialet på ett tydligt, strukturerat och logiskt sätt? Använde coachen olika metoder för att presentera materialet? Skapade coachen förutsättningar för dialoger och uppmuntrade ett aktivt deltagande i diskussionen om ämnen och frågor? Använde coachen tiden för seminariet på bästa möjliga sätt? Var seminariet användbart för din professionella utveckling? Behöver du ytterligare utbildning i ämnet för seminariet? Var du nöjd med kvaliteten på inlärningsmiljön under utbildningen? Var du nöjd med organisationen av seminariet?,5,74 1,62 1,9 5 8 2,7 2,59 7 8 1 2 Medel för alla Medel Standard avvikelse Fig. 4. Resultat i Cypern Projekt nr: 5989-LLP-1-21-1-UK-GRUNDTVIG-GMP författaren, och kommissionen kan inte hållas ansvarig för någon användning som kan göras av informationen däri. Sida 8 of 12
.5. Resultat i Bulgarien Uppgifterna från Bulgarien visar att målen för seminarierna var tydliga och uppnåeliga och motsvarade de förväntade resultaten. Deltagarna gav höga värden för nyttan av materialen och den praktiska aspekten av den information som presenterats. De gav mycket höga värden för kompetens och färdigheter hos coachen när den presenterade material, kommunicerade med deltagare och också tidshantering. Några av deltagarna sa att de skulle ha velat ha fler övningar för att utveckla sina coachnings kunskaper. Därför visar resultaten för denna indikator högre standardavvikelser (V =,62) och lägre medelvärden (2,5). Genomsnittsvärdena hänförs till den nya informationen som lagts till deltagarnas befintliga kunskaper (M = 2,2) och betydelsen av seminarierna för deras professionella utveckling (M = 2,). Arbetsmiljö och organisation av seminarierna ansågs främjar deras utförande. Har seminariet uppfyllt dina förväntningar? Var syftet med seminariet klart? Har syftet med seminariet uppnåtts? Har utbildningen gett dig nyttig aktuellinformation som lagts till i dina kunskaper inom området? Lärde du dig något som du kan använda sen? Fann du materialet för seminariet användbart? Har coachen presenterat materialet på ett tydligt, strukturerat och logiskt sätt? Använde coachen olika metoder för att presentera materialet? Skapade coachen förutsättningar för dialoger och uppmuntrade ett aktivt deltagande i diskussionen om ämnen och frågor? Använde coachen tiden för seminariet på bästa möjliga sätt? Var seminariet användbart för din professionella utveckling? Behöver du ytterligare utbildning i ämnet för seminariet? Var du nöjd med kvaliteten på inlärningsmiljön under utbildningen? Var du nöjd med organisationen av seminariet?,69,7,7,6,78,69,69,69,67,67,82,7,7,69 1,9 2,4 5 2,5 8 2,5 2,2 2,2 2,7 2,4 2,6 2,6 2,7 2,7 2,59 2, 2,5 2,5 2,6 8,5 1 1,5 2 2,5 Medel för alla Medel Standardavvikelse Fig. 5. Resultat i Bulgarien Projekt nr: 5989-LLP-1-21-1-UK-GRUNDTVIG-GMP författaren, och kommissionen kan inte hållas ansvarig för någon användning som kan göras av informationen däri. Sida 9 of 12
.6. Resultat I Storbritannien Data visar att målen för seminarierna var tydliga och genomförbara. Svaren var mestadels positiva där helt eller delvis är de vanligaste svaren. Deltagarna fann att material för seminarierna var användbara och väl strukturerade. Coachen ansågs ha skapat en god lärandemiljö och organisation genom att uppmuntra dialog och aktivt deltagande i diskussioner. Eftersom de som deltar i piloterna fungera som handledare och/eller utvärderare till vuxna i en lärandemiljö, ser de coachning som ett extra verktyg till deras leverans av undervisningen och kände mest att utbildningen genom piloterna var tillräckligt för detta ändamål. Har seminariet uppfyllt dina förväntningar? Var syftet med seminariet klart? Har syftet med seminariet uppnåtts? Har utbildningen gett dig nyttig aktuell information som lagts till i dina kunskaper inom området? Lärde du dig något som du kan använda sen? Fann du materialet för seminariet användbart? Har coachen presenterat materialet på ett tydligt, strukturerat och logiskt sätt? Använde coachen olika metoder för att presentera materialet? Skapade coachen förutsättningar för dialoger och uppmuntrade ett aktivt deltagande i diskussionen om ämnen och frågor? Använde coachen tiden för seminariet på bästa möjliga sätt? Var seminariet användbart för din professionella utveckling? Behöver du ytterligare utbildning i ämnet för seminariet? Var du nöjd med kvaliteten på inlärningsmiljön under utbildningen? Var du nöjd med organisationen av seminariet?,57,57,57,57,57,57,57,57,57,57,57,57,57 1, 1,9 5 2, 8 2, 2,7 2, 2, 2, 2, 2,59 2, 8 1 2 Medel för alla Medel Standardavvikelse Fig. 6. Resultat I Storbritannien Projekt nr: 5989-LLP-1-21-1-UK-GRUNDTVIG-GMP författaren, och kommissionen kan inte hållas ansvarig för någon användning som kan göras av informationen däri. Sida 1 of 12
4. Övergripande utvärdering Alla deltagare från partnerländerna tyckte att målen och de förväntade resultaten av seminarierna var tydliga och framgångsrikt uppnådda. Utbildningen gav aktuell information som lagts till deltagarna befintliga kunskaper inom vuxenutbildningen. I detta avseende fann deltagarna den erhållna informationen i utbildningen användbar och tillräcklig. De material som använts i seminarierna var väl utformat, användbart och tillämpligt inom ramen för vuxenutbildningen. De flesta deltagarna påpekade att coaching är en process som kräver övning. En vanlig rekommendation var att det borde finnas mer praktiska aktiviteter för att finslipa utövarnas kunskaper. Alla deltagare gav mycket höga poäng för coachernas kompetens och färdigheter i att presentera innehållet i seminarierna och genomförande av utbildningen. Alla deltagande länder var arbetsmiljön och organisationen av seminarierna ett viktigt bidrag till deras totala kvaliteten i utbildningen och deltagarnas belåtenhet med resultatet. Seminarierna genomfördes som planerat, och deltagarna hade full tillgång till utbildningsmaterial före och under utbildningen. Det var bra kommunikation och regelbunden återkoppling mellan coacher och deltagarna. Projekt nr: 5989-LLP-1-21-1-UK-GRUNDTVIG-GMP författaren, och kommissionen kan inte hållas ansvarig för någon användning som kan göras av informationen däri. Sida 11 of 12
BILAGA 1 Arbetspaket 6. Uppföljning av pilot testerna Feedback frågeformulär Till deltagarna i seminarierna: Frågeformuläret syftar till att få feedback på seminarierna som bedrivs vid er institution. Ringa in den siffra som bäst speglar din åsikt på respektive seminarium: Coachens namn:... Seminarium nr... Datum för genomförandet av seminariet:... Plats för att genomförandet av seminariet:... Svar Nr Frågor Inte Delvis Helt riktigt 1. Har seminariet uppfyllt dina förväntningar? 1 2 2. Var syftet med seminariet klart? 1 2. Har syftet med seminariet uppnåtts? 1 2 4. Har utbildningen gett dig nyttig aktuell 1 2 information som lagts till i dina kunskaper inom området? 5. Lärde du dig något som du kan använda sen? 1 2 6. Fann du materialet för seminariet 1 2 användbart? 7. Har coachen presenterat materialet på ett 1 2 tydligt, strukturerat och logiskt sätt? 8. Använde coachen olika metoder för att 1 2 presentera materialet? 9. Skapade coachen förutsättningar för dialoger och uppmuntrade ett aktivt deltagande i diskussionen om ämnen och frågor? 1 2 1. Använde coachen tiden för seminariet på 1 2 bästa möjliga sätt? 11. Var seminariet användbart för din 1 2 professionella utveckling? 12. Behöver du ytterligare utbildning I ämnet för 1 2 seminariet? 1. Var du nöjd med kvaliteten på 1 2 inlärningsmiljön under utbildningen? 14. Var du nöjd med organisationen av seminariet? 1 2 Projekt nr: 5989-LLP-1-21-1-UK-GRUNDTVIG-GMP författaren, och kommissionen kan inte hållas ansvarig för någon användning som kan göras av informationen däri. Sida 12 of 12