UNGKOMP MÄTNING AV DELTAGARNAS PROGRESSION
Mätning av deltagarnas progression 1 av 13 INNEHÅLLSFÖRTECKNING 1. Resultat progressionsmätning 1 1.1 Inledning 1 1. Resultat per frågeställning 5 1.3 Skillnader mellan kontor 10 1.4 Enkätens frågor och alternativ 13 Tabell 1: Förändring mellan insamling 1 och insamling /3 på fråga Hur stort är ditt förtroende för Arbetsförmedlingen idag?... 8 Tabell : Progressionsmätningens samtliga frågor och svarsalternativ... 13 Figur 1: Antal genomförda progressionsmätningar... Figur : Svarsfrekvens, insamling 1, progressionsmätning, okt 016-mars 017... Figur : Utfall av progressionsmätning, genomsnitt insamling 1 och ökning under insamling och 3... 3 Figur 3: Utfall av progressionsmätning, genomsnitt insamling 1 och ökning insamling och 3, individer med lågt utgångsläge (mindre än 3 i genomsnitt)... 4 Figur 4: Utfall progression, skillnader mellan män och kvinnor (stapel för kvinnor överst för varje fråga)... 4 Figur 5: Utfall progression, skillnader mellan åldrar (stapel för 16-0 år överst för varje fråga)... 5 Figur 6: Vet du vilket eller vilken typ av arbete eller studier du helst skulle vilja ha?... 5 Figur 7: Vet du vad du behöver göra för att förbättra dina chanser att få ett jobb/börja studera? 6 Figur 8 Tror du att det du kan d.v.s. dina kompetenser och färdigheter kan användas på en arbetsplats?... 6 Figur 9: Hur känner du för att ta kontakt med personer du inte känner på ett företag, myndighet eller skola?... 7 Figur 10: Har du lätt eller svårt för att samarbeta med andra? (i tex en arbetsgrupp, ett samtal eller liknande)... 7 Figur 11: Har din kontakt med UngKOMP ökat ditt förtroende för Arbetsförmedlingen som helhet? (i och med att UngKOMP är en del av Arbetsförmedlingen)... 8 Figur 13: Hur stort är ditt förtroende för Arbetsförmedlingen idag?... 8 Figur 13: Förändring på fråga Hur stort är ditt förtroende för Arbetsförmedlingen idag? mellan Insamling 1 och Insamling /3... 9 Figur 14: Progression per kontor, genomsnitt av progressionsfrågor exklusive frågor rörande förtroende för Arbetsförmedlingen... 10 Figur 15: Progression per kontor på fråga Hur stort är ditt förtroende för Arbetsförmedlingen idag?... 10 Figur 16: Andel med högt förtroende för Arbetsförmedlingen (kategori 4 eller 5 på förtroendefråga) per kontor och andel med högt förtroende för Arbetsförmedlingen enligt SOM- Institutet... 11 Figur 17: Progression per kontor på fråga Har din kontakt med UngKOMP ökat ditt förtroende för Arbetsförmedlingen som helhet? (i och med att UngKOMP är en del av Arbetsförmedlingen), Insamling... 1
1. RESULTAT PROGRESSIONSMÄTNING 1.1 Inledning Sedan hösten 016 har Ramböll parallellt med effektutvärdering, fallstudier och intervjuer genomfört progressionsmätning av deltagarna i UngKOMP. Enkelt uttryckt är progressionsmätning ett sätt att följa individernas utveckling under dess inskrivningstid i UngKOMP. Vi föreslog en progressionsmätning redan i vårt anbud som vi skrev under 015, då vi såg ett behov av att bredda och komplettera den kvantitativa analysen, som i övrigt består av resultatrapporter och effektutvärdering. Till skillnad från dessa avsåg progressionsmätning spegla deltagarnas upplevda förutsättningar och inställning till arbetssökande eller fortsatt studerande. Vi ville göra detta då effektutvärdering enbart belyser utfall i form av arbete eller studiedeltagande. Samtidigt ger en kvantitativ mätning av individers upplevda förutsättningar ett mycket mer robust underlag än t.ex. enskilda intervjuer med deltagare. Redan under inledningen (015) av vår utvärdering av UngKOMP kunde vi se tendenser av vad som visas i resultaten i denna progressionsmätning, d.v.s. att individerna stärks till följd av deltagande i projektet UngKOMP. Detta baserades då i mångt och mycket på intervjuer med deltagare samt handläggare som vittnade om deltagarnas utveckling under inskrivningsperioden. Med progressionsanalysen kan vi visa på att handläggarnas och deltagarnas berättelse stämmer. Vi kan också nyansera bilden, t.ex. hur det skiljer sig mellan kontor, olika typer av individer o.s.v. Frågorna som använts togs fram under våren 016 och baserades i första hand på validerade skalor som i tidigare studier påvisats vara rigida indikatorer för individers förutsättningar på arbetsmarknaden. 1 Efter att Ramböll tagit fram ett första utkast på frågor reviderades dessa i samråd med den nationella projektledningen samt med handläggare och delprojektledare inom UngKOMP. Detta gjordes så att frågorna i högsta möjliga utsträckning skulle passa UngKOMPs målgrupp. Ett flertal justeringar gjordes av frågornas formulering då de handläggare som möter målgruppen tilläts ha stort inflytande. Progressionsmätningen har skett vid tre tillfällen; den första insamlingen har skett vid inskrivningstillfället, den andra tre månader senare och den tredje ytterligare tre månader senare. Insamlingen startade i oktober 016 och pågick till och med juni 017. Nedan illustreras antalet genomförda insamlingar av progressionsresultat. Totalt har 997 individer besvarat enkäten en gång, 57 individer två gånger och 163 individer tre gånger. Ramböll bedömer detta som ett lyckat utfall givet den administrativa börda som detta inneburit för handläggarna i verksamheten. Det låga antalet på insamling tre är logiskt då en majoritet avskrivits från projektet vid det tredje insamlingstillfället vilket tidigast sker 180 dagar efter inskrivning. 1 Primär grund för skalorna har varit Væksthusets Forskningscenter och Aarhus Universitet som tog fram dessa 01 kopplat till projekt med jobcenter på olika platser i Danmark. Se deras slutrapport här: http://vaeksthusets-forskningscenter.dk/wpcontent/uploads/017/01/bip-indikatorer-og-jobsandsynlighed.pdf
Figur 1: Antal genomförda progressionsmätningar 100 1000 997 800 600 57 400 00 163 0 Insamling 1 Insamling Insamling 3 Antalet insamlade svar per delprojekt varierar dock kraftigt. Tre delprojekt har samlat in svar på progressionsenkäten för mindre än en tredjedel av de deltagare de skrev in under perioden. Resultaten är därmed inte helt generaliserbara över hela projektet. Figur : Svarsfrekvens, insamling 1, progressionsmätning, okt 016-mars 017 Malmö Växjö Gävle Stockholm Järfälla Göteborg Landskrona Örebro Norrköping Helsingborg Visby Eskilstuna Uppsala Skellefteå Trollhättan Motala 0% 0% 40% 60% 80% Insamling 1 avslutades den sista mars 017 då det vid denna tidpunkt inte skulle vara möjligt att samla in uppföljande enkäter för senare inskrivna deltagare, och att syftet att fånga deltagarens progression inte längre var möjligt att uppnå. Insamling och 3 samlades däremot fortsatt in fram till och med juni 017.
1. Resultat Nedan illustreras det samlade resultatet från progressionsmätningen för deltagare i UngKOMP. Inom samtliga områden sker en ökning mellan insamling 1 och insamling. Genomsnittet skiljer sig dock mellan frågorna och så gör också utvecklingen. Generellt kan man se att utvecklingen mellan insamling 1 och är störst inom de områden där utgångsläget är lågt, två exempel på detta är fråga två och sex i figur nedan. Samtidigt utmärker sig fråga fyra som rör individers inställning till att ta kontakt med personer de inte känner där utvecklingen är relativt liten. Progressionen mellan insamling och 3 är låg. Således kan slutsatsen dras att den individuella utveckling som sker under inskrivning i UngKOMP sker under de inledande tre månaderna av inskrivningen. Detta är dock en sanning med modifikation, se nedan. Figur 3: Utfall av progressionsmätning, genomsnitt insamling 1 och ökning under insamling och 3 0 1 3 4 5 Vet du vilket eller vilken typ av arbete eller studier du helst skulle vilja ha? 3,48 0,6 Vet du vad du behöver göra för att förbättra dina chanser att få ett jobb/börja studera? 3,9 0,46 Tror du att det du kan d.v.s. dina kompetenser och färdigheter kan användas på en arbetsplats? 3,88 0,1 Hur känner du för att ta kontakt med personer du inte känner på ett företag, myndighet eller skola? 3,34 0,07 Har du lätt eller svårt för att samarbeta med andra? (i tex en arbetsgrupp, ett samtal eller liknande) 4,05 0,13 Hur stort är ditt förtroende för Arbetsförmedlingen idag? 3,18 0,39 Insamling 1 Insamling Insamling 3 Nedan illustreras progressionsresultaten för de individer som hade ett lågt genomsnitt under insamling 1 (lägre än 3 i ett genomsnitt av alla progressionsfrågor) vilket omfattar ca 15 procent av deltagarna. För denna grupp ser vi den tydligaste positiva progressionen vilken också sträcker sig till insamling 3.
Figur 4: Utfall av progressionsmätning, genomsnitt insamling 1 och ökning insamling och 3, individer med lågt utgångsläge (mindre än 3 i genomsnitt) 0 1 3 4 5 Vet du vilket eller vilken typ av arbete eller studier du helst skulle vilja ha?,17 0,87 0,30 Vet du vad du behöver göra för att förbättra dina chanser att få ett jobb/börja studera?,15 1,17 0,64 Tror du att det du kan d.v.s. dina kompetenser och färdigheter kan användas på en arbetsplats?,78 0,86 Hur känner du för att ta kontakt med personer du inte känner på ett företag, myndighet eller skola?,01 0,56 0,61 Har du lätt eller svårt för att samarbeta med andra? (i tex en arbetsgrupp, ett samtal eller liknande),84 0,7 0,3 Hur stort är ditt förtroende för Arbetsförmedlingen idag?,9 0,410,40 Insamling 1 Insamling Insamling 3 1.3 Resultat nedbrutet efter kön och ålder Nedan illustreras resultaten uppdelat på män och kvinnor. Det går ej att utläsa några betydande skillnader mellan män och kvinnor, varken med avseende på progression eller ingångsvärde. Figur 5: Utfall progression, skillnader mellan män och kvinnor (stapel för kvinnor överst för varje fråga) 3,51 0,3 Kvinna Vet du vilket eller vilken typ av arbete eller studier du helst skulle vilja ha? 3,47 0,30 Man 3, 0,48 Kvinna Vet du vad du behöver göra för att förbättra dina chanser att få ett jobb/börja studera? 3,35 0,43 Man 3,94 0,01 Kvinna Tror du att det du kan d.v.s. dina kompetenser och färdigheter kan användas på en arbetsplats? 3,85 0,9 Man 3,5 0,05 Kvinna Hur känner du för att ta kontakt med personer du inte känner på ett företag, myndighet eller skola? 3,40 0,06 Man 4,10 0,09 Kvinna Har du lätt eller svårt för att samarbeta med andra? (i tex en arbetsgrupp, ett samtal eller liknande) 4,01 0,17 Man 3,0 0,37 Kvinna Hur stort är ditt förtroende för Arbetsförmedlingen idag? 3, 0,34 Man Insamling 1 Insamling Insamling 3
Ej heller när resultaten studeras uppdelat på olika åldersgrupper går några större skillnader att urskilja. Figur 6: Utfall progression, skillnader mellan åldrar (stapel för 16-0 år överst för varje fråga) Vet du vilket eller vilken typ av arbete eller studier du helst skulle vilja ha? 3,40 3,5 0,6 0,6 16-0 år 1-5 år 3,13 0,60 16-0 år Vet du vad du behöver göra för att förbättra dina chanser att få ett jobb/börja studera? 3,37 0,39 1-5 år Tror du att det du kan d.v.s. dina kompetenser och färdigheter kan användas på en arbetsplats? 3,84 3,91 0, 0,18 16-0 år 1-5 år 3,30 0,04 16-0 år Hur känner du för att ta kontakt med personer du inte känner på ett företag, myndighet eller skola? 3,35 0,09 1-5 år 3,91 0,5 16-0 år Har du lätt eller svårt för att samarbeta med andra? (i tex en arbetsgrupp, ett samtal eller liknande) 4,1 0,07 1-5 år 3,34 0,4 16-0 år Hur stort är ditt förtroende för Arbetsförmedlingen idag? 3,13 0,45 1-5 år Insamling 1 Insamling Insamling 3 1.4 Resultat per frågeställning Figur 7: Vet du vilket eller vilken typ av arbete eller studier du helst skulle vilja ha? 0% 0% 40% 60% 80% 100% Insamling 1 1. Jag har ingen aning om vilket eller vilken typ av arbete eller studier jag skulle vilja ha Insamling 3 4 Insamling 3 5. Jag vet exakt vilket eller vilken typ av arbete eller studier jag skulle vilja ha
Figur 8: Vet du vad du behöver göra för att förbättra dina chanser att få ett jobb/börja studera? 0% 0% 40% 60% 80% 100% Insamling 1 1. Jag har ingen aning om vad jag behöver göra för att förbättra mina chanser Insamling 3 4 Insamling 3 5. Jag vet precis vad jag måste göra för att förbättra mina chanser Figur 9 Tror du att det du kan d.v.s. dina kompetenser och färdigheter kan användas på en arbetsplats? 0% 0% 40% 60% 80% 100% Insamling 1 1. Jag tror absolut inte att mina kompetenser kan användas Insamling 3 4 Insamling 3 5. Jag är säker på att mina kompetenser kan användas
Figur 10: Hur känner du för att ta kontakt med personer du inte känner på ett företag, myndighet eller skola? 0% 0% 40% 60% 80% 100% Insamling 1 1. Jag har mycket svårt för att ta kontakt med personer jag inte känner Insamling 3 4 Insamling 3 5. Jag har mycket lätt för att ta kontakt med personer jag inte känner Figur 11: Har du lätt eller svårt för att samarbeta med andra? (i tex en arbetsgrupp, ett samtal eller liknande) 0% 0% 40% 60% 80% 100% Insamling 1 1. Jag har mycket svårt för att samarbeta med andra Insamling 3 4 Insamling 3 5. Jag har mycket lätt för att samarbeta med andra
Figur 1: Har din kontakt med UngKOMP ökat ditt förtroende för Arbetsförmedlingen som helhet? (i och med att UngKOMP är en del av Arbetsförmedlingen) 0% 0% 40% 60% 80% 100% 1. Nej, inte alls Insamling 3 4 Insamling 3 5. Ja, i mycket stor utsträckning Figur 13: Hur stort är ditt förtroende för Arbetsförmedlingen idag? 0% 0% 40% 60% 80% 100% Insamling 1 1. Jag har mycket litet förtroende för Arbetsförmedlingen Insamling 3 4 Insamling 3 5. Jag har mycket stort förtroende för Arbetsförmedlingen Tabell 1: Förändring mellan insamling 1 och insamling /3 på fråga Hur stort är ditt förtroende för Arbetsförmedlingen idag? Typ av förändring Antal Andel Oförändrade 194 36 % Positiv förändring 40 44 % Negativ förändring 11 1 % I UngKOMPs styrdokument står: Lägst 90 procent av de inskrivna ska efter sex månader (alternativt vid avslut för de inskrivna som avslutas innan sex månader) ha ökat sitt förtroende (Gått upp minst ett steg på mät-skalan) eller ha uppnått ett högt förtroende för Arbetsförmedlingen.
Ramböll kan inte via progressionsmätningen inte exakt undersöka huruvida detta mål uppnåtts, men kan göra en mycket snarlik tolkning. Detta göra genom att klassa nivå 4 och 5 som hög i mätskalan och studera individer vid som vart med vid Insamling och/eller Insamling 3. Om man studerar individer som vart deltagit vid minst två insamlingstillfällen så har 44 procent haft en positiv utveckling, av de som är oförändrade hade 19 procent ett högt förtroende. Vidare hade 17 procent oförändrat men lågt förtroende och 1 procent en negativ utveckling. Totalt har 63 procent haft positiv utveckling, alternativt högt förtroende från början, målet uppnås således troligen inte. Figur 14: Förändring på fråga Hur stort är ditt förtroende för Arbetsförmedlingen idag? mellan Insamling 1 och Insamling /3 50 00 194 150 139 Antal 100 80 74 50 0 3 18 6 3 9-4 -3 - -1 0 1 3 4 Förändring mellan Insamling 1 och Insamling /3 Notering: T.ex. betyder -1 antalet individer som svarat en steg lägre insamling /3 jämfört med insamling 1, t.ex. gått från att svara 4 till 3.
1.5 Skillnader mellan kontor Figur 15: Progression per kontor, genomsnitt av progressionsfrågor exklusive frågor rörande förtroende för Arbetsförmedlingen Järfälla Malmö Helsingborg Växjö Landskrona Trollhättan Gävle Örebro Skellefteå Göteborg Motala Eskilstuna Stockholm Uppsala Visby Norrköping 4,04 3,99 3,86 3,86 3,83 3,74 3,68 3,68 3,67 3,64 3,58 3,50 3,49 3,40 3,4 3,13 0,150,41 0,09 0,0 0,35 0,4 0,4 0,13 0,14 0,17 0,0 0,37 0,38 0,73 0,41 0,37 0,48 0 1 3 4 5 Insamling 1 Insamling Insamling 3 Figur 16: Progression per kontor på fråga Hur stort är ditt förtroende för Arbetsförmedlingen idag? 0 1 3 4 5 Örebro Malmö Uppsala Trollhättan Växjö Gävle Göteborg Eskilstuna Skellefteå Motala Helsingborg Visby Stockholm Landskrona Norrköping Järfälla,67,79,87,98 3,10 3,13 3,14 3,0 3,4 3,8 3,35 3,36 3,59 3,63 3,68 3,84 0,6 0,61 0,63 0,40,09 0,63 0,67 0,54 0,61 0,40 0,65 0,13 0,19 0,45 0,96 0,89 1,7 0,6 0,89 Insamling 1 Insamling Insamling 3
Figur 17: Andel med högt förtroende för Arbetsförmedlingen (kategori 4 eller 5 på förtroendefråga) per kontor och andel med högt förtroende för Arbetsförmedlingen enligt SOM-Institutet Skellefteå Gävle Uppsala Göteborg Trollhättan Järfälla Stockholm Växjö Norrköping Motala Örebro Landskrona Helsingborg Malmö Gotland Eskilstuna 16% 14% 13% 1% 1% 1% 1% 1% 11% 11% 11% 10% 10% 10% 10% 8% 3% 3% 31% 3% 37% 38% 45% 43% 49% 48% 45% 46% 43% 60% 63% 66% 0% 10% 0% 30% 40% 50% 60% 70% SOM-INSTITUTET UngKOMP - Insamling 1 Notering: Mått från SOM-Institutet baseras på mätningar från 1999, 00, 008 samt 010 vilka ovan presenteras länsvis. I SOM-Institutets mätningar är skalan något annorlunda från Rambölls mätning. På fråga om hur stort individens förtroende för Arbetsförmedlingen är besvaras denna på skala: Mycket stort, Ganska stort, Varken stort eller litet, Ganska litet, Mycket litet. Ovan har Ganska Stort och Mycket stort klassats som högt förtroende.
Figur 18: Progression per kontor på fråga Har din kontakt med UngKOMP ökat ditt förtroende för Arbetsförmedlingen som helhet? (i och med att UngKOMP är en del av Arbetsförmedlingen), Insamling 0 1 3 4 5 Motala Gävle Malmö Växjö Landskrona Trollhättan Helsingborg Visby Stockholm Skellefteå Örebro Eskilstuna Norrköping Järfälla Uppsala Göteborg 3,63 3,80 3,80 3,8 3,90 3,91 3,93 4,0 4,05 4,08 4,13 4,14 4,40 4,41 4,47 4,5 Insamling
1.6 Enkätens frågor och svarsalternativ Tabell : Progressionsmätningens samtliga frågor och svarsalternativ Vet du vilket eller vilken typ av arbete eller studier du helst skulle vilja ha? Vet du vad du behöver göra för att förbättra dina chanser att få ett jobb/börja studera? Tror du att det du kan d.v.s. dina kompetenser och färdigheter kan användas på en arbetsplats? Hur känner du för att ta kontakt med personer du inte känner på ett företag, myndighet eller skola? Har du lätt eller svårt för att samarbeta med andra? (i tex en arbetsgrupp, ett samtal eller liknande) Har din kontakt med UngKOMP ökat ditt förtroende för Arbetsförmedlingen som helhet? (i och med att UngKOMP är en del av Arbetsförmedlingen) Hur stort är ditt förtroende för Arbetsförmedlingen idag? 1. Jag har ingen aning om vilket eller vilken typ av arbete eller studier jag skulle vilja ha 1. Jag har ingen aning om vad jag behöver göra för att förbättra mina chanser 1. Jag tror absolut inte att mina kompetenser kan användas 1. Jag har mycket svårt för att ta kontakt med personer jag inte känner 1. Jag har mycket svårt för att samarbeta med andra 3 4 5. Jag vet exakt vilket eller vilken typ av arbete eller studier jag skulle vilja ha 3 4 5. Jag vet precis vad jag måste göra för att förbättra mina chanser 3 4 5. Jag är säker på att mina kompetenser kan användas 3 4 5. Jag har mycket lätt för att ta kontakt med personer jag inte känner 3 4 5. Jag har mycket lätt för att samarbeta med andra 1. Nej, inte alls 3 4 5. Ja, i mycket stor utsträckning 1. Jag har mycket litet förtroende för Arbetsförmedlingen 3 4 5. Jag har mycket stort förtroende för Arbetsförmedlingen Kan inte svara Kan inte svara Kan inte svara Kan inte svara Kan inte svara Kan inte svara Kan inte svara