Utvärdering av samordningsförbundens verksamhet
Utvärderingen/uppdraget består av tre fristående delar 1. Samordningsförbundens organisering och verksamhet (Slutredovisning 12 oktober 2018) 2. Utvärdering av effekter av samordningsförbundens verksamhet på kommunnivå (Slutredovisning 14 december 2018) 3. Utvärdering av effekter av samordningsförbundens insatser på individnivå (Slutredovisningar: 1 december 2018, 2020 och 2021)
Samordningsförbundens organisation och verksamhet (Del I)
1. Samordningsförbundens verksamhet och organisering ISF kommer att studera samtliga förbund verksamma år 2016 utifrån deras organisation och verksamhet. Vi kommer även att titta på styrande lag och riktlinjer. Övergripande frågor: Hur organiserar sig förbunden? Hur använder förbunden sina resurser? Kan vi identifiera olika former för hur förbunden arbetar med utgångspunkt i organisation, verksamhet och kontextuella faktorer?
Data SUS: resurser, insatser, målgrupper, information om individer i insatser etc. ojämn registrering mellan förbunden Förbundens egna dokument (ÅR, Förbundsordningar, VP): information om målgrupper, insatser, ekonomi, styrelsens sammansättning, ekonomisk fördelning etc. Registerdata: som t.ex. befolkningsunderlag, försörjningskvot, ekonomiskt bistånd, sjuktal, arbetslöshet mm. Vissa socioekonomiska och demografiska bakgrundfaktorer som kan vara relevanta. Enkät: riktad till förbundschefer och styrelsemedlemmar kring frågor om SOF:s verksamhet och organisation.
Enkäten För att få en så heltäckande och bred bild som möjligt av förbundens verksamhet Enkäten har skickats till: 81 SOF Samtliga förbundschefer eller motsvarande Samtliga styrelsemedlemmar Skickades ut i slutet av februari e-postadresser samlades in i början av 2018
Vad har vi frågat om? De verksammas bakgrund Hur effektiva upplevs SOF vara för olika grupper? Hur används SOF:s resurser? Hur fungerar samarbetet i styrelsen? Hur fungerar medelstilldelningen? Hur arbetar man med jämställdhet i verksamheten? Vilket inflytande har de olika parterna?
Enkäten svarsfrekvens Hitintills ca 66 procent Högre bland förbundscheferna ca: 90 procent Högre bland styrelseordförandena ca: 75 procent Lägre bland övriga styrelsemedlemmar
Enkäten forts Enkäten fortfarande öppen vi behöver ha era synpunkter! Hör av er om ni inte fått enkäten fast ni borde ha fått det
Utvärdering av samordningsförbundens verksamhet på kommunnivå (Del II)
2. Utvärdering av samordningsförbundens verksamhet på kommunnivå, 2005-2016 Leder samordningsförbundens verksamhet till att andelen: studerande i arbete (med och utan stöd, nystartsjobb, ) inskrivna på arbetsförmedlingen - långtidsarbetslösa sjukskrivna, - sjuk- och aktivitetsersättning offentlig försörjning påverkas på kommunnivå? Här studeras den sammantagna effekten av förbundens verksamhet, både struktur- och individinriktade insatser.
2. Utvärderingsstrategi Kommunerna går med i samordningsförbund vid olika tidpunkter. Jämför dem som gått in i samordningsförbund (behandlad grupp) med dem som inte gjort det (kontrollgrupp) över tid. Innebär att man kan studera kausala (orsak och verkan) effekter av att organisera sig i samordningsförbund på kommunnivå. (Kallas difference-in-difference-skattningar och är en vanlig utvärderingsmetod i empirisk nationalekonomi.)
Antal kommuner som gått med i samordnings förbund 2005-2016 300 250 Behandlingsgrupp Kontrollgrupp 200 150 100 50 0
Utvärdering av samordningsförbundens verksamhet på individnivå (Del III)
3. Utvärdering av samordningsförbundens verksamhet på individnivå Det finns idag inget enhetligt och heltäckande register över deltagare i samordningsförbundens insatser Komplex målgrupp: svårt att identifiera vilka individer som uppfyller villkoren för att få del av insatser Svårt (omöjligt) att identifiera en kontrollgrupp av individer med en likartad utsatt position och komplex problematik. => Randomiserat experiment
Vad är ett randomiserat experiment? Slumpmässigt dela in personer i två grupper: en grupp som får behandling, behandlingsgrupp, en grupp som inte får behandling, kontrollgrupp. Med hjälp av slumpen kommer personer i grupperna att få samma egenskaper. Man kan jämföra utfall mellan grupperna och mäta effekter av behandlingen (kausalt).
ISF har träffat 12 förbundschefer: Urvalskriterier: - stora volymer på individinsatser enligt SUS-data - geografisk spridning - exkluderat förbund med stora ESF-projekt Kontaktade förbund: Delta, Göteborg centrum, Insjöriket, FINSAM Malmö, Samspelet, Stockholm Stad, Syd Närke, Östra Skaraborg, Västra Östergötland, Uppsala, Västerås, och Umeå. Diskuterat: inställning, typer av insatser, kontrollgrupp, utfall mm.
Utvärdering av samverkansteam Efter dessa samtal och andra överväganden har vi valt att experimentet ska baseras på: 1. Samordningsteam (finns relativt lika sådana i olika delar av landet) 2. Väntetid (max 6 månader) - Ingen blir utan behandling 3. Möjlighet att undanta specifika fall
Fördel med just samverkansteam Samordningsteam speglar syftet med samordningsförbundens verksamhet Gör det möjligt att genomföra randomisering på ett enkelt, likvärdigt och effektivt sätt Finns förbund med bra förutsättningar i: Malmö, Göteborg, Närke, Stockholm, Umeå, Värmland och Västerås. Fler förbund kan komma att kontaktas.
Vad händer nu? Arbetet med Del 1 och Del 2 i utvärderingen pågår för fullt. Del 3: ISF träffar de förbund där det finns goda förutsättningar att utvärdera verksamheten. Träffar styrelser mm. Finns många frågor kvar att lösa Planering av pilot, Malmö och Insjöriket, och den stora utvärderingen.