STRUKTURPÅVERKAN GENOM STRUKTURFONDERNA? EN DISKUSSION OM UTVÄRDERING AV EU:S STRUKTURFONDER I SVERIGE OCH ERFARENHETER AV TEORIBASERAD UTVÄRDERING GÖRAN BRULIN, TILLVÄXTVERKET INGRID RYDELL & MARCUS HOLMSTRÖM, RAMBÖLL MANAGEMENT CONSULTING
VÅR PRESENTATION I ALL KORTHET Vi vill diskutera hur uppföljning och utvärdering används inom strukturfonderna Ett skifte har inletts under programperioden 2007-2013: mer resurser till utvärdering än tidigare bättre timing genom löpande utvärdering (följeforskning) ökat fokus på förståelseorienterad utvärdering Fortfarande finns dock stora problem: fokus på enskilda projekt indikatorinfernot Vi förordar teoribaserad utvärdering
STRUKTURFONDERNA OCH UTVÄRDERING SKA PÅVERKA STRUKTURER Ett av de viktigaste instrumenten inom EU:s sammanhållningspolitik är strukturfonderna och sammanhållningsfonden som omfattar drygt en tredjedel av EU:s budget. Precis som för strukturfonderna själva, är ambitionerna för vad utvärdering av dem ska leda till mycket ambitiösa. Strukturfonderna ska påverka de nationella strukturerna för tillväxt och arbetsmarknad genom de projekt fonderna finansierar - men också genom hur de utvärderas. Påverkar uppföljning och utvärdering strukturer och politik? Ja, om man får tro den levande debatten (jfr. utvärderingsmonstret och utvärderingssamhället )
ETT SKIFTE HAR INLETTS EU-kommissionen, Tillväxtverket och ESF-rådet prioriterar utvärdering som instrument för att vässa strukturfondernas strukturpåverkan Ett skifte har inletts under programperioden 2007-2013: mer resurser till utvärdering än tidigare bättre timing genom löpande utvärdering (följeforskning) ökat fokus på förståelseorienterad utvärdering
FORTFARANDE FINNS DOCK STORA PROBLEM Utvärderingar har ofta fokuserat på enskilda projekt, sällan på kopplingen till programmålen och långsiktiga effekter projektutvärderingar har oftast upphandlats av projektledare strukturfondsprojekt fungerar som satelliter som drivs utanför moderskeppet Indikatorer misstas för mål, uppföljning misstas för utvärdering irrelevanta och för många indikatorer (t.ex. nya företag ) icke-tillförlitliga indikatorer ( antal skapade arbetstillfällen ) indikatorer används som mål
VI FÖRORDAR TEORIBASERAD UTVÄRDERING Både uppföljning och utvärdering kan vara relevanta och effektiva verktyg för att förstå och utveckla verksamheter. EU-kommissionen stavar vägen framåt teoribaserad utvärdering. Teoribaserad utvärdering karaktäriseras av: en förändringsteori en förklarande ambition en kombination av metoder för datainsamling och analys användning av redan känd kunskap: forskning, analys, utvärdering, beprövad erfarenhet fokus på förutsättningar och omvärldsfaktorer som påverkar insatsen fokus på både process och effekter
VAD ÄR DET SOM ÄR SÅ BRA MED TEORIBASERAD UTVÄRDERING? En förändringsteori kan ge en gemensam förståelse bland intressenter för syfte och förväntade effekter Ett relevant ramverk för uppföljning och utvärdering Kan ge kunskap om kausala mekanismer Tydliggör motsägelser i regelverk och förväntade effekter
VÅRT CASE: LÖPANDE UTVÄRDERING AV ELVA REGIONALA RISKKAPITALFONDER
SLUTSATSER Bättre utvärdering av strukturfondernas insatser kan bidra till att insatserna får större effekt: mer valuta för pengarna Bättre utvärdering av strukturfondernas insatser kan bidra till att insatserna får större effekt: mer valuta för pengarna Teoribaserad utvärdering är ett viktigt ramverk för att göra utvärderingar mer relevanta, tillförlitliga och användbara Lärande utvärdering, som bygger dels på att utvärderaren kopplas in tidigt i en insats livscykel och att insatsens intressenter involveras, är en viktig princip för hur utvärderingar bör genomföras för att göra dem mer tillförlitliga och användbara
TACK!