Att definiera och mäta samhällseffekter. Sara Modig och Åsa Minoz 22 januari 2015

Transkript

1 Att definiera och mäta samhällseffekter Sara Modig och Åsa Minoz 22 januari 2015

2

3 Tjänsteoperatör TSP Hemma gateway Det Det öppna öppna smarta nätet hemmet EXDIN Smarta hemmet

4 Uppstart

5

6 Källa: Kate Raworth, Senior Researcher, OxfamGB

7 PWC:

8 Behov Lösning Effekt Innovation handlar om nya eller bättre sätt att skapa värden för samhälle, företag och individer. Innovationer är nya lösningar som svarar mot behov och efterfrågan i vardagen och omvärlden. Värdet uppstår i nyttiggörandet och tillämpningen av en idé. Värdet som skapas kan ta många former ekonomiska, sociala eller miljömässiga värden.

9 2. Förslag 1. Trigger 6. Systemförändring 3. Prototyper 5. Skala upp 4. Uthållighet Källa: E(er Youngfounda2on.org

10 I keep six honest serving men (They taught me all I knew); Their names are What and Why and When and How and Where and Who. Rudyard Kipling

11 För vem och i vilket sammanhang skapar UDI-projektet värde? Behov Lösning Effekt

12

13 Vad?

14 Effektlogik vad är det? Att systematiskt och visuellt formulera och presentera er gemensamma förståelse av sambanden mellan resurser och aktiviteter i insatsen och de förändringar eller effekter som ni vill uppnå

15 Behov Utforskande av fungerande lösning(ar) Effekt Nuläge Resurser Aktiviteter Resultat Utfall Effekt Insatsens kontext vems behov, i vilket sammanhang? Insatsens effektivitet (utfall/resurser) Insatsens verkningsgrad eller ändamålsenlighet

16 Vårt UDI-projekt Varför? Behov Vem? Vad? Vart? Effekter

17 Effektlogik, förändringsteori Verksamhet Resultat Behov Resurser Aktiviteter Resultat Utfall Önskad effekt Kostnad, timmar Event, Processer Kvantitet/ Kvalitet Förändring Systemeller samhällsförändring Nuläge i förhållande till det framtida önskade läget Substantiv Verb En viss kvantitet Verifiera och validera eller kvalitet Lär och förbättra Ökning, minskning, förbättring

18 Varför?

19 Effektlogik varför? Mer genomtänkta och ändamålsenliga insatser Bättre uppföljning av insatser under vägs och efteråt Ökat lärande av utvecklingen för att justera insatser under genomförande Dokumentera och utbyta evidens kring vad som fungerar och varför Engagera och motivera projektteam och partnerskap, investorer och andra intressenter

20 For us good intentions are not good enough. We know that good intentions don t always lead to good outcomes. NESTA (2013), Standards of evidence: an approach that balances the need for evidence with innovation

21 Lärprocess Utveckla effektlogik Samla data Dra lärdomar Definiera indikatorer Analysera data Kommunicera effekt

22

23 Hur?

24 Börja med vad ni vill uppnå! Vad vill vi bli ihågkomna för när det gäller faktiskt åstadkomna förändringar? Vilken långsiktig förändring vi vill se som en följd av just vårt projekt? För vem och i vilket sammanhang vill vi skapa värde? Utveckla effektlogik Samla data Dra lärdomar Definiera indikatorer Analysera data Kommunicera effekt

25 Nödvändiga förutsättningar för effekt Vilka förändringar måste ske? På vilken nivå behöver förändringarna ske? Vilken roll spelar externa intressenter? Vilka partnerskap behövs? Hur bidrar aktiviteter och initiativ? Vilka resurser behövs? Utveckla effektlogik Samla data Dra lärdomar Definiera indikatorer Analysera data Kommunicera effekt

26

27 Foto av Flickr CC BY 2.0

28

29

30 Grundläggande förändring i system eller samhälle som projektet är tänkt att bidra till på längre sikt ( 10 år) Resurser Aktiviteter Utfall Resultat Effekt

31 Vilka förutsättningar måste vara uppfyllda för att detta ska ske?

32 En konkret, mätbar förändring i beteende eller förutsättningar som möjliggjorts av projektets utfall (på kort och lång sikt) Resurser Aktiviteter Resultat Utfall Effekt

33 Vilka förutsättningar måste vara uppfyllda för att detta ska ske?

34 Konkreta, mätbara förändringar (produkter, tjänster, ramverk m.m.) som är resultat av projektets aktiviteter. Resurser Aktiviteter Resultat Utfall Effekt

35 Workshop

36 Tjänsteoperatör TSP Hemma gateway Det Det öppna öppna smarta nätet hemmet EXDIN Smarta hemmet

37 För vem och i vilket sammanhang skapar UDI-projektet värde? Behov Lösning Effekt

38 Vilka resultat, utfall och effekter kan ni identifiera i dokumentationen? Identifiera ett par som ni bedömer mycket relevanta.

39 Grundläggande förändring i system eller samhälle som projektet är tänkt att bidra till på längre sikt ( 10 år) Resurser Aktiviteter Utfall Resultat Effekt En konkret, mätbar förändring (på kort och lång sikt) i beteende eller förutsättningar som möjliggjorts av projektets resultat Resurser Aktiviteter Resultat Utfall Effekt Konkreta, mätbara förändringar (produkter, tjänster, ramverk m.m.) som är resultat av projektets aktiviteter. Resurser Aktiviteter Resultat Utfall Effekt

40 Är vi på rätt väg? När är vi framme? Utveckla effektlogik Samla data Dra lärdomar Definiera indikatorer Analysera data Kommunicera effekt

41 Lärprocess Utveckla effektlogik Samla data Dra lärdomar Definiera indikatorer Analysera data Kommunicera effekt

42 Hur kan ni veta om ni är på väg mot avsedda effekter? Indikatorer som möjliggör att utvärdera och analysera effektlogiken / förändringsteorin. Indikatorer bör vara : S pecifika M ätbara A ccepterade (assignable) /uppnåeliga R elevanta T idssatta Praktiska att samla in Kvantitativa Utveckla effektlogik Samla data Dra lärdomar Definiera indikatorer Analysera data Kommunicera effekt

43 Insamling av data Vilka data ska samlas in? Hur ska de samlas in? Vem samlar in dem? När ska de samlas in? Vad ska göras med dem? Utveckla effektlogik Samla data Dra lärdomar Definiera indikatorer Analysera data 43 Kommunicera effekt

44 Insamlingsmetoder Intervjuer Fokusgrupper Enkäter Observationer Litteraturgenomgångar Andra Praktiskt, resurseffektivt Utveckla effektlogik Samla data Dra lärdomar Definiera indikatorer Analysera data Kommunicera effekt

45 Att tänka på Glöm inte bort för vem och i vilket sammanhang värdeskapandet ska ske Låt det inte bli för krångligt Samla in data för att använda! Utveckla effektlogik Samla data Dra lärdomar Definiera indikatorer Analysera data Kommunicera effekt

46

47 Workshop

48 Välj ett resultat, ett utfall eller en effekt (prioritera): Vilka indikatorer skulle kunna användas för att mäta detta/dessa?

49 Reflektion

50 Tjänsteoperatör TSP Hemma gateway Det Det öppna öppna smarta nätet hemmet EXDIN Smarta hemmet

51 Vilka är dina viktigaste insikter från detta pass i relation till arbetet med effektlogik i ditt eget UDI-projekt?

52

53 Tack för oss! Åsa Minoz Tel Sara Modig Tel Praktiska visionärer som banar väg för nya modeller för samhällsutveckling