Utvärdera för att lära och utveckla

Transkript

1 SAMÖ 2016 Utvärdera för att lära och utveckla Dp Utvärdering Sofie Ivarsson Camilla Trané Inga-Lill Söderkvist

2 Vad är utvärdering? En aktivitet som kännetecknas av: systematisk och noggrann insamling av data, beskrivning och bedömning på ett grundligt, systematiskt och genomtänkt sätt och användning.

3 Varför utvärdera? ett övergripande syfte med all utvärdering är att främja lärande, visa vilka styrkor och svagheter som finns med ett visst handlande och hur processer kan förbättras, utvärdering av offentliga verksamheter ytterst är till för att förbättra samhället, söka förklaringar till varför vissa resultat uppstår. Utvärderandets konst Ove Karlsson Vestman SAMÖ 2016

4 Övningar - en trygg miljö! Övningar är en trygg miljö: ok göra fel, pröva olika lösningar, utvecklas och lära. Skillnad utvärdering verklig händelse och övning - komma in i slutet eller vara med från början. SAMÖ 2016

5 Utvecklings- och lärandeprocess hela vägen En bra och kvalitativ utvärdering är beroende av planeringsprocessen. Utvärderingsprocessen är med hela tiden genom planeringsprocessen. SAMÖ 2016 slutar när lärdomar och erfarenheter är omhändertagna i verksamheterna och överlämnade till SAMÖ Fokus 2018.

6 SAMÖ 2016

7 Övergripande mål Övande aktörer har genom SAMÖ 2016 visat förmåga till ledning, samverkan och kommunikation vid hantering av samhällsstörningar. Därigenom har de visat att de agerar samordnat utifrån en aktörsgemenensam inriktning för att värna samhällets skyddsvärden.

8 Hur gick det? Målbaserad utvärdering/måluppfyllelseanalys. Har målen uppnåtts? I vilken grad? Jämföra observationer av övningens resultat med övningens mål. Målarbetet är centralt!

9 Syfte med utvärderingen Utvärderingsresultatet av SAMÖ 2016 syftar till att utgöra ett underlag som bidrar till och främjar fortsatt utveckling av samhällets krisberedskap.

10 Erfarenhetshantering Övningsutvärdering Utvecklingsområden Åtgärdsplaner SAMÖ 2016

11 Den aktörsgemensamma utvärderingen av SAMÖ 2016 Mål och indikatorer Metod och underlag Utvecklingsområden Datainsamling Resultat Åtgärdsplaner SAMÖ 2016

12 Allting kretsar kring målen Målen utgör grunden till hela övningen. Vilka är målen?

13 Det övergripande målet Aktörsgemensamma mål med målbeskrivning Aktörsinterna mål Aktörsgemensamma indikatorer Aktörsinterna indikatorer Aktörsgemensamma bedömningsfrågor Aktörsinterna bedömningsfrågor

14 Vad är en indikator? Att använda en indikator innebär att mäta något smått som kan representera något stort (Ekonomistyrningsverket) Troligen blir det en kombination av kvalitativa och kvantitativa indikatorer.

15 Avgränsningar Projektet ansvarar för att utvärdera de aktörsgemensamma målen, medan den enskilda aktören ansvarar för att utvärdera de aktörsinterna målen. Aktören ansvarar även för att bistå projektet med underlag till utvärdering av de gemensamma målen.

16 Den närmsta tiden allt fokus på mål Mål och indikatorer April-december 2015 (Pk1 och Pk2 viktiga för målarbete). Workshop målarbete september 2015 (tillsammans med Dp Scenario). Workshop kriterier för bedömning mars 2016.

17 Lokal utvärderare (LU) Vem är LU? En person med god kännedom om den verksamhet som ska utvärderas. Vad ska LU göra? Utvärdera aktörsinterna mål och bidra med material för utvärdering av de aktörsgemensamma målen. Var finns LU? Hos den egna aktören eller hos en annan aktör.

18 Lokal utvärderare (LU) forts. När ska LU utses? Efter Pk1 men före september. På Pk1 kommer mer stöd kring val av LU att ges. Vilka delar behöver LU medverka i? Två workshopar (en i september 2015 och en i mars 2016), Pk2 i oktober 2015, utbildning i september 2016, ÖVNINGEN! och resultatworkshop i februari 2017.

19 Systemutvärderare (SU) Stöd i bedömning av måluppfyllnad av de aktörsgemensamma övningsmålen. Utses av projektet.

20 Allmänhetsnätverket Ett slumpmässigt urval ur befolkningen som följer och bedömer kommunikationen under övningen. Värdefullt bidrag till utvärderingen. Metoden användes för första gången i SAMÖ Fokus 2014.

21 Expertnätverket Experter med olika inriktningar inom samhällsskydd och beredskap. Referensuppdrag, kvalitetssäkring och bollplank längs hela processen. Ny metod i SAMÖ 2016.

22 SAMÖ Fokus 2018 Utgångspunkt i utvärderingsresultaten från SAMÖ Ett urval av förmågor som efter SAMÖ 2016 konstaterats vara i störst behov av utveckling. Följa upp och beskriva om en förmågeutveckling har skett jämfört med SAMÖ Ställer krav på utvärdering och erfarenhetshantering i SAMÖ 2016.