SIDA 1 av 26 Slutrapport till Sida för informations- och kommunikationsarbete i Sverige år 2013-2015
SIDA 2 av 26
SIDA 3 av 26 Bromma 2016-05-13 Susanna Elmberger Avdelningen för partnerskap och innovation Sida Partnership Forum Sida Informations- och kommunikationsarbete 2013-2015 Det här är en slutrapportering av SMR:s informations- och kommunikationsarbete för 2013-2015. Rapporten ger en samlad bild och analys av resultat, strategier och metoder, samarbete och samverkan, kostnadseffektivitet, system för uppföljning samt lärdomar och förändringsprocesser. De fyra kommunikationsinsatser som SMR har förmedlat Sidastöd till under perioden har tydligt relaterat till Sidas mål för anslaget. I ansökan för 2013 2015 beskrivs ytterligare tre insatser, men dessa ströks till följd av minskningen av beviljade medel i förhållande till det ansökta beloppet. Utifrån medlemsorganisationernas mål för de insatser som har fått stöd har SMR satt gemensamma mål och det är dessa som SMR rapporterar mot i slutrapporten. Resultaten bygger i sin tur på de resultat som uppnåtts i respektive insats. Det finns slutrapporter för var och en av dessa insatser, vilka SMR har bedömt och godkänt. Hör gärna av er om det finns behov av förtydliganden eller kompletteringar. Vänliga hälsningar Anders Malmstigen Generalsekreterare Hanna Mellergård t.f. enhetsansvarig för internationellt utvecklingssamarbete Svenska missionsrådet Box 14038, SE 167 14 Bromma. Besöksadress: Gustavslundsvägen 18, Alviks torg, t-bana Alvik Tel: 08-453 68 80, Fax: 08-453 68 81, E-post: info@missioncouncil.se, Webb: www.missioncouncil.se
SIDA 4 av 26
SIDA 5 av 26 Innehåll: Innehåll:... 5 Bilagor:... 5 Interna förändringsprocesser... 6 Förändringsprocesser hos SMR... 6 Förändringsprocesser hos organisationerna... 7 SMR:s mål för informations- och kommunikationsinsatser... 8 Fördelning av medel... 8 Resultat på kort sikt och måluppfyllelse... 10 Mål 1 Ökad kunskap om situationen i låginkomstländer och konfliktområden... 13 Exponering... 13 Ökad kunskap... 14 Mål 2 Ökad kunskap om utvecklingens drivkrafter och de strukturella orsaker som ligger bakom fattigdom och orättvisor... 15 Exponering... 15 Ökad kunskap... 16 Mål 3 Ökad kunskap om metoder för förändring... 16 Omvärldsreflektion, strategier och metoder... 17 Samarbete och samverka... 19 Kostnadseffektivitet och hållbara resultat... 21 SMR:s system för planering, resultatredovisning, utvärdering och riskhantering... 22 Bilagor: 1. Övergripande ekonomisk redovisning 2. Revisionsrapporter 3. Utfall informations- och kommunikationsinsatser 2013-2015 4. SMR:s 100 % stöd: vidareförmedlingsbidrag 5. Lista återbetalningar 6. Slutrapporterade informations- och kommunikationsinsatser 7. Utvärdering av SMR:s informations- och kommunikationsanslag 2013 2015 8. SMR:s Management Response på Utvärdering av SMR:s informationsoch kommunikationsanslag 2013 2015
SIDA 6 av 26 Interna förändringsprocesser Under denna rubrik redogörs kort för ett urval av viktiga interna förändringsprocesser inom SMR under avtalsperioden. Vidare gör vi en kort beskrivning av viktiga förändringsprocesser relaterat till informations- och kommunikationsarbetet hos de organisationer som fått del av anslaget under perioden. Förändringsprocesser hos SMR Under perioden blev SMR strategisk partner till Sida HUM och ett samarbetsavtal om stöd till humanitärt arbete tecknades för perioden 2014-2016, vilket medfört utökat antal tjänster på kansliet. Arbetet organiseras inom SMR:s humanitära team där ADRA, Erikshjälpen, IAS och PMU ingår, samt från 2016 även Sveriges kristna råd (SKR). Under 2014 blev Läkarmissionen medlem i SMR, samtidigt som Individuell Människohjälp sa upp sitt medlemskap. I samband med det höll SMR och Individuell Människohjälp ett utvärderingsseminarium om samarbetet. Under 2014 antogs en policy för rättighetsperspektivet, som ett resultat av en längre utvärderings- och lärandeprocess. Denna policy har också varit utgångspunkten för framtagandet av en webbaserad verktygslåda som nu används. Under hösten 2015 har SMR även börjat revidera och uppdatera policyer för jämställdhet, kommunikation, miljö och antikorruption. Beslut om jämställdhet, kommunikation, klimat och miljö policy togs under våren 2016. Under 2015 har SMR arbetat med att utveckla den strategiska kommunikationen. Bland annat har vi gjort en webbanalys i syfte att utveckla en ny webb för SMR och bildat ett kommunikationsteam, KOM-gruppen, som coachar kolleger och ledning i kommunikationsfrågor. SMR är nu på väg in i en ny strategi- och verksamhetsperiod för åren 2017-2021, vilket har präglat organisationen under slutet av perioden. Som utgångspunkt slutfördes under 2014 ett arbete med att revidera SMR:s värdegrund och under hösten 2015 har en ny strategisk verksamhetsinriktning tagits fram, vilken antogs av SMR:s medlemmar på rådsmötet i början av februari 2016. Utifrån värdegrunden håller SMR nu på att ta fram en ny verksamhetsplan. När det gäller informations- och kommunikationsanslaget så genomfördes en extern utvärdering av anslaget under sommaren-hösten 2015. Utifrån de rekommendationer som lyftes fram i den håller SMR nu på att se över riktlinjer och mål för anslaget. Ambitionen är att tydliggöra den gemensamma programlogiken samt att skapa ökade möjligheter för en bredare grupp av medlemmar att få del av anslaget. Inför ansökan 2013 2015 ansökte fyra av SMR:s medlemsorganisationer om stöd från informations- och kommunikationsanslaget till totalt sju insatser. På grund
SIDA 7 av 26 av att SMR fick ett betydligt lägre anslag än vad som ansökts om så blev det nödvändigt att stryka några insatser. SMR fortsätter dock att ha en ambition om att anslaget ska komma fler medlemmar till del och har fört samtal med flera medlemmar om vad som kan göras för att få en ökad bredd i ansökande organisationer. 2014 blev Individuell Människohjälp ny ramorganisation till Sida. De har därmed fått möjlighet att ansöka om stöd för sin verksamhet direkt från Sida, istället för som tidigare via SMR. Individuell Människohjälp har fortsatt att vara delaktiga i insatsen Rafiki-världen är full av nya kompisar, men formell samarbetspartner till SMR är sedan 2014 Erikhjälpen. SMR har tagit fram reviderade ansökans- och rapporteringsmallar för informations- och kommunikationsarbete, vilka har använts och utvärderats under perioden. Mallarna har överlag fungerat bra och de synpunkter som kommit in har varit övervägande positiva. De rapporter som har kommit in under perioden har generellt sett hållit högre kvalitet än tidigare, vilket tyder på att mallarna har fungerat bra. Förändringsprocesser hos organisationerna I rapporten ingår fyra insatser, fördelade på tre organisationer; Erikshjälpen, Kristna Fredsrörelsen (KrF) och Sveriges kristna råd (SKR). Samtliga organisationer har generellt visat på god måluppfyllelse och god förmåga till reflektion, lärande och resultatredovisning under perioden. Att utveckla medlemsorganisationernas resultatuppföljning har varit ett prioriterat område för SMR de senaste åren och det är positivt att det nu fått genomslag i insatserna. Erikshjälpen har varit i en stark tillväxt- och konsolideringsprocess de senaste åren, vilket även påverkat deras kommunikationsarbete. Under 2015 arbetade organisationen bland annat fram en bildpolicy och en kriskommunikationsplan. Under 2014 tog de även fram en child participation position paper för att tydliggöra hur de definierar barns delaktighet och vilka riktlinjer som gäller för hur de tillämpar policyn. Samarbetet med Individuell Människohjälp om insatsen Rafiki världen är full av nya kompisar har fortsatt under ledning av Erikshjälpen, trots att Individuell Människohjälp inte längre är medlem i SMR. Kristna Fredsrörelsen uppdaterade sin kommunikationspolicy under 2014 och tog i december 2014 fram en kommunikationsstrategi för organisationens övergripande kommunikationsarbete. Sveriges kristna råd uppdaterade sin kommunikationspolicy under 2013 och har börjat använda olika kommunikationsverktyg för distribution av exempelvis pressmeddelanden och nyhetsbrev. De har även producerat en ny tidning som berättar om alla olika verksamhetsområden. Den kommer ut vartannat år i samband med årsmötet och bladas in i olika tidningar.
SIDA 8 av 26 SMR:s mål för informations- och kommunikationsinsatser SMR:s kansli och medlemsorganisationer verkar för att bidra till individers, organisationers och samhällens utveckling. SMR:s förändringsteori bygger på förståelsen att dessa tre delar är interrelaterade och påverkar varandra ömsesidigt. För SMR utgör det civila samhället den strategiska utgångspunkten för utvecklings- och kommunikationsarbete, och samarbetsrelationerna mellan civilsamhällets organisationer i Sverige och deras samarbetsorganisationer runt om i världen ses som en strategisk bas för ett gemensamt globalt förändringsarbete. I en värld där orsakssambanden är globala hänger arbetet för ökad medvetenhet om globala rättvisefrågor hos den svenska allmänheten tätt samman med arbetet för förändring som bedrivs av organisationer i utvecklingsländer och i konfliktområden. SMR:s övergripande mål för informations- och kommunikationsarbetet 2013 2015 var att bidra till: Ökad kunskap hos den svenska allmänheten om situationen i utvecklingsländer och utvecklingens drivkrafter, samt skapa utrymme för engagemang och förändringskraft. För att uppnå detta har tre delmål formulerats. Insatserna ska ge svensk allmänhet: 1. Ökad kunskap om situationen i låginkomstländer och konfliktområden. 2. Ökad kunskap om utvecklingens drivkrafter och de strukturella orsaker som ligger bakom fattigdom och orättvisor. 3. Ökad kunskap hos svensk allmänhet om metoder för förändring. Med svensk allmänhet avses de delar av allmänheten som SMR:s kansli och SMR:s medlemsorganisationer har specifika förutsättningar att nå. I den här rapporten redovisas i vilken grad de informations- och kommunikationsinsatser som SMR förmedlat Sidabidrag till har uppfyllt sina mål. Dessutom gör vi en övergripande presentation över vad insatserna har lett till på kort sikt, det vill säga inom ramen för den tid som insatsen har genomförts. Redovisningen bygger på samtliga slutrapporter för 2013 2015, samt kompletterande underlag i form av utvärderingar och analyser som SMR har fått in från organisationerna. Fördelning av medel Under 2013 2015 har SMR förmedlat stöd till fyra insatser fördelade på tre organisationer. SMR fick beviljat ett lägre belopp än det vi hade ansökt om för
SIDA 9 av 26 perioden. SMR sökte om totalt 20 038 465 SEK och tilldelades 12 000 000 SEK, inklusive administrationsbidrag om högst 811 200 SEK och vidareförmedlingsuppdrag om högst 1050 000 SEK. Denna betydande neddragning hanterades dels genom att tre insatser ströks (Kristna Fredsrörelsens insats 13:804, Lepramissionens insats 13:806 och SMR:s insats 13:899) och dels genom att övriga insatser gjorde neddragning i respektive budget. Detta har inneburit att organisationerna till viss del fick dra ner på ambitionsnivån, både vad gäller kvantitet och kvalitet. Neddragningarna gjordes utifrån de principer som SMR:s utvecklinsutskott hade fattat beslut om i samband med att ansökan skickades in till Sida. De insatser som fått stöd under perioden 2013 2015 är: Rafiki världen är full av nya kompisar, som genomförs av Erikshjälpen och Individuell Mäniskohjälp. Insatsens metodik bygger på att inom skolans verksamhet ge barn i Sverige möjlighet att möta barn från syd. I mötena med barn i Sverige berättar insatsens informatörer om barn i syd som de har mött och lärt känna. Berättelserna förmedlas både genom klassrumsbesök, direktkontakt via Skype mellan barn i syd och i Sverige, samt genom tryckt material och webb. Fred genom ickevåld, som genomförs av Kristna Fredsrörelsen (KrF). Genom insatsen vill KrF öka kunskapen om situationen i konfliktländer men också tydligt visa hur ickevåldsmetoder kan vara framgångsrika för att nå demokratiutveckling och hållbar fred. Detta genom exempel från de länder där KrF är verksamma (Sydsudan, Västsahara, Palestina, Israel, Guatemala, Mexiko och Colombia). Kyrkornas globala vecka, som genomförs av Sveriges kristna råd (SKR) och SMR. Insatsen innebär att kyrkor och kristna organisationer över hela landet får stöd att uppmärksamma globala rättvisefrågor under en vecka i november. Hundratals aktiviteter arrangeras lokalt, med målgrupper som är aktiva i SKR:s medlemskyrkor och SMR:s medlemsorganisationer. SKR:s informationsprogram om Israel och Palestina, som genomförs av SKR. Det övergripande målet för insatsen är att öka kunskapen bland den svenska allmänheten om Israel och Palestinakonflikten ur ett folkrättsligt perspektiv. Medföljare från SKR:s ekumeniska följeslagarprogram spelar en mycket viktig roll i projektet som vidareförmedlare av kunskap. SKR:s projekt Ekumeniska följeslagarprogrammet i Palestina och Israel startades 2002 och stöds från och med 2016 med medel från SMR:s humanitära anslag från Sida. Insatsernas innehåll bygger på organisationernas egna prioriteringar inom SMR:s övergripande mål för informations- och kommunikationsarbetet 2013 2015. Innehållet speglar organisationernas identiteter och metoder på ett tydligt sätt och kopplas i flera fall även direkt till organisationernas arbete med utvecklingsarbete i syd.
SIDA 10 av 26 Fördelning 2013-2015 per organisation (exklusive administrationsbidrag) Erikshjälpen Rafiki världen är full av nya kompisar Totalt Erikshjälpen: 2 816 172 2 816 172 28 % Kristna Fredsrörelsen Fred genom ickevåld Totalt KrF: 3 141 337 3 141 337 31 % Sveriges kristna råd Kyrkornas globala vecka SKR:s informationsprogram om Israel och Palestina Totalt SKR: 2 747 014 1 274 400 4 021 414 28 % 13 % 41 % Totalt: 9 978 923 100 % Resultat på kort sikt och måluppfyllelse I detta avsnitt görs en bedömning av resultaten och graden av måluppfyllelse av informations- och kommunikationsinsatserna på kort sikt, d.v.s. inom ramen för den tid som en insats har genomförts. SMR har granskat och bedömt organisationernas rapporter och egna bedömningar av måluppfyllelse. Måluppfyllelsen är överlag god eller mycket god. SMR:s bedömning av insatsernas måluppfyllelse överensstämmer i hög grad med organisationernas egna bedömningar. SMR gör bedömningar utifrån organisationernas del-och slutrapporter samt organisationernas utvärderingar och management response. Vi lägger även stor vikt vid den externa utvärdering som Veda Konsult genomförde 2015. Utvärderingen bekräftar organisationernas resultatredovisning, men bidrar även med analys på ett djupare plan. Informations- och kommunikationsinsatserna har utgått från rättighetsperspektivet och har i huvudsak behandlat frågor som rör konflikt, demokrati, organisering, globala strukturer och barnkonventionen. Stort fokus har legat på det första och andra delmålet. Det är endast Fred genom ickevåld och SKR:s Informationsprogram om Israel och Palestina som har arbetat med det tredje delmålet. Liksom föregående år har SMR valt att mäta mål ett och två utifrån två aspekter: exponering och ökad kunskap. Många personer som tar del av information, när de exempelvis skummar igenom en tidningsartikel eller halvlyssnar på ett
SIDA 11 av 26 radioinslag, tar inte i någon större utsträckning till sig den. De personerna ökar sannolikt inte sin kunskap på något djupare plan, men har fått viss ny kunskap och en grund för framtida informationsinhämtning. För att kunna följa upp de två olika aspekterna av målet har SMR bedömt olika insatsers aktiviteter och därefter beräknat hur många personer som exponerats respektive ökat sin kunskap mer konkret. Det är svårt att påvisa exakt effekt, därför är måluppfyllelsen till viss grad en uppskattning. Nedan följer en analys av hur väl SMR och organisationerna har uppnått de två aspekterna av målet. SMR har precis som tidigare år valt att utgå från en exponeringsgrad på en av tre, d.v.s. vi räknar med att en av tre av de som nås av respektive tidning och radioprogram har läst våra artiklar eller lyssnat på just våra inslag. Denna exponeringsgrad togs fram i ett seminarium med kommunikationsbyrån Gullers Grupp. I siffran för exponering har upplagan för varje tidning som har publicerat en artikel räknats in endast en gång per år, även om tidningen har publicerat flera artiklar under året. Det finns troligen viss överlappning i siffrorna, d.v.s. att samma person har exponerats för samma information flera gånger, men via olika kanaler. För att en person ska uppnå ökad kunskap krävs en betydligt större insats än det gör att exponera en person för information via media. Vi bedömer att målgruppen endast har fått ökad kunskap om de har deltagit i seminarier och föreläsningar eller tagit del av reserapporter från fält, utställningar och mer omfattande tryckt eller webbaserat material.
SIDA 12 av 26 I figuren nedan visas det övergripande målet, de tre delmålen och det sammantagna resultat som har uppnåtts under perioden 2013 2015. Resultaten redovisas både i absoluta tal och i procent jämfört med förväntat resultat. SMR:s övergripande mål Delmål Resultat Ökad kunskap om situationen i låginkomstländer och konfliktområden Exponering Minst 5 004 132 personer har exponerats för information om situationen i låginkomstländer och konfliktländer. 309 % jämfört med förväntat resultat. Ökad kunskap Minst 2 61 364 personer har fått ökad kunskap om situationen i låginkomstländer och konfliktländer. 196 % jämfört med förväntat resultat. Ökad kunskap hos den svenska allmänheten om situationen i utvecklingsländer och utvecklingens drivkrafter, samt skapa utrymme för engagemang och förändringskraft. Ökad kunskap om utvecklingens drivkrafter och de strukturella orsaker som ligger bakom fattigdom och orättvisor Exponering Minst 4 359 132 personer har exponerats för information om utvecklingens drivkrafter och de strukturella orsaker som ligger bakom fattigdom och orättvisor. 325 % jämfört med förväntat resultat Ökad kunskap Minst 100 955 personer har fått ökad kunskap om utvecklingens drivkrafter och de strukturella orsaker som ligger bakom fattigdom och orättvisor. 90 % jämfört med förväntat resultat. Ökad kunskap om metoder för förändring Ökad kunskap Cirka 8 855 personer har fått ökad kunskap om metoder för förändring. 124 % jämfört med förväntat resultat. Siffrorna för exponering är väldigt höga i relation till Sveriges befolkning. Vi bedömer att minst 5 004 132 personer har exponerats för information inom ramen för de olika insatserna. Eftersom det med stor sannolikhet förekommer överlappning i statistiken är det inte troligt att det här handlar om 5 004 132 unika personer. Men statistiken visar ändå på insatsernas goda exponeringsgrad. Nedan följer mer ingående information om måluppfyllelse per mål.
SIDA 13 av 26 Mål 1 Ökad kunskap om situationen i låginkomstländer och konfliktområden Tillsammans bedöms de fyra insatserna har god måluppfyllelse när det gäller mål 1. De har lyckats särskilt väl med exponering. Nedan redovisar vi resultaten mer i detalj under de två kategorierna exponering och ökad kunskap. Exponering De insatser som SMR har förmedlat informations- och kommunikationsanslag till under perioden har lyckats långt över förväntan vad gäller att exponera målgruppen för information om situationen i låginkomstländer och konfliktländer. De tre insatser som har arbetat med exponering i relation till detta mål har totalt nått ut till 5 004 132 personer. Denna exponering är drygt tre gånger så stor som det förväntade resultatet. Det är framförallt det mycket starka resultatet som har uppnåtts inom ramen för SKR:s Informationsprogram om Israel och Palestina som ligger bakom denna ökning, där de har exponerat totalt 3 359 726 personer. Även KrF:s insats Fred genom ickevåld med totalt 994 000 exponerade personer och SKR:s och SMR:s insats Kyrkornas globala vecka med totalt 650 406 exponerade personer ligger högt över förväntat resultat. Organisationerna har framförallt nått dessa personer genom media: tidningar, radio, tv och sociala medier. Sociala medier har använts mer och mer under perioden. En organisation beskriver att Facebook nu har blivit ett av de viktigaste kommunikationsverktygen. SKR:s båda insatser har egna Twitterkonton och en av insatserna har även en Facebooksida, medan KrF når ut genom organisationens konton och sidor i sociala medier. Kyrkornas globala vecka har årligen över 30 000 sidvisningar på sin hemsida. SMR bedömer att tidningar och radio även i fortsättningen är de viktigaste kanalerna för de här insatserna, sociala medier har framförallt styrt personer till artiklar i tidningar och inslag i radio. Tidnings- och radioinslagen har till exempel varit interjuver med representanter för organisationer eller samarbetsorganisationer, gäster eller debattartiklar och krönikor. SKR:s Informationsprogram om Israel och Palestina har varit mycket framgångsrikt i att exponera målgruppen. Målet var att exponera 300 000 personer per år, men de nådde i genomsnitt istället 1 119 908 personer per år. Insatsen nådde ut genom lokala och rikstäckande tidningar, radio, lokal TV, sin egen hemsida och sina egna informationsfoldrar. Programmet använder även Twitter mer och mer, men antalet följare är relativt lågt med tanke på potentialen i intresset för följeslagarprogrammet. Att insatsen har lyckats exponera så många beror bland annat på att SKR har lyckats väl i att utnyttja de tillfällen som har getts för att öka exponeringen. Det rör sig både om händelser i Israel och Palestina, till exempel hot om demolering av den palestinska byn Susiya, och händelser i Sverige, till exempel regeringens erkännande av Palestina.
SIDA 14 av 26 Att Kyrkornas globala vecka nått nästan dubbelt så många som planerat bedöms i den externa utvärdering, som gjordes 2015 inom ramen för insatsen, till stor del bero på det stora genomslaget för den radiogudstjänst i Sveriges radios P1 som hade Kyrkornas globala veckas tema. Men inom ramen för insatsen har insatsen även nått ut genom en rad andra tidningar och medier. Under perioden 2013 2015 skickades 11 pressmeddelanden ut. De pressmeddelanden som skickades ut 2015 nådde 485 personer, främst journalister, vilket är dubbelt så många som 2013. Debattartiklar i nationell, regional och lokal press har varit ett viktigt medel för att nå ut, detta har gjorts kontinuerligt i samband med genomförandet av Kyrkornas globala vecka. För att förenkla för anställda och engagerade i församlingar att nå ut i media i samband med Kyrkornas globala vecka har SKR tagit fram en insändar- och debattartikelmall och en mall för pressmeddelanden. En förklaring till att resultatet är högre än förväntat kan vara att insatserna har stärkt sina system för att mäta exponering. Med ett resultat som är så mycket högre än förväntat bör man inför framtiden ställa frågan om målen är för lågt satta. Ökad kunskap SMR bedömer att de fyra insatserna sammantaget har en mycket god måluppfyllelse, betydligt fler personer i målgruppen än förväntat har fått ökad kunskap om situationen i låginkomstländer och i konfliktländer. Det är framförallt Rafiki världen är full av nya kompisar som drar upp resultatet genom att ge ökad kunskap till 47 909 barn, men även de andra insatserna har bidragit till att fler än förväntat har fått ökad kunskap. Ökningen för Rafiki världen är full av nya kompisars beror på att betydligt fler barn än planerat har använt tidningen och webbsidan. Statistik över användningen av webbsidan sköts kontinuerligt av Loopia AB. Att användningen verkligen leder till ökad kunskap verifieras av en extern utvärdering av webbsidan där man bl.a. har intervjuat pedagoger. Utvärderingen lyfter att webbsidan bidrar väsentligt till ökad kunskap om barnrättigheter, ger pedagoger inspiration för vidare arbete med utvecklingsfrågor och är relevant i förhållande till läroplanen. SMR bedömer att SKR inom ramen för Kyrkornas globala vecka har ökat kunskapen hos dem som deltar i aktiviteter under veckan. SKR, och den externa utvärdering som genomförts inom ramen för insatsen, bedömer dock att ytterligare totalt 30 000 45 000 personer i målgruppen fått ökad kunskap genom media. Denna beräkning bygger på att var fjärde av de som exponerats för en artikel antas ha fått höjd kunskap. SMR har dock valt att inte räkna med dessa personer i den samlade resultatredovisningen då de inte ingick i ansökans resultatmatris. Enligt samma externa utvärdering uppskattas antalet personer som deltar i de olika aktiviteterna under Kyrkornas globala vecka vara mellan 15 000 25 000 årligen. SMR har räknat med 20 000 personer per år. Antalet besökare är därmed lägre än förväntat. Aktiviteternas innehåll varierar, vanligast är gudstjänst med tema, ofta kombinerat med en diskussion, tipsrunda eller
SIDA 15 av 26 liknande. Det är även vanligt med föredrag eller diskussioner som genomförs utanför gudstjänsten. Dessa två typer av aktiviteter dominerar, vid sidan av dessa är variationen stor. Kristna Fredsrörelsen har arbetat mycket framgångsrikt med vidareförmedlare inom ramen för Fred genom ickevåld, framförallt när det gäller att bidra till ökad kunskap i målgruppen. Totalt har KrF:s vidareförmedlare genomfört 248 workshops och ökat kunskapen hos 6 290 personer. Utvärdering av dessa visar att de som deltagit i utbildningarna har fått ökade kunskaper. SKR:s Informationsprogram om Israel och Palestina har ökat kunskapen både hos den svenska allmänheten och i de strategiska målgrupperna; politiker, journalister, statliga tjänstemän och kyrkoledare. Dessa grupper påverkar även varandra. Kunskapsökningen i de strategiska grupperna sker genom föreläsningar, delegationsbesök, läsande av reserapporter och nyhetsbrev. För att nå utvecklingsmålet är samspelet mellan dessa grupper avgörande. Ökad kunskap hos allmänheten ställer krav på politiker och journalister att öka sin kunskap och politiska beslut eller utspel ökar allmänhetens intresse för att söka kunskap. Mål 2 Ökad kunskap om utvecklingens drivkrafter och de strukturella orsaker som ligger bakom fattigdom och orättvisor Tre insatser arbetar mot detta mål: SKR:s Informationsprogram om Israel och Palestina, Fred genom ickevåld och Kyrkornas globala vecka. Även för detta mål mäts och redovisas resultat utifrån aspekterna exponering och ökad kunskap. Exponering Inom ramen för insatserna SKR:s Informationsprogram om Israel och Palestina samt Fred genom ickevåld har organisationerna informerat om strukturella orsaker som ligger bakom fattigdom och orättvisor samtidigt som de har informerat om situationen i låginkomstländer och konfliktområden. Därmed är statistiken för deras bidrag till uppfyllelse av mål 1 även giltig för deras bidrag till uppfyllelsen av mål 2. Dessa insatser har alltså lyckats mycket väl med att exponera målgruppen för information om utvecklingens drivkrafter och de strukturella orsaker som ligger bakom fattigdom och orättvisor. Tillsammans exponerar de tre insatserna drygt tre gånger fler än beräknat för information om utvecklingens drivkrafter och de strukturella orsaker som ligger bakom fattigdom och orättvisor, totalt 4 359 132 personer. Detta goda resultat beror framförallt på det mycket starka resultat som har uppnåtts inom ramen för SKR:s Informationsprogram om Israel och Palestina, totalt 3 359 726 personer. Även inom insatsen Fred genom ickevåld har man lyckats mycket väl med exponering av insatsens budskap, 994 000 personer, vilket är nästan dubbelt så mycket som målet på 434 600. För att mäta att de som har exponerats verkligen har nåtts av budskapet har KrF tagit fram ett ambitiöst verktyg som värderar i vilken grad enskilda publiceringar kommunicerar budskapet. Framförallt har
SIDA 16 av 26 olika radioinslag i allt från P1 till lokalradio exponerat många personer för insatsens budskap. Det är tydligt att Sveriges Radio är det viktigaste mediet för organisationerna när de vill nå ut med sitt budskap till många. Tv har ännu högre potential, men insatserna har inte lyckats få in sina budskap i tv i någon större utsträckning. Även genom sociala medier finns potential att nå en miljonpublik. Ökad kunskap Fred genom ickevåld har ökat kunskapen hos 6 290 personer och SKR:s Informationsprogram om Israel och Palestina har ökat kunskapen hos 34 665 personer, båda överstiger därmed förväntade resultat. Kyrkornas globala vecka ökade kunskapen hos 60 000 personer och nådde därmed inte riktigt fram till sitt mål, vilket påverkar det sammanvägda resultatet till att landa något under förväntan. En mycket stor del av de som deltar i en aktivitet på Kyrkornas globala vecka får ökad kunskap. Enligt en tidigare enkätundersökning uppger 88 procent av deltagarna att de har fått ökad kunskap. För att nå det uppsatta målet på totalt 26 000 personer per år krävdes att det var i genomsnitt 65 deltagare vid varje arrangemang och att det genomfördes 400 arrangemang under veckan. De resultat som redovisas är att Kyrkornas globala vecka har haft 15 000 25 000 deltagare per år. I resultatredovisningen för denna slutrapport har SMR valt medelvärdet, 20 000 besökare. Anledningen till den relativt stora osäkerheten i beräkningen av antalet deltagare är att SKR inte har bedömt att det är rimligt att begära in och handlägga cirka 400 aktivitetsrapporter och deltagarlistor från arrangörer. SKR:s externa utvärdering har, utifrån 58 interjuver, flera förslag på hur man kan få fler deltagare, bl.a. genom stöd till församlingar för att stärka marknadsföringen på lokal nivå. Mål 3 Ökad kunskap om metoder för förändring Målet om ökad kunskap om metoder för förändring mäts endast utifrån ökad kunskap eftersom insatserna inte har fokuserat på att sprida information kring metoder via media och exponering därmed inte är relevant. Inom ramen för insatsen Fred genom ickevåld har KrF ökat kunskapen hos 6 290 personer, ett något högre resultat än förväntat. Genom Informationsprogram om Israel och Palestina har SKR ökat kunskapen hos 2 484 personer, vilket är betydligt över förväntat resultat. Inom ramen för Fred genom ickevåld har KrF försökt öka kunskapen på två nivåer: normal kunskap och fördjupad kunskap. De personer som har fått fördjupad kunskap är de som gått längre utbildningar som arrangerats inom ramen för insatsen. I KrF:s uppföljning av sin baslinjeundersökning syns tydligt att deltagarna i längre utbildningar har fått fördjupad kunskap om metoder för förändring. I skriftliga utvärderingar finns även citat som styrker detta. Övriga
SIDA 17 av 26 personer som fått kunskap har deltagit i någon av de 248 workshops som KrF har genomfört under insatsperioden. 74 workshops genomfördes i kyrkor och församlingar och har främst nått människor som är aktiva i församlingar. Övriga workshops har genomförts i andra sammanhang, exempelvis skolor, kulturföreningar och i relation till FN-dagen och har även nått andra delar av den svenska allmänheten. Inom ramen för SKR:s Informationsprogram om Israel och Palestina har SKR ökat kunskapen hos målgruppen genom att arrangera föreläsningar, delegationsresor och genom att personer i målgruppen har tagit emot och läst reserapporter från följeslagarna. Följeslagarnas reserapporter bedöms som mest effektiva för att bidra till ökad kunskap om metoder för förändring. Under perioden var 78 personer ekumeniska följeslagare i Israel och Palestina. I reserapporterna finns både saklig information och det personliga tilltalet, vilket gör att det är lättare att ta till sig. En av dessa reserapporter lästes upp nästan i sin helhet i Sveriges riksdag av en ledamot av utrikesutskottet under en debatt om Palestinas status 2013. SMR bedömer att den höga måluppfyllelsen inte beror på en enskild faktor utan är resultatet av ett långsiktigt arbete, välfungerande metoder, engagerade följeslagare, välfungerande projektledning och i viss mån ökat intresse för Palestina efter erkännandet 2014. Omvärldsreflektion, strategier och metoder Syftet med det här avsnittet är att bedöma om organisationerna har en god omvärldsförståelse och kan sätta in sina insatser i sitt sammanhang, samt att bedöma organisationernas val av metoder och strategier för att nå ut. Organisationerna bakom insatserna visar generellt på en god omvärldsförståelse och har gjort en omvärldsanalys med ett resonemang kring hur deras insats passar in i kontexten. Utifrån Rafiki världen är full av nya kompisars huvudbudskap om alla barns lika värde, blev det naturligt för insatsen att under hösten 2015 i möjligaste mån försöka svara på skolornas behov av material kring migration. Tidigare under perioden har skolorna efterfrågat stöd i hur de kan diskutera frågor kring EUmigranter. Att insatsens informatörer kan väva in dessa dagsaktuella ämnen från elevernas vardag i möten med barnen skapar en effektiv brygga mellan det lokala och det globala och kan vara en förklaring till att informatörerna upplever ett ökat intresse från pedagoger kring Rafiki världen är full av nya kompisar. SKR:s Informationsprogram om Israel och Palestina har under perioden sett en förändring i den svenska allmänhetens syn på konflikten mellan Israel och Palestina. Sveriges regerings beslut att erkänna Palestina som stat i oktober 2014 påverkade troligen insatsen på ett positivt sätt genom ett ökat intresse för information om konflikten ur ett folkrättsligt perspektiv. Inom ramen för insatsen har SKR genom hela perioden varit noga med att kontrollera sina budskap och värna sin opartiskhet. Att frågan om Palestinas status är avgjord i
SIDA 18 av 26 den svenska politiska kontexten gör den mindre partipolitik känslig, vilket kan öppna för framtida påverkansarbete kring konflikten i ett folkrättsperspektiv. Insatserna har överlag haft välfungerande strategier och metoder för att nå ut till målgruppen. Detta beror till stor del på att organisationerna har lång erfarenhet av att arbeta med sina respektive insatser och ett lärande förhållningssätt som gjort att man har tagit vara på de lärdomar som har gjorts under tidigare insatser. Erikshjälpen och IM har exempelvis i sin insats Rafiki världen är full av nya kompisar använt tidigare upparbetade relationer och sitt goda rykte inom vissa geografiska områden för att få tillgång till klassrummen. Inom ramen för Fred genom ickevåld och SKR:s Informationsprogram om Israel och Palestina har KrF och SKR bland annat använt vidareförmedlarnas egna nätverk och ingångar till målgrupperna. De har även arbetat efter upparbetade koncept som de vet fungerar, och justerat insatserna efter återkoppling från målgrupperna. I rekryteringen av vidareförmedlare vägs den sökandes nätverk ini förhållande till målgrupperna, både geografiskt och strategiskt,. Detta har gjort att KrF och SKR genom Fred genom ickevåld och SKR:s Informationsprogram om Israel och Palestina haft goda ingångar till målgrupperna och kunnat säkerställa att insatserna har haft en stor spridningseffekt. Informationsuppdraget är en integrerad del av hela uppdraget som ekumenisk följeslagare och som ickevåldsutbildare. Genom personliga erfarenheter från området, stort personligt engagemang och färsk information och kunskap om området och situationen väcker följeslagarna målgruppens intresse och når ut brett. När det gäller metoder så har organisationerna i huvudsak valt att fortsätta med metoder som har visat sig vara framgångsrika tidigare, såsom upplevelsebaserat lärande, seminarier, korta filmer, möten, riktat material och exponering i media och sociala medier. SMR anser att det är positivt att organisationerna tar vara på det lärande som har gjorts genom årens lopp och att de på så sätt har identifierat ett antal välfungerande metoder. Nackdelen med kraven på måluppfyllelse är att organisationerna blir mindre benägna att prova nya metoder. Det finns dock fortfarande en vilja hos organisationerna att utveckla insatserna. Metoder som inte tidigare har använts men som nu har börjat användas inom ramen för Fred genom ickevåld och Kyrkornas globala vecka är kampanjer och kampanjdagar, för att förtydliga budskap och underlätta för engagemang. Genom Fred genom ickevåld har KrF bland annat genomfört utåtriktade tillställningar och informationskvällar runt om i landet på Martin Luther King-dagen. Kampanjdagarna är ett bra sätt att belysa ickevåld och hur det kan leda till hållbar fred och skapa mer engagemang lokalt. Kyrkornas globala vecka gick under 2014 med i den internationella kampanjen Thursdays in Black. Genom att klä sig i svart på torsdagar och bära en knapp med ett kort budskap uppmärksammas könsrelaterat våld, som är en del i det utvecklade fredsbegreppet. Under 2015 anslöt sig Kyrkornas globala vecka till den internationella kampanjen Act Now for Climate Justice. Kampanjen leds av ACT Alliance, en koalition av mer än 140 organisationer och kyrkor som jobbar
SIDA 19 av 26 tillsammans i mer än 140 länder för att skapa positiv och hållbar förändring för fattiga och marginaliserade människor. Rafiki världen är full av nya kompisar utvecklar hela tiden nya metoder för att få fler pedagoger att använda det material som de skapar för användning i klassrummet. Det finns tryckt material, materialboxar, material på webbsidan och numera kan man även ladda ner deras material från lektion.se, vilket är Sveriges största lärarsajt. 2 800 pedagoger har laddat ner deras material därifrån. Genom användning av Skype kan informatörerna skapa direktkontakt mellan skolor i Sverige och skolor i syd, vilket varit ett uppskattat inslag i klassrumsbesöken. Den metod som mest påtagligt ger röst åt personer i syd är att bjuda in personer från organisationernas samarbetsorganisationer i syd och genomföra informationsturnéer så att de får tala inför publik och i media. Arbetet med informationsturnéer är dock relativt resurskrävande. KrF bedömer att det är intressanta och aktuella gäster som har gjort att deras medieexponering under projektet Fred genom ickevåld har nästan fördubblats jämfört med målet. Varje internationell gäst har intervjuats av tre till fem journalister. Kyrkornas globala vecka har under perioden haft flera internationella gäster, i vissa fall i samarbete med Fred genom Ickevåld. Samarbete och samverka För alla SMR:s verksamhetsområden gäller att kommunikation ska genomsyra arbetet och bidra till att vi når verksamhetsmålen. För informations- och kommunikationsarbetet som bedrivs med Sidabidrag handlar detta om att ha en tydlig kommunikation med medlemsorganisationerna som har sökt och fått medel, så att de ska ha all information och kunskap de behöver för att kunna göra effektiva insatser. Kommunikation med medlemmarna sker genom riktlinjer och mallar för anslaget, ett årligt seminarium (se mer info nedan) och genom kontinuerlig dialog med de organisationer som erhåller medel från anslaget. Detta arbetsätt uppfyller behovet av likabehandling i vidareförmedlingsuppdraget, behovet av att dela erfarenheter om olika metoder mellan organisationer och behovet av specifik dialog för varje enskild insats. Medlemmarna har gett SMR:s kansli i uppdrag att bistå med stöd för medlemsorganisationernas gemensamma kommunikations- och informationsarbete vad gäller frågor som rör religions- och övertygelsefrihet och religion och utveckling. Som en paraplyorganisation har SMR en strategisk fördel i att arbeta med de stora frågorna religions- och övertygelsefrihet och religion och utveckling, jämfört med enskilda medlemmar. För att detta ska vara möjligt har SMR haft nära samarbete med medlemsorganisationerna. SMR har också fungerat som medlemsorganisationernas gemensamma röst i relevanta nationella, internationella och ekumeniska sammanhang.
SIDA 20 av 26 Erfarenheter och lärdomar från tidigare perioder gör att SMR överväger att på ett tydligare sätt koppla ihop informations- och kommunikationsanslaget och SMR:s eget kommunikationsarbete. En översyn av denna koppling ingår i processen med att ta fram en ny kommunikationsstrategi för 2017-2021. För att uppnå samarbete och samordning mellan de tre organisationerna har SMR årligen genomfört ett seminarium. Två år (2013 och 2015) anordnades en heldag med föreläsningar, erfarenhetsutbyte och samtal om informations- och kommunikationsarbetet. Det tredje året (2014) deltog istället de tre organisationerna och SMR gemensamt i en kurs på Sida Partnership Forum. 2014 deltog en PR-firma och talade om formulering av budskap, och Sidas kommunikationschef delade tankar kring strategin och informationsanslagets ramar och begränsningar. Vid erfarenhetsutbytet 2015 delade en externt inbjuden gäst erfarenheter kring hur hans organisation, IQ, arbetat med val av kommunikationsstrategi, mål, målgrupp och budskap. 2015 genomfördes en extern effektutvärdering på uppdrag av SMR och i samverkan mellan SMR och de tre organisationerna, som var delaktiga både i planering och i uppföljning av utvärderingen. Utvärderingen innehåller rekommendationer både för de enskilda insatserna och för SMR som vidareförmedlande organisation. Rekommendationerna diskuterades tillsammans med de berörda organisationerna vid ett utvärderingsseminarium. SMR deltog även vid presentationen av Kyrkornas globala veckas utvärdering. Dialog mellan SMR och de tre organisationerna har skett kontinuerligt utifrån SMR:s vidareförmedlingsuppdrag. SMR:s kansli bereder insatser i dialog med den medlemsorganisation som genomför insatsen. SMR:s kansli föreslår avslag eller bifall till SMR:s utvecklingsutskott, som beslutar om anslaget för varje enskild insats. I utvecklingsutskottet sitter representanter för SMR:s medlemsorganisationer. Under projekttiden sker dialog kring del- och slutrapportering, organisationsbedömningar och utvärderingar. Alla insatser 2013 2015 har varit samarbetsprojekt, som bygger på samverkan eller ingår i ett större sammanhang. Organisationerna samarbetade främst med liknande organisationer, både inom och utanför SMR. De aktuella samarbetena har pågått i flera år och är reglerade i avtal. SMR bedömer att samarbetena har ett viktigt mervärde för insatserna. KrF är en relativt liten organisation och har inlett flera strategiska samarbeten för att nå ut till större grupper eller få tillgång till etablerade institutioners resurser. Genom samarbete med Studieförbundet Bilda har KrF nått ut brett. Ett tillfälligt samarbete med Svenska kyrkan har gjort att barnmaterialet Fredligt har spridits i 24 700 exemplar. SKR och SMR har ett formaliserat samarbete när det gäller insatsen Kyrkornas globala vecka och det finns en tydlig rollfördelning mellan organisationerna. Kyrkornas globala vecka och SKR:s informationsprogram om Israel och Palestina har varsin styrgrupp där alla samverkande organisationer deltar, cirka
SIDA 21 av 26 10-12 organisationer. Kyrkornas globala vecka har även ett erfarenhetsutbyte med organisationer i Finland och Norge som arrangerar liknande globala veckor i respektive land. Erikshjälpen och IM och har sedan många år ett nära samarbete inom ramen för Rafiki världen är full av nya kompisar och det finns en gemensam styrgrupp och redaktion för den insatsen. Samarbetet mellan organisationerna påverkades inte av att IM lämnade SMR 2014. Tre av insatserna kopplar samman kommunikations- och informationsarbetet med sitt utvecklingssamarbete. Den situation som man vill förändra genom sitt utvecklingssamarbete belyses i insatsen och man hämtar information och material från samarbeten i syd. Samarbetsorganisationer i syd varit med och utformat innehåll och budskap i Fred Genom Ickevåld, Rafiki världen är full av nya kompisar och SKR:s informationsprogram om Israel och Palestina. Informatörerna i Rafiki världen är full av nya kompisar har även genomfört resor till skolor i bl.a. Kenya, Uganda och Indien för att samla material, foto, filmer och berättelser som sedan används i möten med barn i Sverige. Inom ramen för Fred genom ickevåld har man årligen genomfört en eller två mindre infoturnéer med gäster från någon av KrF:s samarbetsorganisationer i syd. Kostnadseffektivitet och hållbara resultat SMR bedömer att organisationerna har använt sina kunskaper och resurser på ett bra sätt för att göra insatserna så kostnadseffektiva som möjligt. Insatserna har i stor utsträckning utgått från de relationer som organisationerna har med andra organisationer och individer för att skapa kostnadseffektivitet. Församlingsanställda och ideellt engagemang spelar en avgörande roll för Kyrkans globala vecka. Den externa utvärderingen som har gjorts inom ramen för insatsen pekar på att enskilda engagerade eldsjälar ofta är drivande för de aktiviteter som genomförs under veckan. Kyrkans globala vecka har haft relativt stora personalkostnader, men det är väl motiverat eftersom det är SKR:s anställda personal som genom sitt arbete skapat det ramverk inom vilket de ideella krafterna kan verka. Samarbetet med lokalt engagerade personer har även skapat ett starkt ägarskap för insatsen, vilket ökar hållbarheten för insatsen. Majoriteten av aktiviteterna inom insatsen har genomförts inom ramen för ett kontinuerligt församlingsarbete med internationella frågor och det finns därmed goda förutsättningar för att kunskap och engagemang lever vidare hos målgruppen. Det finns ett stort intresse för internationella frågor inom kyrkorna och därför finns det förutsättningar attfå fler att arrangera aktiviteter. Med tanke på regler om vilka personer som får närvara i skolmiljöer och praktiska förutsättningar är ideellt engagerade inte lämpliga att bedriva kontinuerligt informationsarbete inom skolvärlden, vilket är det forum Rafiki världen är full av nya kompisar använder för att sprida kunskap. Utifrån ett
SIDA 22 av 26 kostnadseffektivitetsperspektiv är det ändå en fördel att agera i skolmiljön. Planeringen förenklas i en professionell miljö och efter överenskommelse med skolledning och lärare garanteras att målgruppen deltar i planerade aktiviteter. Att insatsens mål tydligt har relaterats till skolplanen har skapat en bra grund för samarbete med pedagoger och skolledare, ett samarbete som är viktigt för att skapa hållbara resultat. Att samarbetet gett resultat syns i att skolor prenumererar på tidningen och efterfrågar återkommande besök. Informations- och kommunikationsinsatserna har i hög grad kopplats till annat internationellt arbete som görs inom organisationerna. Denna samverkan skapar flera positiva synergier mellan internationellt utvecklingssamarbete och informationsinsatser i Sverige. Genom utvecklingssamarbetet har man även fått tillgång till berättelser, och i vissa fall personliga upplevelser och erfarenheter. Genom informationsturnéer i Sverige, med organisationernas samarbetsorganisationer, stärks samarbetsorganisationerna och de får möjlighet att direkt föra ut sitt budskap i Sverige. För SKR:s och KrF:s båda medföljningsprogram är det viktigt att ha förmågan att skapa uppmärksamhet för hot och våld mot de personer eller samhällen som de medföljer och denna förmåga stärks av informationsinsatserna. I SKR:s informationsprogram om Israel och Palestina har SKR använt hemkomna följeslagare som vidareförmedlare. På så sätt har man skapat ytterligare synergieffekter mellan arbetet i fält och informationsarbetet i Sverige, samt fått tillgång till ett relativt stort antal välutbildade vidareförmedlare som har nått ut brett till låg kostnad. KrF har använt samma metod och konstaterar att de tack vare vidareförmedlarna nått ut betydligt bredare än vad de skulle ha gjort med enbart kanslipersonal. Båda organisationerna har använt nätverk och fördjupningsträffar för att upprätthålla en god kunskapsnivå bland vidareförmedlarna, uppmuntra till erfarenhetsutbyte samt hålla deras engagemang vid liv. På så sätt har man också skapat hållbara resultat och ökat kostnadseffektiviteten. För att ytterligare stärka hållbarheten har KrF även skapat en webbaserad resursbank för före detta medföljare. De många samarbeten som beskrivs under rubriken ovan har också bidragit till att skapa god kostnadseffektivitet. KrF har exempelvis kunnat hålla nere kostnader för workshops och seminarier genom att samarbeta med Studieförbundet Bilda och Härnösands Folkhögskola. SMR:s system för planering, resultatredovisning, utvärdering och riskhantering Uppföljning och resultatredovisning är ett område som SMR har fortsatt att arbeta aktivt med. Inför ansökan 2013-2015 gjordes stora förändringar av uppföljningssystemen i insatserna och vi bedömer att utfallet är gott. Insatserna har, efter olika förutsättningar, lyckats väl med att mäta resultaten av sina
SIDA 23 av 26 aktiviteter, d.v.s. exponering och ökad kunskap. Att insatserna har tagit detta kliv framåt gör att de är väl rustade för att gå vidare och mäta resultat på effektnivå. Processen att göra en gedigen utvärdering av SMR:s informations- och kommunikationsanslag inleddes med att projektgruppen tog fram en uppdragsbeskrivning, med kommentarer från berörda organisationer. Utvärderingsfirman Veda konsult valdes från sammanlagt fem anbud, då deras anbud var starkast i metod och förväntat resultat. Utvärderingens slutsatser presenterades i ett seminarium med berörda organisationer. För att säkerställa att utvärderingen blir en del i organisationernas och SMR:s kontinuerliga lärandeprocess har vi bett att få in Management Respons från samtliga organisationer. En av de tydligaste rekommendationerna i utvärderingen är att insatserna måste våga sätta upp mål för förändring hos målgruppen och sedan försöka mäta vilken effekt insatsen uppnår i relation till den önskade förändringen. Utvärderingen bekräftar att insatserna leder till ökad kunskap. Dock menar utvärderaren att det inte går att göra en utvärdering av insatsernas effekter eftersom de inte bedöms har några effektmål. Utvärderingen rekommenderar SMR att tydliggöra hela logiken bakom sina insatser. I detta resonemang ses ökad kunskap som ett första steg på informationstrappan mot att uppnå förändringar i målgruppens beteende. Det finns goda möjligheter för SMR att börja mäta resultat på effektnivå eftersom alla insatser enligt utvärderaren har ambitioner eller visioner på effektnivå, trots att det inte nämns i de senaste årens ansökningar. Av insatserna är det Rafiki världen är full av nya kompisar som har haft bäst förutsättningar för systematisk uppföljning och resultatredovisning. Insatsen har verkat i en miljö, skolan, där utvärdering av kunskap är en central del. De pedagoger insatsen har samarbetat med är experter på barns inlärning och väl lämpade att bedöma huruvida de deltagande barnen har fått ökad kunskap. Insatsens system för uppföljning innehåller bland annat insamlad statistik över antal klassrumsbesök, antal deltagande barn, antal barn som deltar i fördjupande aktiviteter och antal pedagoger som har deltagit i workshops och andra kunskapshöjande aktiviteter. Uppföljningen för att bedöma kunskapsökningen hos elever har gjorts genom intervjuer och enkäter. I vissa klasser har barnen svarat individuellt, i andra klasser har uppföljningen gjorts i grupp. Utöver detta har informatörerna intervjuat barn i fokusgrupper, för att samtala om vad barnen lärt sig. Som komplement har pedagogerna tillfrågats om hur de bedömer att elevernas kunskap har ökat genom aktiviteterna. Då webbsidan har blivit en viktig del i insatsen beslutade Erikshjälpen och IM att genomföra en extern utvärdering av den vilken var klar i februari 2016. Palm Quality Management genomförde utvärdering vars mål var att undersöka hur väl webbsidan fungerade och hur den gick att utveckla. Utvärderingen genomfördes genom interjuver med 11 lärare och genom analys av trafik till webbsidan. Utvärderingen kommer dels