Evalueringar hjälper till att förbättra resultaten
Utrikesministeriets självständiga evalueringsarbete producerar oberoende information om utvecklingspolitiska prestationer och utmaningar. Informationen från enhetens evalueringar utnyttjas i planerings-, resultatstyrnings- och kvalitetssäkringsprocesserna. Slutsatserna dokumenteras också i ett elektroniskt system, där de kan granskas parallellt med andra resultatuppgifter. De färdiga rapporterna publiceras på ministeriets webbplats och om dem ordnas offentliga presentations- och diskussionsmöten.
I evalueringarna ges rekommendationer för att öka utvecklingspolitikens och -samarbetets effektivitet. Med hjälp av dem samlar man också in kunskapsbaserat material som stöd för beslutsfattandet och påverkansarbetet. Utifrån rekommendationerna genomförs konkreta fortsatta åtgärder.
Under 2019-2021 genomfördes nio strategiska utvärderingar, cirka hundra projektutvärderingar och andra utvärderingar. Strategisk information produceras genom omfattande evalueringar som behandlar utvecklingspolitiska mål och de prioriterade områdena, stödformer, landsprogramshelheter samt riktlinjer för olika branscher. Resultaten av projektevalueringarna används för sin del för planering och styrning av projektverksamheten.
Enligt evalueringarna förenas partnernas och Finlands mål i Finlands utvecklingssamarbete
Enligt de tre senaste årens evalueringsrapporter har Finlands utvecklingssamarbete varit resultatrikt och lett till en positiv utveckling både i partnerländerna och internationellt. I verksamheten förenas partnernas och Finlands mål. Utmaningar har bland annat orsakats av begränsad personal och begränsade resurser, instabila verksamhetsmiljöer och coronapandemin. Å andra sidan har de strategiska helheterna och riktlinjerna för utvecklingssamarbetet inte samordnats tillräckligt strikt.
Evalueringar är en del av kunskapsledningen
Evalueringen av den kunskapsbaserade ledningen som genomfördes 2019 bekräftade att centraliserade evalueringar har producerat nyttig information och haft en lyckad inverkan på beslutsfattandet. Resultatinformationen har utnyttjats för att utveckla strategier, riktlinjer och projekt vid utrikesministeriet. Enligt evalueringen kan utnyttjandet av resultatinformationen stärkas ytterligare, särskilt i styrningen av resurserna. Det fanns också utrymme för förbättringar i fråga om vidareförädlingen av informationen och kombinationen av informationen i större helheter samt i utvecklingen av strukturer som främjar lärande. I rapporten konstateras att utrikesministeriet på det hela taget har en stark arbetsmiljö som stöder evalueringen.
Enligt en kollegial utvärdering av evalueringsfunktionerna i Finland, Irland och Schweiz som färdigställdes 2021 är utrikesministeriets evalueringsverksamhet bevisligen självständig och oberoende. Det finns utrymme för förbättringar särskilt i fråga om evalueringens användbarhet och läsbarhet, i avgränsningen av uppdragen samt i diversifieringen av de produkter som ska utvärderas.
I metaevalueringen som färdigställdes våren 2022 konstaterades att evalueringarna på projektnivå har erbjudit praktisk och betydelsefull information för att styra och utveckla verksamheten. Projektutvärderingarna upplevs överlag som nyttiga, men den information som fås från dem sprids inte i stor utsträckning inom organisationen.
Finland var det första landet i världen som genomförde en självständig och oberoende utvärdering av det nationella genomförandet av Agenda 2030. Planeringen av utvärderingen inleddes våren 2018 och själva utvärderingen blev klar i februari 2019. Finland och utrikesministeriets evalueringsverksamhet fick stor internationell uppmärksamhet och Finland främjade utvärderingen av hållbar utveckling i internationella forum.
- 1
Anteckningen görs i samband med nya finansieringsbeslut utifrån målsättningen på skalan människorättsblind, människorättssensitiv (beaktar de mänskliga rättigheterna), människorättsprogressiv (främjar de mänskliga rättigheterna) och människorättstransformativ (ingriper i utmaningar kring de mänskliga rättigheterna) eller ej definierad.
- 2
Anteckningen görs i samband med nya finansieringsbeslut utifrån målsättningen. I urvalet ingår de finansieringsbeslut som fattats och för vilka främjandet av jämställdhet har angetts som huvudsakligt mål eller betydande delmål.
- 3
Det är fråga om ett medeltal på tre år för beslut som omfattar finansiering som stöder jämställdhet. Till exempel visar siffran för 2017 medeltalet för 2015–2017.
- 4
Multilateral Organisation Performance Assessment Network.
- 5
OECD DAC Corruption Risk Management Recommendations 2016. https://www.oecd.org/corruption/oecd-recommendation-for-development-cooperation-actors-on-managing-risks-of-corruption.htm
- 6
London Safeguarding Summit 2018 commitments. https://www.gov.uk/government/collections/safeguarding-summit-commitments
- 7
Utrikesministeriet (16.5.2022): Tabell 4. Utbetalningar för utvecklingssamarbete till de största samarbetsländerna 2016–2021. https://um.fi/documents/35732/0/Tilastoliite+2021%2C+osa2.pdf/47739300-0dac-50c8-d9ce-706195ee8070?t=1649772600686
- 8
MOPAN (16.5.2022) MOPAN Assessment library.
https://www.mopanonline.org/assessments/ - 9
MOPAN: 2017-18 ASSESSMENTS, Global Environment Facility (GEF) 2019. https://www.mopanonline.org/assessments/gef2017-18/GEF%20Report.pdf
- 10
MOPAN: 2017-18 ASSESSMENTS, United Nations Population Fund (UNFPA) 2019.
https://www.mopanonline.org/assessments/unfpa2017-18/UNFPA%20Report.pdf - 11
MOPAN: 2017-18 ASSESSMENTS, UN Women 2019. https://www.mopanonline.org/assessments/unwomen2017-18/Final_assessment_UN_Women_2019_02_14.pdf
- 12
MOPAN: Assessment Report United Nations Children’s Fund (UNICEF) 2021. https://www.mopanonline.org/assessments/unicef2020/MOPAN%20Assessment%20UNICEF%20web%20[for%20download].pdf
- 13
Ministry for Foreign Affairs of Finland (2020). Finnish Development Policy Influencing Activities in Multilateral Organisations, Volume 1, Main report. https://um.fi/documents/384998/0/Vol1+_MainReport_Evaluation+of+Finnish+Development+Policy+Influencing+Activities+in+Multilateral+Organisations+%281%29.pdf/2666cd6a-0bb2-1c76-0659-db1ac6fa30bf?t=1591860985653
- 14
Världsbanksgruppen, UNFPA, UNICEF, Världslivsmedelsprogrammet WFP, UN Women, Internationella fonden för jordbruksutveckling IFAD, FN:s livsmedels- och jordbruksorganisation FAO och Internationella handelscentret ITC granskades mer ingående.
- 15
MOPAN: 2017-18 ASSESSMENTS, International Fund for Agricultural Development (IFAD) 2019. https://www.mopanonline.org/assessments/ifad2017-18/IFAD%20Report.pdf
- 16
African Development Bank Group (2022). Annual Development Effectiveness Review 2022. https://www.afdb.org/en/documents/annual-development-effectiveness-review-2022
- 17
Europeiska kommissionen (2021). Ett globalt Europa: Ett instrument för grannskaps-, utvecklings- och internationellt samarbete. https://ec.europa.eu/info/funding-tenders/find-funding/eu-funding-programmes/global-europe-neighbourhood-development-and-international-cooperation-instrument_fi
- 18
En av organisationerna som får programstöd är Fingo ry, som har sammanlagt 270 finländska icke-statliga organisationer som medlemmar.
- 1
Anteckningen görs i samband med nya finansieringsbeslut utifrån målsättningen på skalan människorättsblind, människorättssensitiv (beaktar de mänskliga rättigheterna), människorättsprogressiv (främjar de mänskliga rättigheterna) och människorättstransformativ (ingriper i utmaningar kring de mänskliga rättigheterna) eller ej definierad.
- 2
Anteckningen görs i samband med nya finansieringsbeslut utifrån målsättningen. I urvalet ingår de finansieringsbeslut som fattats och för vilka främjandet av jämställdhet har angetts som huvudsakligt mål eller betydande delmål.
- 3
Det är fråga om ett medeltal på tre år för beslut som omfattar finansiering som stöder jämställdhet. Till exempel visar siffran för 2017 medeltalet för 2015–2017.
- 4
Multilateral Organisation Performance Assessment Network.
- 5
OECD DAC Corruption Risk Management Recommendations 2016. https://www.oecd.org/corruption/oecd-recommendation-for-development-cooperation-actors-on-managing-risks-of-corruption.htm
- 6
London Safeguarding Summit 2018 commitments. https://www.gov.uk/government/collections/safeguarding-summit-commitments
- 7
Utrikesministeriet (16.5.2022): Tabell 4. Utbetalningar för utvecklingssamarbete till de största samarbetsländerna 2016–2021. https://um.fi/documents/35732/0/Tilastoliite+2021%2C+osa2.pdf/47739300-0dac-50c8-d9ce-706195ee8070?t=1649772600686
- 8
MOPAN (16.5.2022) MOPAN Assessment library.
https://www.mopanonline.org/assessments/ - 9
MOPAN: 2017-18 ASSESSMENTS, Global Environment Facility (GEF) 2019. https://www.mopanonline.org/assessments/gef2017-18/GEF%20Report.pdf
- 10
MOPAN: 2017-18 ASSESSMENTS, United Nations Population Fund (UNFPA) 2019.
https://www.mopanonline.org/assessments/unfpa2017-18/UNFPA%20Report.pdf - 11
MOPAN: 2017-18 ASSESSMENTS, UN Women 2019. https://www.mopanonline.org/assessments/unwomen2017-18/Final_assessment_UN_Women_2019_02_14.pdf
- 12
MOPAN: Assessment Report United Nations Children’s Fund (UNICEF) 2021. https://www.mopanonline.org/assessments/unicef2020/MOPAN%20Assessment%20UNICEF%20web%20[for%20download].pdf
- 13
Ministry for Foreign Affairs of Finland (2020). Finnish Development Policy Influencing Activities in Multilateral Organisations, Volume 1, Main report. https://um.fi/documents/384998/0/Vol1+_MainReport_Evaluation+of+Finnish+Development+Policy+Influencing+Activities+in+Multilateral+Organisations+%281%29.pdf/2666cd6a-0bb2-1c76-0659-db1ac6fa30bf?t=1591860985653
- 14
Världsbanksgruppen, UNFPA, UNICEF, Världslivsmedelsprogrammet WFP, UN Women, Internationella fonden för jordbruksutveckling IFAD, FN:s livsmedels- och jordbruksorganisation FAO och Internationella handelscentret ITC granskades mer ingående.
- 15
MOPAN: 2017-18 ASSESSMENTS, International Fund for Agricultural Development (IFAD) 2019. https://www.mopanonline.org/assessments/ifad2017-18/IFAD%20Report.pdf
- 16
African Development Bank Group (2022). Annual Development Effectiveness Review 2022. https://www.afdb.org/en/documents/annual-development-effectiveness-review-2022
- 17
Europeiska kommissionen (2021). Ett globalt Europa: Ett instrument för grannskaps-, utvecklings- och internationellt samarbete. https://ec.europa.eu/info/funding-tenders/find-funding/eu-funding-programmes/global-europe-neighbourhood-development-and-international-cooperation-instrument_fi
- 18
En av organisationerna som får programstöd är Fingo ry, som har sammanlagt 270 finländska icke-statliga organisationer som medlemmar.
Faktorer som främjat resultaten
- verksamhetens planmässighet och långsiktighet
- nära samarbete med olika partner och nätverk
- utgångspunkten i utvecklingspolitikens prioriterade områden, landsstrategier och -program samt ett omfattande beskickningsnätverk
- förmåga att ta tag i nya möjligheter och anpassa sig till föränderliga situationer
- verksamhet som drivs av efterfrågan och samarbetspartnernas ägarskap
- goda personliga relationer till internationella aktörer och institutionellt partnerskap, särskilt i påverkansarbetet
- rätt valda finansieringskanaler och samarbetsformer
- resultatrik användning av multilaterala kanaler i både stabila och bräckliga verksamhetsmiljöer
- lyckat lokalt samarbete för att uppnå de politiska målen
- utnyttjande av bilateralt utvecklingssamarbete i länder som håller på att övergå från utvecklingssamarbete till annat samarbete mellan länder
- motiverad personal och positiv inställning till utnyttjande av resultatinformation
Faktorer som minskat resultaten
- begränsat antal anställda och stor personalomsättning
- koordinationsavbrott såväl inom organisationen som med externa aktörer
- begränsat utnyttjande av lokal kompetens
- osäkerhetsfaktorer i verksamhetsmiljön, såsom coronapandemin
- motstridiga eller orealistiska mål
- utmanande samordning av olika ansvarsområden, avsaknad av en helhetsvision mellan riktlinjerna och splittrade omfattande helheter
- avsaknad av vissa strategiska eller styrande mål, till exempel användning av finansiella instrument inom den privata sektorn eller arbete under en övergångsperiod
- små projekts begränsade effekt i förhållande till behoven
- stela finansieringsstrukturer och förfaranden
- organisationskultur som undviker risker
- praktiska svårigheter att beakta genomgående mål och genomföra människorättsbaserad verksamhet