Finlande

The Evaluation Management Services (EMS) was a service contract which consisted in the implementation of strategic and policy-level evaluations, meta-evaluations, project-level evaluations and assessments for the Ministry for Foreign Affairs of Finland (MFA). It corresponded to a model that is based on evaluation services commissioned to one service provider rather than outsourcing the implementation of each evaluation as a single assignment. The purpose of this contract was to increase the quality of outsourced evaluations and also to increase flexibility, efficiency and effectiveness of the MFA of Finland in planning and commissioning evaluations. In addition to some decentralised (project level) evaluations and assessments from various geographical units, all MFA centralised evaluations were prepared and implemented through the EMS.

The assignments that were implemented under this service contract are the following:

• Evaluation on Development Cooperation carried out by the Department for Russia, Eastern Europe and Central Asia, Including The Wider Europe Initiative (WEI).
• External Review and Evaluation Services of forest programmes in Tanzania
• Evaluation on the transition towards a new partnership between Finland and Vietnam
• Evaluation on water diplomacy in the context of Finnish development cooperation – lessons for the future
• Evaluation of ICI Projects in Afghanistan, Bhutan, India, and Nepal
• Meta-evaluation of MFA's projects and programme evaluations in 2018-2020
• Evaluation of the Finnish Development Policy Influencing in the European Union
• Evaluation of Finnish Humanitarian Aid
• Assessment on the Response of Finnish Development Policy and Cooperation to the Covid-19
• Final Evaluation of Rural Village Water Resources Management Project (RVWRMP) 2006-2022 and Post-evaluation of Rural Water Supply and Sanitation Western Nepal Project (RWSSP-WN) 2008-2019
• Facilitated assessment of Finnish peace, democratization and sustainable livelihoods support in Myanmar
• Evaluation of Finland’s International Climate Finance
• Evaluation of Human Rights-Based Approach (HRBA) in Finland’s Development Policy and Cooperation
• Review of the MFA’s support to international recruitment
• Evaluation on Development Communications in the Context of the Ministry for Foreign Affairs Finland
• Right to Education, Right to Learn – Evaluation of Finnish Development Policy and Cooperation in the Education Sector
• Evaluation of Finland’s initiatives focused on enhanced domestic resources mobilization (DRM)
• Meta-analysis of Country Programmes 2021–2024

The ultimate purpose of the forward-looking evaluation was two-fold. Firstly, it informed the MFA on the effectiveness, coherence and relevance of climate finance and what kind of results had been achieved with the various development policy and cooperation instruments over the period 2016-22. Secondly, the evaluation provided information and supported the implementation and further development of the Action Plan for Finland’s Public International Climate Finance to maximize the effectiveness and impact of Finland’s climate finance, especially regarding long-term planning and coordination of climate finance as a whole.

The specific objectives of the evaluation were

• To assess the results of Finland’s international climate finance and policy influencing in directing finance, with due consideration of the opportunities and barriers at both national and global levels
• To assess the relevance and coherence of Finland’s international climate finance
• To assess the functioning of partnerships and co-operation in climate change mitigation and adaptation and whether the current balance of partnerships of Finnish influencing is optimal
• To study relevant peer countries’ experiences in order to learn best practices
• To provide well-justified and evidence-based recommendations on how the MFA together with relevant stakeholders could further improve their actions for a more effective, coherent and relevant response to developing countries’ climate finance needs and for funding priorities through the different cooperation instruments

The evaluation examines the role of the Ministry for Foreign Affairs in the development communications and assesses the efficiency and coherence of the current organisational processes and practices. The effectiveness of various development communications means, modalities and channels that are currently at the MFA disposal is assessed. Based on the related findings the evaluation draws justified conclusions and makes recommendations for enhancing the efficiency, effectiveness and coherence of the Ministry’s development communications for various audiences.

The temporal scope of the evaluation covers the years 2015- 2022. The evaluation only covers activities funded by MFA Finland, including those of programme CSOs that received funding for development communication, while the main focus is on VIE-30 communications.

The evaluation is based on two tracks of inquiry. The first inquiry track is descriptive (how has MFA supported and implemented development communication and global education), and the second is evaluative (how effective, efficient and coherent has the MFA been in funding and implementing development communication).

Le but de cette évaluation était d’évaluer la pertinence et l’efficacité des différents types d’activités multilatérales d’influence mises en œuvre par le Ministère Finlandais des Affaires étrangères (MFA) et de fournir des orientations sur la façon de les renforcer davantage.

L’évaluation a utilisé une approche fondée sur la théorie qui a permis une analyse systématique des relations multi causales entre les activités d’influences, les effets et d’autres changements dans les multilatéraux. Dans l’ensemble, 23 institutions partenaires multilatérales du MFA ont été couvertes, et huit d’entre elles ont été étudiées plus en profondeur : le Groupe de la Banque mondiale (WBG), le Fonds des Nations Unies pour la population (UNFPA), le Fonds des Nations Unies pour l’enfance (UNICEF), le Programme alimentaire mondial des nations unis (WFP), l’organisation des Nations Unies pour l'égalité des sexes et l'autonomisation des femmes (UN Women), le Fonds international de développement agricole (IFAD), l’Organisation des Nations Unies pour l’alimentation et l’agriculture (FAO) et le Centre du commerce international (ITC).

Les objectifs spécifiques de l’évaluation étaient les suivants :

• évaluer comment la Finlande a réussi à promouvoir l’Agenda2030 et les objectifs de la politique de développement finlandaise au sein des organisations multilatérales partenaires ;
• évaluer les activités d’influences, ressources et méthodes utilisés ;
• fournir des orientations dans l’élaboration de nouveaux plans d’influence (travaux encours) ;
• évaluer les ressources humaines et financières disponibles pour influencer les activités ;
• évaluer l’utilité et la faisabilité d’avoir des plans d’influence ;
• évaluer divers moyens d’influence et les meilleures opportunités d’influence finlandaise sur les sièges des organisations multilatérales, bureaux de pays, projets multi-bi, etc. en tenant compte des ressources disponibles ;
• évaluer les Théories du changement du plan stratégique d’influence (lorsqu’il est disponible) et donner des indications pour des révisions possibles afin de mieux atteindre les objectifs de la politique finlandaise de développement.

Le rapport final est disponible ici : https://um.fi/publications/-/asset_publisher/TVOLgBmLyZvu/content/evaluointiraportti-ulkoministeri-c3-b6-vaikuttaa-monenkeskisten-j-c3-a4rjest-c3-b6jen-toimintaan-1/384998

L'évaluation nordique conjointe du Fonds nordique de développement (FND) visait à évaluer la performance du FND par rapport à son mandat et le rôle potentiel futur du fonds en tant qu'instrument de financement nordique conjoint, en évaluant la force de sa valeur ajoutée dans une perspective internationale. Ainsi, l'étude poursuivait deux objectifs étroitement liés : i) évaluer les performances passées et actuelles du FDN (" objectif 1 ") ; ii) évaluer le rôle potentiel futur du FDN en tant qu'instrument de financement conjoint des pays nordiques pour le développement (" objectif 2 ").

L'évaluation a été menée dix ans après la mise en place du nouveau mandat du FDN - une période suffisamment longue pour faire le point sur ce qui a fonctionné et pourquoi, et sur ce qui a moins bien fonctionné. L'analyse couvre la période 2009-2018 et l'ensemble du portefeuille du FDN. Bien que le FDN ait mis l'accent sur le changement climatique, l'analyse a également examiné le rôle potentiel futur du FDN au-delà de ce thème.

Parallèlement à l'évaluation du FDN, une évaluation du Fonds Nordique pour le Climat (FNC) a été entreprise. En raison de sa mise en place et de son fonctionnement spécifique, le NCF est confronté à des défis et à des potentiels particuliers et, conjointement avec le FDN, il a donc été décidé d'évaluer la structure séparément, mais par la même équipe d'évaluation (Particip GmbH). Les résultats des deux missions ont été présentés dans le même rapport d'évaluation. Le rapport final est disponible en ligne :

https://eba.se/en/rapporter/joint-nordic-organisational-assessment-of-the-nordic-development-fund-ndf/11350/

Le Fonds Nordique pour le Climat (FNC) est un fonds d'encouragement créé et administré par le Fonds nordique de développement (FND) pour financer des projets innovants dans le domaine du changement climatique. L'objectif général de l'évaluation était de fournir au FDN une évaluation indépendante du NCF en tant que dispositif. Le premier objectif était d'évaluer la performance du NCF conformément aux objectifs et aux résultats énoncés dans le plus récent document d'approbation du Conseil d'administration du FDN pour les NCF 7-9, y compris l'évaluation de l'efficacité et de l'efficience de la gestion du NCF. Le deuxième objectif était d'évaluer la pertinence et la valeur ajoutée du FNC en tant que fonds d'encouragement du FDN, et de formuler des recommandations concrètes sur les orientations et le développement futurs du FNC, notamment i) l'évaluation de l'alternative consistant à créer le FNC en tant que fonds d'affectation spéciale ; ii) l'évaluation de l'utilisation d'autres types de financement que les subventions.

Parallèlement à l'évaluation du FNC, une évaluation du Fonds nordique de développement (FND) a été entreprise. En raison de sa structure et de son fonctionnement spécifique, le FNC est confronté à des défis et à des potentiels particuliers et, conjointement avec le FND, il a donc été décidé d'évaluer le mécanisme séparément, mais par la même équipe d'évaluation (Particip GmbH).

Les résultats des deux missions ont été présentés dans le même rapport d'évaluation. Le rapport final est disponible en ligne :

https://eba.se/en/rapporter/joint-nordic-organisational-assessment-of-the-nordic-development-fund-ndf/11350/

The purpose of the evaluability study was to inform the design of the upcoming evaluation by providing options for evaluation questions, methods, resources and expertise needed. The conclusions and recommendations of this assessment will be used for the planning and preparation of the evaluation, enabling a quick, focused and efficient start.

The evaluability study was mainly carried out as a desk study with some interviews of key informants.

• First, the evaluability study analysed interrelations between different policies, strategies and guidelines related to human rights and HRBA and their coherence.
• Second, it studied and analysed a representative portfolio of evaluations commissioned by MFA (meta-analysis). The portfolio consisted of policy, thematic, and programme evaluations as well as joint evaluations conducted by partner organizations on joint programmes.
• Third, the evaluability study carried out an evaluability assessment laying a special emphasis on human rights as an approach in development policy.