Comment progressons-nous dans l'évaluation des ODD?

Chers collègues,

Merci beaucoup pour votre participation active et votre engagement dans cette discussion. Quelques mots sur les dernières contributions :

Nea-Mari, merci pour les informations et les liens sur le suivi et l'évaluation des ODD au niveau sous-national en Finlande. Des exemples inspirants pour d'autres pays et villes ! Merci Esosa d'avoir souligné le rôle essentiel de l'évaluation dans les programmes de développement fondés sur des preuves. Et Mark, oui, reconnaître les limites de nos études/évaluations est toujours une bonne pratique, merci d'avoir souligné ce point.

Cette discussion se termine pour l'instant, mais il y aura d'autres occasions d'échanger des idées et des connaissances sur le soutien aux progrès vers les ODD grâce à l'évaluation.

Je vous souhaite le meilleur et je vous invite à rester à l'écoute des prochaines mises à jour.

Emilia

Chère Emilia,

En ce qui concerne votre dernier point, je suis heureux que vous vous demandiez pourquoi notre rapport a constaté que certains ODD sont évalués (avec des évaluations d'impact quantitatives), mais pas d'autres. Pour situer le contexte, nous avons tendance à éviter ce type de questions causales, car nos données ne nous permettent pas d'y répondre et nous ne sommes pas experts dans tous les secteurs qu'elles couvrent.

Cependant, il va sans dire que nous nous sommes interrogés sur les raisons de ce constat lors de la rédaction du rapport. Comme vous, je suis curieux de savoir ce qu'en pensent les experts du secteur de l'environnement, et j'aimerais aussi que vous partagiez vos hypothèses !

Je vous remercie de votre attention,

Mark

Chers membres,

Ma contribution.

L'évaluation est un facteur critique et un sujet central lorsqu'il s'agit d'évaluer les progrès vers la réalisation des ODD de l'ONU. L'accent mis sur le rôle de l'évaluation dans la réalisation des ODD est justifié par sa contribution à faire la différence et par les avancées institutionnalisées en matière de développement des données et des statistiques qui renforcent les progrès liés aux ODD dans toutes les pays.

L'évaluation est essentielle dans la recherche et dans les programmes/projets lancés par les individuels, les institutions et les nations en accord avec les ODD. Les résultats des programmes/projets sont mieux connus grâce à l'évaluation. Les personnes impliquées dans l'évaluation peuvent parfaitement déterminer les niveaux de progrès et la manière dont ils peuvent permettre de combler le fossé nécessaire entre les pays ou au sein de ceux-ci.

Par exemple, l'inégalité dans l'économie mondiale entre le Nord et le Sud peut être mesurée et mieux comprise en utilisant des sources de données fiables grâce aux évaluations. Ce n'est que lorsque l'économie d'un pays a été évaluée à l'aide de données/preuves fiables qu'une aide peut être apportée pour combler les inégalités. Sans validation des données par les évaluateurs, aucune aide ne peut être recherchée pour progresser vers les ODD des Nations unies. Pour comprendre les progrès économiques, l'évaluation des données pertinentes est nécessaire pour valider les résultats. À titre d'exemple, une étude sur les données des États-Unis et de la Chine m'a permis d'établir une comparaison solide de leurs niveaux de développement et de leurs progrès. L'évaluation est la clé de la réalisation et de la réussite des ODD de l'ONU. L'évaluation, c'est la connaissance, les résultats. En outre, l'évaluation est ce qui valide les résultats et les faits empiriques de la recherche et des programmes pertinents.

Les faits empiriques peuvent être validés par des indices et des indicateurs économiques. Dans le cas des États-Unis et de la Chine, le chercheur a obtenu ses informations auprès de la Banque mondiale et du FMI. Ce sont des sources fiables qui peuvent valider la force de leurs économies et leur hégémonie mondiale. Cette recherche est un verdict important pour vérifier l'inégalité économique entre le Nord et le Sud avant d'appeler à la mise en œuvre de programmes/projets pour combler le fossé. Lorsque le(s) problème(s) est(sont) connu(s), il n'est pas difficile de le(s) résoudre, c'est le but de l'évaluation.

Cependant, pour soutenir les progrès des objectifs du Millénaire pour le développement, les pays doivent connaître les questions fondamentales pour les progrès du développement de leurs économies. C'est pourquoi l'évaluation est essentielle pour les objectifs de développement des ODD dans le monde. Elle permettra de valider les progrès réalisés jusqu'à présent et de déterminer comment les améliorer. En outre, les 17 ODD ont besoin d'un suivi et d'une évaluation institutionnalisés appropriés pour faire la différence dans la trajectoire de croissance de l'économie mondiale et la durabilité du développement. La contribution de l'évaluation aux objectifs des ODD est essentielle, qu'il s'agisse de recherche ou de programmes/projets. Néanmoins, je pense qu'il est nécessaire d'avoir un organisme de données institutionnalisé qui évalue les progrès du développement de chaque pays au niveau local, au niveau des États, au niveau national, sous-national et international. Cela contribuera réellement à la réalisation des objectifs des Nations unies en matière d'objectifs de développement durable. Les zones locales donneront une image fidèle du développement des communautés au niveau national d'un pays dans le cadre des programmes/projets et de la recherche sur les ODD.

En outre, l'identification de ce qui fonctionne commence par les évaluateurs au niveau local et se poursuit aux niveaux national et international. Le processus s'étend de bas en haut. S'il existe véritablement un organe directeur institutionnalisé pour l'évaluation et la validation des données, il sera facile d'identifier ce qui fonctionne et les leçons tirées seront connues pour une mise en œuvre efficace des ODD et des progrès réalisés. Tous ces facteurs sont liés aux différences culturelles, qui ont une grande influence sur les progrès réalisés par une nation en matière de développement. C'est pourquoi l'évaluation locale et nationale est primordiale pour les objectifs des ODD. En d'autres termes, ce qui fonctionne pour un pays A peut ne pas fonctionner pour un pays B, c'est-à-dire que les facteurs environnementaux, les différences et l'influence sont sujets et mieux compris par les évaluateurs locaux et nationaux pour le progrès des programmes/projets ou objectifs des ODD. L'évaluation est un élément clé pour maximiser les changements possibles dans le développement de l'économie mondiale, la paix, la justice, la faim zéro, les soins de santé de qualité, une bonne éducation et l'éradication de la pauvreté, etc.

Enfin, pour obtenir un développement efficace dans tous les domaines au sein des nations, il convient de combiner l'intégration des évaluateurs des Nations unies, sous-nationaux, nationaux et locaux, qui comprennent différents organismes aux niveaux fédéral, étatique et local, le secteur privé, les organisations de la société civile, les ONG et les agences des Nations unies dans le suivi et l'évaluation de la mise en œuvre et de la viabilité des objectifs des ODD. Cela permettra de mettre en place des politiques d'inclusion pour toutes les parties prenantes en vue de la réalisation des ODD à l'échelle mondiale.

Je vous remercie.
 

Esosa.

Merci pour vos questions concernant l'expérience finlandaise. Pour donner quelques exemples au niveau infranational, le programme "Ville durable" du ministère de l'environnement (2019-2023) a piloté un ensemble d'indicateurs municipaux pour le développement durable créés collectivement. L'Association des autorités locales et régionales finlandaises a mis en place un projet phare pour les six plus grandes villes de Finlande sur le pilotage stratégique des objectifs de développement durable. Le réseau a co-créé des outils pour les objectifs de développement durable.

Quelques liens d'intérêt pourraient être :

Site web : Association des autorités locales et régionales finlandaises ; SDGs : https://www.localfinland.fi/network-strategic-management-sdgs-cities 

Site web : Ville durable

https://kestavakaupunki.fi/en/-/indicators-for-sustainable-urban-development-kekanua- 

Nous collaborons avec des partenaires pour produire la deuxième édition du guide d'évaluation des ODD https://www.iied.org/17739iied . Restez à l'écoute pour en savoir plus dans le courant de l'année !

Sincères salutations,

Nea-Mari 

Chers collègues,

Merci pour votre contribution à cette discussion animée.

Voici mes commentaires sur quelques points, sans chercher à épuiser la conversation (ni à la résumer entièrement) mais dans l'espoir de susciter quelques réflexions supplémentaires.

1. Notre attention devrait aller au-delà de la mesure de la contribution ou de la progression vers les ODD: il existe de nombreuses études/évaluations et indicateurs dédiés (notamment les indicateurs approchés) qui permettent également de comprendre les progrès de développement. Les ODD ne sont pas isolés et il peut exister différentes voies et manières menant à la même direction. Dorothy et John Akwetey ont abordé ce sujet en particulier, mais il est présent dans différentes contributions. Ils ont également souligné l'importance des évaluations aux niveaux national, institutionnel et infranational, au-delà des évaluations des ODD à grande échelle.

L'approche adoptée par l'étude des preuves d'évaluation partagée par Mark Engelbert, concernant principalement des évaluations de l'impact, semble évoquer ce dernier point.

Le travail mené par la coalition Global SDG Synthesis Coalition relève du même ordre d'idées. La synthèse peut être utilisée soit comme alternative à une évaluation centrée sur les ODD soit comme composante d'une étude plus large. Les synthèses suivent une approche systématique et transparente pour identifier, rassembler et apprécier la qualité des évaluations individuelles, en synthétisant ensuite les conclusions et les enseignements tirés de l'ensemble des preuves d'évaluation. L'approche comprend des cartes des manques de preuves et d'autres outils, notamment un processus rigoureux (et le cadre correspondant) permettant d'inclure ou d'exclure des études.

2. Les difficultés rencontrées dans l'évaluation des ODD par la plupart des pays et des acteurs de développement et partagées sous différents angles par Ram Khanal Lovemore Mupeta et Hadera Gebru concernent: les ressources limitées, l'insuffisance des données, le manque de techniques d'évaluation appropriées et la complexité des cibles interconnectées. À la lumière de ces défis, nous devrions envisager/rechercher d'autres approches (la synthèse en est une) plutôt que de nous lancer dans des évaluations potentiellement décourageantes, ii) commencer modestement et iii) évaluer de manière judicieuse les études qui peuvent être utiles. Impliquer des professionnels basés dans le pays (évaluateurs et chargés de mise en œuvre dans différents secteurs) dans le processus pourrait contribuer à une meilleure sensibilisation et renforcer la capacité d'évaluation.

Malheureusement, des troubles et défis politiques majeurs peuvent aboutir à un recul complet de toute tentative d'évaluation des progrès vers les ODD, comme l'a montré la situation en Éthiopie où les crises post-covid et la guerre civile ont miné les progrès de développement.

3. Le niveau infranational (en particulier local) est un autre défi reconnu partagé par beaucoup. Nea-Mari, je serais curieuse de connaître quelques exemples de ce que la Finlande a réalisé au niveau local – quels types de solutions numériques avez-vous adoptés pour le suivi et évaluation des progrès accomplis vers les ODD? Je suis également positivement surprise par l'influence des évaluations dans les élections parlementaires et dans la planification du nouveau programme gouvernemental. Quels seraient, selon vous, les éléments clés qui donnent cette force aux évaluations en Finlande?

4. Exemples de rapports: Pelagia Monou, Fabandian Fofana, puis-je vous demander si les évaluations auxquelles vous avez participé sont publiques et s'il vous est possible de partager le lien avec nous? Pelagia, avez-vous été en mesure d'aller au-delà du nombre de projets et du budget pour puiser dans les contributions ou les résultats? Fabandian, avez-vous mesuré les contributions aux ODD au niveau local? Qui était impliqué et de quelle manière?

5. Dernier point et non des moindres (mais qui reste secondaire), voici un commentaire sur la conclusion du rapport 3ie (International Initiative for Impact Evaluation) partagé par Mark, selon lequel le travail d'évaluation sur les ODD relatifs à la «planète» (ODD 6, 12 et 15) a été laissé de côté. Le rapport note que très peu de recherches d'évaluation (de l'impact) ont été trouvées concernant les ODD 12 (consommation et production durables), 14 (vie aquatique) et 15 (vie terrestre). Même si j'ai ma propre hypothèse et explication concernant ce résultat, je me demande si Stefano D'Errico, Ram Khanal et d'autres collègues disposant d'une expertise dans le secteur de l'environnement souhaitent donner leur avis pour en trouver les raisons? 😊

Il reste encore beaucoup de chemin à parcourir: Chris, Olivier et Lal nous rappellent que le cadre post-Programme à l'horizon 2030 approche à grands pas!

Merci à tous pour vos contributions!!

Très sincèrement

Emilia

Bonjour à tous !

Voici ma contribution au sujet de discussion en cours : comment progressons-nous dans l'évaluation des ODD ?

J'apprécie et remercie tous ceux qui ont contribué/partagé leur expérience/ à cet important sujet de discussion. Je remercie également les Nations Unies et les parties concernées qui ont uni leurs efforts et leurs esprits en 2015 pour établir les ODD (17 objectifs ambitieux et interdépendants) pour l'amélioration de la population mondiale et de la planète. 

D'après mon expérience, les travaux d'évaluation du développement se heurtent souvent à des contraintes telles que le manque ou l'inadéquation des données, le budget limité, les contraintes de temps et l'absence de techniques d'évaluation appropriées, etc. Ces contraintes peuvent également être aggravées par des crises naturelles ou provoquées par l'homme (par exemple, la guerre). De même, les travaux d'évaluation des ODD, lorsqu'ils sont menés, peuvent être confrontés à des contraintes similaires.

Permettez-moi d'évoquer la situation de l'Éthiopie en ce qui concerne les progrès réalisés dans l'évaluation des ODD. En 2015, l'Éthiopie a proactivement intégré et aligné les ODD sur le deuxième plan national de croissance et de transformation (GTP II), ce qui était très encourageant. En fait, l'Éthiopie avait alors de bons antécédents dans certaines initiatives de développement, similaires à certains des ODD.
Toutefois, l'élan encourageant des initiatives/travaux de développement, de suivi et d'évaluation liés à la réalisation des ODD a été pratiquement brisé/stagné/renversé en raison des crises naturelles (par exemple Covid-19) et de la guerre civile dévastatrice en cours dans la plupart des régions d'Éthiopie. D'après moi, il est difficile d'évaluer les réalisations des ODD depuis ces six dernières années, et il est même difficile d'y penser. Ainsi, je pense que les progrès de l'évaluation des ODD en Éthiopie, compte tenu de la guerre civile dévastatrice en cours et de l'effet Covid-19 antérieur, sont médiocres. En raison de la guerre civile en cours, sans parler de la réalisation des ODD, la situation est en train de s'inverser. Pour n'en citer que quelques-uns : des millions d'Éthiopiens sont déplacés à l'intérieur du pays et souffrent de la pauvreté et de la faim ; des millions d'élèves ne peuvent pas aller à l'école ; des millions de personnes n'ont pas accès à l'eau potable et à l'assainissement ; il y a de nombreuses violations des droits de l'homme, en particulier des femmes, dans de nombreuses régions du pays.

Ainsi, même en l'absence de travaux d'évaluation de la réalisation des ODD en Éthiopie par des experts en évaluation, les gens ordinaires peuvent comprendre que la réalisation des objectifs des ODD n'est généralement pas bonne, ce qui nécessite l'attention de toutes les parties concernées, aux niveaux national, régional et international.

Salutations distinguées,

Hadera Gebru
Consultante principale en développement et en évaluation
Addis-Abeba, Éthiopie

Chère Emilia
Merci d'avoir soulevé cette question. C'est une idée intéressante ! J'ai lu les contributions avec intérêt et je pense qu'il est essentiel d'aller au-delà de l'évaluation des progrès accomplis dans la réalisation des ODD si l'on veut les atteindre d'ici 2030. Bien que le suivi des progrès soit important, il ne donne qu'une image partielle de la situation. Voici quelques domaines potentiels dans lesquels j'aide les organisations et les institutions à aller au-delà des évaluations traditionnelles :

1. Approfondir la compréhension des défis et des lacunes :

• Aller au-delà des moyennes : Désagréger les données pour comprendre comment les différents groupes démographiques, régions et communautés connaissent des progrès ou des reculs.
• Analyser les causes profondes : Ne vous contentez pas de mesurer les résultats, examinez les facteurs sous-jacents qui entravent les progrès, tels que les inégalités, les problèmes de gouvernance ou le manque de ressources.
• Explorer les conséquences involontaires : Évaluer les effets négatifs potentiels des mesures prises pour atteindre certains ODD et la manière dont elles pourraient en affecter d'autres.

2. Faciliter l'action et la mise en œuvre :

• Identifier des solutions réalisables :Utiliser les données et les analyses pour recommander des interventions et des politiques pratiques susceptibles d'accélérer les progrès.
• Élaborer des voies de mise en œuvre :Combler le fossé entre la politique et l'action en décrivant des étapes concrètes pour atteindre les résultats souhaités.
• Impliquer les parties prenantes :Établir des partenariats avec les communautés, les entreprises et la société civile pour co-créer et mettre en œuvre des solutions, en favorisant l'appropriation et la responsabilisation.

3. Promouvoir l'innovation et la collaboration :

• Explorer les solutions de rupture :Dépasser les approches traditionnelles et adopter des technologies, des modèles sociaux et des pratiques commerciales innovants qui peuvent accélérer considérablement les progrès.
• Favoriser les partenariats multipartites :Casser les silos et encourager la collaboration entre les différents secteurs, en tirant parti de la diversité des compétences et des ressources.
• Soutenir le partage des connaissances et le renforcement des capacités :Partager les meilleures pratiques et les enseignements tirés entre les régions et les pays afin d'accélérer les progrès à l'échelle mondiale.

4. Aborder les questions systémiques :

• Traiter les inégalités sous-jacentes : Reconnaître que l'inégalité d'accès aux ressources, aux opportunités et au pouvoir entrave le progrès, et donner la priorité aux actions visant à remédier à ces déséquilibres.
• Renforcer les institutions et la gouvernance : Investir dans la mise en place d'institutions fortes, inclusives et responsables, capables de mettre en œuvre efficacement les ODD.
• Promouvoir le développement durable : Reconnaître que la dégradation de l'environnement et le changement climatique menacent la réalisation de tous les ODD et intégrer la durabilité dans tous les efforts.

N'oublions pas que la réalisation des ODD nécessite une approche holistique qui va au-delà des chiffres. En comprenant les défis, en encourageant l'action, en adoptant l'innovation et en abordant les questions systémiques, nous pouvons aller au-delà de la simple évaluation et créer un avenir plus juste, plus équitable et plus durable pour tous.

Souhaitez-vous approfondir certains domaines ou défis spécifiques dans le cadre des ODD ? Je me ferai un plaisir de vous aider de quelque manière que ce soit.

Salutations distinguées, 

John 

---
John Akwetey (he/him/his)
Doctoral Graduate Associate, The Evaluation Center
Interdisciplinary Ph.D. in Evaluation (IDPE) 
Western Michigan University
1903 W. Michigan Avenue
Kalamazoo, MI 49008-5237
+ 1 (269) 210-9349

Editorial Board Member, American Journal of Evaluation (AJE) 
 

Bonjour à tous !

La remarque de Chris selon laquelle il serait judicieux de formuler dans les grandes lignes ce qui devrait être entrepris après 2030 est tout à fait pertinente.

Cependant, une telle entreprise serait utile si et seulement si nous avons une notion raisonnablement claire de ce qui a été fait et n'a pas été fait en référence à l'ensemble actuel des ODD, en dépit de leur manque de cohésion logique. Ici, il est difficile de voir comment une telle compréhension peut être acquise sans évaluation.

Une fois cette connaissance acquise, nous pouvons espérer que la prochaine série d'objectifs de développement pour l'après 2030 sera formulée de manière à incarner une plus grande cohésion logique par rapport aux six besoins humains fondamentaux dans le cadre des normes culturelles propres à chaque personne.

La connaissance de ces besoins fondamentaux est évidente, donc sans jargon, à savoir la nutrition avec plaisir culinaire - après tout, nous ne sommes pas encore assimilables à des machines qui n'ont besoin que de carburant - la bonne santé, la sécurité au sens le plus large, l'éducation au sens jutifiable, la procréation et ce que l'on peut appeler un objectif non matériel qui englobe le plaisir esthétique, les jeux et les sports auxquels on participe, diverses autres formes de divertissements. Il s'agit d'un objectif non matériel car sa satisfaction n'implique aucun gain matériel.

La plupart des ODD actuels peuvent être subsumés sous nos besoins fondamentaux puisque les premiers acquièrent une valeur en tant que moyen direct ou indirect de nous permettre d'atteindre un besoin fondamental ; il s'agit donc de besoins secondaires ou tertiaires constituant un réseau hiérarchique interconnecté de besoins humains dont les ramifications reflètent l'état actuel de développement d'une société. Ce développement peut être justifié ou non, par exemple la promotion d'un consumérisme effréné pour atteindre la croissance économique.

A la vôtre !

Lal.

Pour répondre à la question de Chris, je ne suis pas certain qu'il y aura un nouveau cadre de développement mondial après 2030. Le multilatéralisme n'est pas dans une bonne position en ce moment. Les ODD ont été approuvés après la fin de la guerre froide, mais malheureusement, la guerre froide est en train de revenir...  Il reste donc à voir s'il y aura suffisamment de bonne volonté entre les nations en 2030 pour parvenir à un nouvel agenda.

Suite aux commentaires de Dorothy Lucks intitulés «Au-delà des ODD», j'avais espéré quelques suggestions sur le prochain cadre de développement, mais cela n'était manifestement pas son intention.

Il est possible de retracer l'historique des ODD à partir du cadre «La santé pour tous d'ici 2000» de Halfdan Mahler, alors Directeur général de l'Organisation mondiale pour la santé, en passant par les «Objectifs de développement du millénaire» de Kofi Annan, Secrétaire Général des Nations Unies (notons d'ailleurs que Kofi Annan travaillait précédemment pour l'Organisation mondiale pour la santé) jusqu'aux ODD. La valeur de ces cadres tient davantage au fait qu'ils fournissent une perspective plutôt qu'au taux de réalisation de leurs objectifs et de leurs différentes cibles; il est donc essentiel de commencer à travailler bien avant l'échéance de 2030 pour les ODD dans le prochain cadre de développement – et en particulier sur les éléments qui ont été négligés jusqu'à présent. Cela suppose un traitement séparé des connaissances et des informations dans le développement.

Il ne suffit pas de traiter les connaissances et les informations comme des éléments "transversaux" dans le développement. Nous observons les conséquences de la désinformation/mésinformation sur l'édifice des preuves de développement. Les dysfonctionnements en termes d'informations tuent de plus en plus de personnes, tout comme l'a fait la pandémie de covid-19. Même s'ils ne sont pas mortels, ils ralentissent le rythme du développement humain fondé sur des preuves. Nous devons donc être en mesure de suivre et d'évaluer la santé des connaissances comme un objectif spécifique dans le prochain cadre de développement – avec des objectifs, des cibles et des indicateurs.

Bien à vous,

Chris Zielinski

Centre for Global Health, University of Winchester, UK  and 

President-elect, World Association of Medical Editors (WAME)

Blogs; http://ziggytheblue.wordpress.com and http://ziggytheblue.tumblr.com 
Publications: http://www.researchgate.net and https://winchester.academia.edu/ChrisZielinski/

Chère Emilia,

Merci d'avoir lancé cette conversation primordiale concernant le rôle de l'évaluation pour l'atteinte des objectifs de développement durable (ODD). L'évaluation est sans aucun doute cruciale pour mesurer les progrès, identifier les stratégies efficaces et tirer des leçons des expériences en vue d'accélérer la progression vers les ODD. Voici quelques réflexions à travers un examen spécifique du contexte de la Zambie et de ses défis en matière d'évaluation.

Intégrer les ODD dans les évaluations: Tandis que nous nous efforçons d'aligner les objectifs d'un projet sur des ODD spécifiques dans nos cadres d'évaluation, nous reconnaissons les défis uniques auxquels la Zambie est confrontée. Les ressources limitées et les contraintes en termes de capacité entravent souvent l'évaluation complète des contributions aux ODD. Des efforts sont en cours pour améliorer cette intégration, mais les contraintes de ressources restent un obstacle important.

Études de synthèse: La réalisation d'études de synthèse en Zambie s'est révélée difficile en raison d'un manque de données disponibles et de qualité. L'absence d'un répertoire centralisé des résultats d'évaluation rend difficile la diffusion des leçons communes, des meilleures pratiques et des défis rencontrés dans les différents projets. L'amélioration de l'infrastructure des données est essentielle pour surmonter cette limite.

Demande allant au-delà des organismes des Nations Unies: La Zambie a montré un intérêt croissant pour les évaluations liées aux ODD, au-delà des organismes des Nations Unies, en particulier au niveau national. Toutefois, des difficultés persistent aux niveaux infranationaux où une sensibilisation accrue et un renforcement des capacités apparaissent nécessaires. L'engagement est évident mais des efforts ciblés sont nécessaires pour impliquer les différentes parties prenantes.

Implication aux niveaux infranationaux: Les entités infranationales de la Zambie, y compris les gouvernements locaux et les organisations régionales, sont progressivement impliquées davantage dans les évaluations liées aux ODD. Des approches personnalisées sont essentielles, compte tenu de la diversité des contextes locaux, mais un soutien et des ressources supplémentaires sont nécessaires pour garantir l'implication à ce niveau.

Défis et opportunités: La Zambie est confrontée à des difficultés telles qu'une capacité insuffisante, un manque de données et des cibles interconnectées complexes concernant les ODD. Les opportunités consistent à mettre à profit les partenariats et les expériences internationales pour relever ces défis. Les efforts de collaboration, le partage des connaissances et les initiatives ciblées de renforcement des capacités peuvent transformer ces difficultés en opportunités de développement durable.

Nous sommes impatients de participer au prochain atelier de travail et webinaire sur l'évaluation des contributions aux ODD. À travers les expériences et les idées partagées, nous espérons contribuer à une compréhension plus nuancée du rôle de l'évaluation pour faire progresser le développement durable, avec une attention particulière sur la réponse aux défis uniques de la Zambie.

Bien à vous,

Mupeta Lovemore

Chère Emilia,

Merci d'avoir proposé cette discussion. J'ai lu les contributions avec intérêt et souhaiterais ajouter un autre point de vue. La question que vous avez soulevée en examinant les pratiques concrètes d'évaluation m'a fait réfléchir à la profondeur et à l'étendue des pratiques liées aux ODD.

Dans mon travail d'évaluatrice externe pour de nombreuses organisations, dans le cadre de méta-évaluations, d'évaluations institutionnelles d'organisations nationales et multilatérales et de synthèses d'évaluation, je participe ou suis amenée à lire de manière approfondie au moins une centaine de rapports d'évaluation par an. Les réponses parvenues sur ce fil de discussion fournissent de très bons exemples de bonnes pratiques qui se situent au sommet de l'évaluation des ODD et sont très précieux, mais nous ne devons pas passer à côté de pratiques moins visibles qui contribuent également aux ODD.

Pour illustrer ce point, pensons à un atoll, à un iceberg ou à une chaîne de montagne. Les pointes sont visibles mais il y a, en dessous, des masses qui sont reliées aux cimes. Cela m'a amené à considérer trois idées principales, bien qu'il y en ait sans doute davantage.

Au-delà des ODD

Les ODD ne sont pas isolés. Ils ont été élaborés dans le cadre du Programme de développement durable à l'horizon 2030 – Transformer notre monde. Les ODD sont seulement des jalons sur un parcours vers un sommet plus important. Ce ne sont pas les seuls processus qui contribuent au développement durable, mais ils nous aident à focaliser notre attention. La tendance consistant à n'examiner que les quelques «évaluations des ODD» ne rend pas compte du nombre croissant d'évaluations menées dans les pays et les organisations en relation avec le travail stratégique accompli dans le cadre des réponses nationales et institutionnelles pour s'engager dans le Programme à l'horizon 2030. Ces réponses sont reflétées dans les plans de développement nationaux, le changement institutionnel, les évolutions vers des approches multisectorielles des ODD ou l'adoption d'approches plus participatives pour ne citer que quelques influences du travail d'évaluation. Le réseau Multilateral Organisation Performance Network (MOPAN) est un bon exemple car il a intégré l'évaluation de la mesure dans laquelle une organisation multilatérale, financée par les 22 pays membres du MOPAN, a modifié sa stratégie et ses systèmes liés à son mandat pour s'aligner sur le Programme à l'horizon 2030. Ces évaluations sont utilisées par l'organisation pour prendre en compte les améliorations stratégiques et systématiques cohérentes avec le Programme à l'horizon 2030 et les autres engagements mondiaux.

En deçà des indicateurs des ODD

Alors que les pays et les organisations évoluent, des pays comme le Népal, le Ghana et beaucoup d'autres ainsi que des organisations à tous les niveaux ont intégré les indicateurs des ODD dans leurs plans et pris en compte d'autres facteurs de la culture et du pays qui étaient importants, ce qui a conduit à une suite d'indicateurs pertinents pour différents contextes. Comme l'a affirmé Ram très clairement, ce sont désormais des processus normaux et nous pouvons donc regarder au-delà et de manière plus approfondie. Les ENV (examens nationaux volontaires) sont seulement une partie du processus. L'effet des indicateurs des ODD n'est qu'une partie de ce qui est visible concernant le travail accompli pour la réalisation des ODD. Certaines des évaluations que j'ai lues sont clairement liées à la réponse aux ODD mais elles mentionnent peut-être à peine un lien à un ODD spécifique. Elles génèrent toutefois ensemble un groupe de travaux d'évaluation qui est précieux pour progresser dans le Programme à l'horizon 2030.

Plus large que le secteur de l'évaluation. Le travail qui a été accompli à travers les conférences sur les capacités nationales d'évaluation et les autres initiatives de renforcement des capacités d'évaluation a renforcé la capacité d'évaluation qui s'est étendue et s'est propagée aux autres systèmes nationaux et infranationaux ainsi qu'aux contextes locaux. Si nous adhérons au principe selon lequel les évaluations sont conçues pour soutenir la redevabilité et l'apprentissage afin d'améliorer la conception, la mise en œuvre, la performance et les réalisations qui permettent de progresser vers un avenir plus durable, alors l'impact de nombreuses évaluations qui sont menées à tous les niveaux contribue aux résultats du Programme à l'horizon 2030.

Point de vue réaliste. Les idées précédentes sont exprimées sans volonté d'idéaliser ou d'affirmer que le secteur de l'évaluation accomplit de bons progrès dans l'évaluation liée aux ODD. Il y a de nombreuses crevasses, fissures et failles. Certaines zones sont cachées, d'autres s'écroulent. Je suis, comme beaucoup d'autres, déçue qu'il ne soit pas fait davantage. Mais ne soyons pas myopes et ne pensons pas uniquement en termes d'évaluations des ODD à grande échelle en passant à côté du reste du travail considérable qui est en cours.

Bien à vous,

Dorothy Lucks 

Executive Director, SDF Global.

Chère Emilia,

Je souhaiterais partager l'expérience de la Finlande et la manière dont les évaluations des ODD sont menées à différents niveaux du gouvernement.

La Finlande a évalué ses progrès dans la mise en œuvre des ODD et a réalisé deux évaluations nationales de la mise en œuvre du Programme à l'horizon 2030, toutes deux menées par le Bureau du Premier Ministre.

La première était une évaluation indépendante nommée PATH2023, commandée en 2018 par le Gouvernement finlandais. Cette évaluation a analysé les documents politiques en appliquant un cadre d'économie politique pour comprendre la théorie du changement sous-jacente et examiné l'état du développement durable en adoptant l'approche 4I: institutions, intérêts, idées et informations. Elle a pris en compte des indicateurs nationaux de durabilité, les objectifs politiques et la dimension mondiale du développement durable. L'analyse s'est appuyée sur des données provenant d'enquêtes, d'entretiens avec des experts et de contributions issues d'ateliers nationaux. La supervision était effectuée par un groupe de pilotage et un groupe de soutien, avec la contribution d'un panel d'experts sur le développement durable et les conseils de la communauté internationale de l'évaluation, en particulier d'EvalPartners.

En 2023, une deuxième évaluation a eu lieu en examinant les progrès réalisés depuis la précédente. Elle a adopté des méthodes qualitatives, comprenant une analyse documentaire, des entretiens, des enquêtes et une analyse comparative. Plus précisément, elle a organisé des entretiens avec 45 experts du gouvernement central et des ateliers réunissant 40 participants autour du rôle du gouvernement et de l'engagement de la société dans la mise en œuvre du Programme à l'horizon 2030. Une enquête a recueilli les opinions auprès de différents secteurs et une analyse comparative des Pays-Bas, de la Suède et de l'Allemagne a apporté des éléments supplémentaires. L'évaluation a identifié entre autres les goulots d'étranglement dans le modèle de gouvernance et formulé des recommandations pour poursuivre la mise en œuvre du Programme à l'horizon 2030.

Le processus national d'évaluation des ODD en Finlande est étroitement mêlé aux Examens nationaux volontaires (ENV): elles sont en effet perçues comme un moyen permettant d'intégrer les résultats dans le cycle stratégique et de planification et d'augmenter la visibilité et l'utilisation de l'évaluation dans le pays. Les résultats de l'évaluation de 2019 ont influencé les partis politiques lors des élections parlementaires et ont orienté le programme du gouvernement pour 2019 ainsi que l'Examen national volontaire 2020. De la même manière, l'évaluation de 2023 a joué un rôle central dans la programmation du nouveau programme gouvernemental et contribuera à l'ENV 2025.

Au-delà du niveau national, l'Unité d'évaluation du développement du Ministère des affaires étrangères commande des évaluations centralisées de la politique de développement et de la coopération de la Finlande dans lesquelles les ODD sont intégrés dans les différents objectifs de la politique de développement. Cette Unité a également publié une note d'orientation sur le renforcement des capacités d'évaluation nationale et les évaluations menées par les pays.

Enfin, au niveaux infranational et institutionnel, les municipalités et les gouvernements locaux finlandais ont joué un rôle actif de plus en plus important pour intégrer les ODD et leur suivi et évaluation dans leur travail. Certains gouvernements locaux ont développé des solutions numériques pour les données relatives aux ODD. Les institutions et agences gouvernementales telles que l'Institut d'assurance sociale de Finlande et l'administration fiscale finlandaise se sont également engagées dans cette voie.

J'espère que cette expérience pourra aider d'autres gouvernements pour aborder l'évaluation des ODD et je reste disponible pour toute demande de clarification ultérieure.

Nea-Mari

Lead Evaluation Specialist; Deputy Director 
Development Evaluation Unit (EVA-11) 
Ministry for Foreign Affairs of Finland
 

----

Berg, Annukka; Lähteenoja, Satu; Ylönen, Matti; Korhonen-Kurki, Kaisa; Linko, Tyyra; Lonkila, Kirsi-Marja; Lyytimäki, Jari; Salmivaara, Anna; Salo, Hanna; Schönach, Paula and Suutarinen, Ira (2019) PATH2030 – An evaluation of Finland’s sustainable development policy. Prime Minister’s Office, Helsinki.http://urn.fi/URN:ISBN:978-952-287-655-3

D'Errico, S., Geoghegan, T. and Piergallini, I. (2020). Evaluation to connect national priorities with the SDGs. IIED, London. Available at https://www.iied.org/17739iied

Haila, Katri; Salminen, Vesa; Roiha, Ulla; Uitto, Heidi; Vikstedt, Elina; Vinnari,  Eija; Vakkuri, Jarmo; Oreschnikoff, Aleksis and Uusikylä, Petri (2023) Assessing the implementation of the 2030 Agenda in Finland. Prime Minister’s Office, Helsinki. Report available (Finnish) and policy brief in English at: https://urn.fi/URN:ISBN:978-952-383-381-4

Ministry for Foreign Affairs (2022) HOW TO? Practical tips for supporting evaluation capacity and systems in partner countries. Available at: https://um.fi/documents/384998/0/Practical_tips_for_supporting_evaluation_capacity_and_systems.pdf/d1ed61b4-4e5a-0198-6f86-4c6766ae8887?t=1678449920584

Räkköläinen, Mari and Saxén, Anu (2022). ”Pathway to the Transformative Policy of Agenda 2030: Evaluation of Finland’s Sustainable Development Policy. In: Uitto, J.I., Batra, G. (eds) Transformational Change for People and the Planet. Sustainable Development Goals Series. Springer, Cham. https://doi.org/10.1007/978-3-030-78853-7_16

Prime Minister’s Office, Finland (2023) POLICY BRIEF 2023:7. Available at: http://urn.fi/URN:ISBN:978-952-383-381-4 (Accessed 07 December 2023). 

J’ai mené une évaluation dans l’objectif des ODDs au Mali et afin d’atteindre nos objectifs on a procédé à une évaluation participative.  

Chère Emilia,

Merci d'avoir soulevé cette importante question.

1.     J'ai eu l'occasion de participer à l'évaluation de certains aspects des ODD au Népal. Je trouve que l'évaluation d'objectifs ou de cibles spécifiques dans le cadre des ODD est un processus normal et que nous pouvons tirer des enseignements des approches d'évaluation existantes. L'évaluation de la durabilité à un niveau plus élevé, en tenant compte de la dimension spatio-temporelle de certaines interventions pendant ou à la fin de l'intervention, peut toutefois s'avérer une tâche difficile. Avec mon expérience limitée, j'ai rencontré certains défis lors de l'évaluation des interventions liées aux ODD. Je pense qu'il était bon de considérer la portée des interventions à un niveau plus élevé et de prendre en compte l'ensemble de l'écosystème des interventions sélectionnées (puisque les ODD sont intersectoriels, collaboratifs et bien d'autres termes utopiques), ce concept théoriquement attrayant a cependant posé quelques difficultés notables dans l'évaluation. Certaines d'entre elles sont des interventions à portée étroite ou basées sur des projets (à court terme, peu étendues, trop axées sur la fourniture d'activités, isolées, systèmes MEAL faibles et bien d'autres) ; les approches traditionnelles et l'état d'esprit de la commande et de la gestion de l'évaluation (comme le manque d'approche de la pensée systémique et les vues anticipatives que l'intervention peut mener à l'avenir) ; et l'évaluation opérationnelle de la durabilité (comme la conception faible de l'intervention, le manque de données critiques, le manque d'attribution et le temps limité alloué pour évaluer la condition de la durabilité).En outre, il existe des lacunes importantes dans les politiques d'évaluation, des défaillances institutionnelles et des lacunes critiques dans les capacités d'évaluation de la durabilité aux niveaux national et infranational. En outre, je ne vois pas beaucoup d'intérêt/enthousiasme pour effectuer une évaluation ex post des programmes, même de la part des grands donateurs et des partenaires de développement.

2.      L'évaluation des ODD est encore un concept émergent pour de nombreuses organisations, y compris les agences de l'ONU. Les ODD étant encore nouveaux au niveau infranational, la demande de ce dernier est pour l'instant faible. 
 

Salutations à tous, 

Ram Chandra Khanal 

Bonjour, Emilia !

Permettez-moi de commencer par un commentaire qui sera extrêmement impopulaire et que j'ai fait dans plusieurs autres forums, à savoir que la liste actuelle des ODD est logiquement défectueuse en ce qui concerne les besoins justifiables de la population. Cela dit, l'évaluation dans ce contexte est confrontée à deux défis fondamentaux :

À quel niveau l'évaluation doit-elle être réalisée pour être utile aux décideurs politiques et à ceux qui conçoivent la mise en œuvre des politiques ? Il est difficile de l'envisager autrement qu'aux niveaux national, régional et local d'un pays. Les contributions internationales devraient s'inscrire dans ce cadre. 
L'évaluation semble porter sur divers points ; toutefois, les ODD étant destinés à améliorer la qualité de vie de personnes réelles, il est impératif que l'évolution de la qualité de vie soit au centre de l'évaluation. Il est évident que cela varie considérablement d'un pays à l'autre et qu'il n'est donc pas possible d'établir une norme en la matière.

Il est très dommage que les écologistes de tout poil, les nutritionnistes, le lobby de la santé, etc. n'aient pas suffisamment mis l'accent sur l'arrêt de la croissance de la population mondiale, voire sur sa réduction. Sans cela, le reste resterait chimérique.

Mes meilleurs vœux !

Lal.

Super helpful! thanks a lot for sharing the report Mark.

Best,

Stefano D’Errico

J'aborde peut-être la question sous un angle légèrement différent de celui qu'Emilia avait prévu, mais il se fait que mon équipe vient de publier un rapport sur les preuves d'évaluation (évaluations d'impact en particulier) pour les ODD. Nous avons classé plus de 7 000 études d'évaluation d'impact par ODD, dans le but de répondre à la question : "Si je suis un décideur politique travaillant à l'amélioration des progrès réalisés dans le cadre d'un ODD particulier, sur quelles données d'évaluation puis-je m'appuyer ?" (Les questions de recherche sont formulées de manière beaucoup plus formelle dans le rapport, mais c'est l'idée de base).

Nous avons constaté qu'il y a eu beaucoup de travaux d'évaluation sur les ODD "humains" (par exemple, la pauvreté, la sécurité alimentaire, l'éducation), mais que les ODD "planétaires" ont été largement négligés dans la littérature (à l'exception d'un grand effort récent des chercheurs chinois pour évaluer les réglementations environnementales en Chine).

Chère Emilia, j'ai évalué la cohérence d'un programme environnemental européen avec les objectifs du Green Deal et les ODD. Cette analyse était basée sur la mise en correspondance des domaines thématiques du programme avec les actions du Green Deal et les objectifs des ODD. Les résultats ont été très positifs et ont révélé des domaines thématiques spécifiques du programme qui contribuent le plus (en termes de nombre de projets financés et de budget alloué) au Green Deal et aux ODD.