¿Cómo estamos progresando en la evaluación de los ODS? 

Estimados colegas,

Muchas gracias por su participación e interacción en esta discusión. Comparto unos breves comentarios sobre las contribuciones más recientes:

Nea-Mari, gracias por la información y los enlaces sobre el SyE finlandés de los ODS a nivel subnacional. ¡Son ejemplos inspiradores para otros países y ciudades! Esosa, muchas gracias por destacar el papel fundamental de la evaluación en los programas de desarrollo basados en evidencias. Mark, coincido contigo en que reconocer las limitaciones de nuestros estudios/evaluaciones es siempre una buena práctica. Gracias por poner de relieve esta reflexión.

Esta discusión llega a su fin, pero habrá más oportunidades en el futuro para seguir compartiendo ideas y conocimientos sobre el apoyo a los avances hacia el cumplimiento de los ODS por medio de la evaluación.

Les deseo a todos lo mejor. Estén atentos a futuras actualizaciones. 

Emilia

Estimada Emilia,

En relación con tu último punto, me alegra que te preguntes por qué nuestro informe descubrió que se están evaluando algunos ODS (con evaluaciones cuantitativas de impacto) pero otros no. Para dar un poco de contexto, solemos evitar este tipo de preguntas causales, ya que nuestros datos no permiten contestarlas y no somos expertos en todos los sectores que abarcan. 

Sin embargo, obvia decir que nos hemos preguntado por las razones de este hallazgo al redactar el informe. Al igual que tú, tengo curiosidad por saber qué piensan al respecto los expertos en el sector medioambiental. ¡Y también me gustaría que compartieras tus hipótesis!

Muchas gracias,

Mark

Estimados miembros,

A continuación incluyo mi contribución a esta discusión.

La evaluación es un factor fundamental y un tema prioritario a la hora de valorar el progreso hacia el cumplimiento de los Objetivos de Desarrollo Sostenible (ODS) de las Naciones Unidas. El énfasis en el papel que desempeña en el logro de los ODS se debe a su capacidad para marcar la diferencia y los avances institucionalizados en la elaboración de datos y estadísticas, que impulsan el progreso relacionado con los ODS en todos los países. La evaluación es vital para la investigación y los programas/proyectos relacionados con estos objetivos globales, y contribuye a dar a conocer sus resultados. 

Quienes se dedican a la evaluación pueden determinar perfectamente los niveles de progreso y la forma de reducir la brecha entre países. Por ejemplo, para medir y conocer mejor la desigualdad económica entre el norte y el sur globales, se pueden realizar evaluaciones basadas en fuentes de datos fiables. A su vez, para proporcionar ayuda a un país y reducir la desigualdad, es imprescindible evaluar su economía con información/evidencias sólidas. No se puede pedir ayuda para avanzar hacia el cumplimiento de los ODS si los evaluadores no validan los datos disponibles. Para comprender el progreso económico, es necesario evaluar información relevante y validar las conclusiones correspondientes. Por citar un ejemplo, un estudio de investigación sobre datos de China y Estados Unidos de América ofrece una comparación sólida entre sus niveles de desarrollo y progreso. 

La evaluación es fundamental para el logro y el éxito de los ODS. Es una práctica que genera conocimientos y hallazgos. Además, valida las conclusiones y las evidencias empíricas de la investigación y los programas/proyectos pertinentes.

Para validar las evidencias se pueden utilizar índices e indicadores. En el caso del estudio sobre China y los Estados Unidos de América, los investigadores obtuvieron la información del Banco Mundial y el Fondo Monetario Internacional. Se trata de fuentes fiables que, en este caso concreto, permiten validar la fortaleza de sus economías y su hegemonía mundial. La investigación es un veredicto importante para determinar la desigualdad económica entre el norte y el sur globales, y un paso previo necesario para solicitar programas o proyectos destinados a reducir la brecha. Conocer un problema ayuda a solucionarlo. Éste es uno de los principios de la evaluación.

Sin embargo, para seguir avanzando hacia el cumplimiento de los ODS, los países deben ampliar sus conocimientos sobre cuestiones fundamentales para el desarrollo de sus economías. De ahí que la evaluación sea fundamental para los ODS. Además, estos conocimientos contribuirán a validar los progresos realizados hasta la fecha y determinar cómo mejorarlos. Asimismo, se debe realizar un seguimiento y evaluación adecuado de los 17 ODS para marcar la diferencia en el crecimiento de la economía mundial y la sostenibilidad del desarrollo. La contribución de la evaluación a las metas de los ODS es imprescindible, ya sea a través de la investigación o por medio de programas/proyectos. 

No obstante, creo que es necesario contar con un órgano rector institucionalizado para la evaluación y validación de datos. Permitiría analizar los avances en materia de desarrollo a nivel local, estatal/regional, nacional, subnacional e internacional. Esto contribuir a alcanzar las metas de los ODS. La información obtenida a nivel local ofrecerá una imagen real del desarrollo de las comunidades a nivel nacional.

Además, para identificar qué funciona, es preciso adoptar un enfoque ascendente: los evaluadores deben comenzar su labor a nivel local, pasando posteriormente a los niveles nacional e internacional.  Contar con un órgano rector institucionalizado para la evaluación y validación de datos permitiría identificar con facilidad aquello que funciona, dar a conocer las enseñanzas adquiridas para cumplir los ODS y avanzar en su consecución de manera eficaz. 

Todos estos factores están relacionados con las diferencias culturales, muy importantes para el desarrollo de un país. De ahí que la evaluación local y nacional sea primordial para alcanzar las metas de los ODS. En otras palabras, aquello que funciona para un país puede no funcionar para otro. Es decir, los factores ambientales y las diferencias e influencias se comprenden mejor a través de los evaluadores locales y nacionales, permitiendo así mayores avances en los programas/proyectos relacionados con los ODS. 

La evaluación es un componente fundamental para optimizar posibles mejoras en la economía mundial, la paz, la justicia, el hambre, la atención sanitaria, la educación, la pobreza, etc.

Por último, para lograr que el desarrollo sea verdaderamente integral y eficaz en todos los ámbitos, es necesario que un conjunto amplio de evaluadores nacionales, subnacionales y locales —procedentes del sector privado, organizaciones de la sociedad civil, organizaciones gubernamentales y organismos de las Naciones Unidas, entre otros— colabore en el seguimiento y evaluación del cumplimiento y la sostenibilidad de las metas de los ODS. Esto dará lugar a políticas inclusivas para todas las partes interesadas, destinadas a lograr los ODS en todo el mundo.

Muchas gracias.

Esosa

Gracias por las preguntas sobre la experiencia finlandesa. Por poner algunos ejemplos a nivel subnacional, el programa Ciudad Sostenible (2019-2023) del Ministerio de Medio Ambiente puso a prueba un conjunto de indicadores municipales de desarrollo sostenible creados conjuntamente. La Asociación de Autoridades Locales y Regionales de Finlandia tiene un proyecto emblemático para las seis ciudades más grandes de Finlandia sobre la dirección estratégica de los objetivos de desarrollo sostenible. La red ha creado conjuntamente herramientas para los ODS.

Algunos enlaces de interés pueden ser :

Página web: Asociación de Autoridades Locales y Regionales de Finlandia; ODS: https://www.localfinland.fi/network-strategic-management-sdgs-cities 

Página web: Ciudad Sostenible

https://kestavakaupunki.fi/en/-/indicators-for-sustainable-urban-development-kekanua- 

Estamos trabajando con nuestros socios para elaborar la segunda edición de la Guía de evaluación de los ODS https://www.iied.org/17739iied . Estén atentos para leer más este año.

Saludos cordiales,

Nea-Mari 

Estimados colegas,

Gracias por contribuir a esta animada discusión.

Comento algunas cuestiones, no con la intención de agotar la conversación (¡ni tampoco de resumirla!), sino con la esperanza de inducir alguna reflexión adicional.

1. No nos deberíamos limitar a medir la contribución/los progresos hacia el cumplimiento de los Objetivos de Desarrollo Sostenible (ODS). Existen diversos estudios/evaluaciones e indicadores específicos (incluidos indicadores indirectos) que contribuyen también a conocer los avances en materia de desarrollo. Los ODS no son algo aislado y puede haber varias vías y caminos que lleven a un mismo lugar. Dorothy y John Akwetey expusieron este asunto, aunque también se aborda en otras contribuciones. Asimismo, pusieron de relieve la importancia de las evaluaciones a nivel nacional, institucional y subnacional, más allá de las evaluaciones a gran escala de los ODS.

El enfoque utilizado por el estudio sobre evidencias evaluativas compartido por Mark Engelbert —que utilizó las evaluaciones de impacto como elemento fundamental— parece abordar esta cuestión. 

En la misma línea, cabría mencionar también la labor que está desarrollando la Coalición mundial para la síntesis de evidencias evaluativas sobre los ODS. La síntesis se puede utilizar como alternativa a una evaluación centrada en los ODS, o como parte de un estudio más amplio. Las síntesis siguen un enfoque sistemático y transparente para identificar, recopilar y evaluar la calidad de evaluaciones individuales. Y, posteriormente, sintetizar las conclusiones y lecciones extraídas de los conjuntos de evidencias evaluativas. El enfoque incluye mapas de carencias de evidencias y otras herramientas, incluido un proceso riguroso (y su marco correspondiente) para incluir/excluir estudios.

2. Los desafíos para evaluar los ODS a los que se enfrentan la mayoría de países y actores del desarrollo —y que Ram Khanal Lovemore Mupeta y Hadera Gebru comparten con diferentes enfoques— incluyen recursos limitados, datos insuficientes, falta de técnicas de evaluación adecuadas y metas complejas interrelacionadas. En vista de estos desafíos, deberíamos: i) considerar/buscar otros enfoques (la síntesis es uno de ellos), en lugar de realizar evaluaciones que pueden ser desalentadoras; ii) empezar poco a poco; y iii) planificar acertadamente estudios que puedan ser útiles. La participación en el proceso de profesionales nacionales (evaluadores y encargados de la ejecución, de diferentes sectores) podría contribuir a concienciar a la población y crear capacidad evaluativa.

Desafortunadamente, los grandes disturbios y desafíos políticos pueden dar al traste con cualquier intento de evaluar los progresos hacia el cumplimiento de los ODS. Un ejemplo de esto es la situación en Etiopía, donde las crisis posteriores a la pandemia de la enfermedad por coronavirus (COVID-19) y la guerra civil han socavado todos los avances en materia de desarrollo.

3. El nivel subnacional (en particular el nivel local) es otro desafío reconocido, mencionado en muchas contribuciones. Nea-Mari, tengo curiosidad por conocer algún ejemplo de lo que ha estado haciendo Finlandia a nivel local: ¿qué tipos de soluciones digitales habéis adoptado para el seguimiento y evaluación (SyE) de los avances hacia el cumplimiento de los ODS? También me sorprende positivamente la influencia de la evaluación en las elecciones parlamentarias y la planificación del nuevo programa de gobierno. Nea-Mari, ¿cuáles dirías que son los elementos fundamentales que hacen que la evaluación sea tan poderosa en Finlandia?

4. Ejemplos de informes. Pelagia Monou, Fabandian Fofana: me pregunto si los informes de las evaluaciones en las que habéis participado son públicos y podríais compartir los enlaces con nosotros. Pelagia, ¿pudisteis ir más allá del número de proyectos y presupuesto para aprovechar las contribuciones/resultados? Fabandian, ¿medisteis las contribuciones a los ODS a nivel local? ¿Quién participó y de qué manera?

5. Y, por último, aunque no por ello menos importante, una especie de nota al margen sobre un hallazgo del informe de la Iniciativa internacional para la evaluación del impacto (3ie), compartido por Mark: se ha descuidado la labor de evaluación sobre los ODS relacionados con el planeta (ODS 6, ODS 12, ODS 13, ODS 14 y ODS 15). El informe sostiene que se han realizado muy pocas evaluaciones de impacto del ODS 12 (Producción y consumo responsables), el ODS 14 (Vida submarina) y el ODS 15 (Vida de ecosistemas terrestres). Aunque tengo mi propia hipótesis para justificar este hallazgo, me pregunto si Stefano D'Errico, Ram Khanal y otros colegas con experiencia en el sector medioambiental querrían compartir alguna explicación😊.

Aún queda mucho camino por recorrer: ¡Chris, Olivier y Lal nos recuerdan lo poco que queda para el marco posterior a la Agenda 2030!

¡¡Gracias a todos por vuestras contribuciones!!

Un cordial saludo,

Emilia

Saludos

Aquí está mi contribución al tema de debate en curso: ¿cómo estamos progresando en la evaluación de los ODS?

Aprecio y agradezco a todos los que han contribuido/compartido su experiencia/ a este importante tema de debate. También hago extensivo mi agradecimiento a las Naciones Unidas y a las partes interesadas que han aunado esfuerzos desde 2015 para establecer los ODS (17 objetivos ambiciosos e interrelacionados) para la mejora de la población mundial y del planeta.

Según mi experiencia, los trabajos de evaluación del desarrollo se enfrentan a menudo a limitaciones como la falta de datos o la inadecuación de los mismos, un presupuesto limitado, limitaciones de tiempo y la falta de técnicas de evaluación adecuadas, entre otras. Estas limitaciones también pueden verse agravadas por crisis naturales o provocadas por el hombre (p. ej., la guerra). Del mismo modo, los trabajos de evaluación de los ODS, cuando se llevan a cabo, pueden enfrentarse a limitaciones similares.

Permítanme reflejar la situación en Etiopía con respecto a los avances en la evaluación de los ODS. En 2015, Etiopía incorporó de forma proactiva y alineó los ODS con el Segundo Plan Nacional de Crecimiento y Transformación (GTP II), lo que resultó muy alentador. De hecho, Etiopía contaba entonces con un buen historial en algunas iniciativas de desarrollo, similares a algunos de los ODS.

Sin embargo, el alentador impulso de las iniciativas/trabajos de desarrollo, seguimiento y evaluación relacionados con la consecución de los ODS casi se ha roto/estancado/revertido debido a las crisis naturales (por ejemplo, Covid-19) y a la devastadora guerra civil en curso en la mayor parte de Etiopía. A mi entender, ha sido y es difícil llevar a cabo o siquiera pensar en evaluar los logros de los ODS desde los últimos seis años. Por lo tanto, creo que el progreso de la evaluación de los ODS en Etiopía, dada la devastadora guerra civil en curso agravada por el efecto Covid-19 anterior, es pobre. Debido a la guerra civil en curso, por no hablar de la consecución de los ODS, la situación es a la inversa. Por mencionar algunos ejemplos: millones de etíopes son desplazados internos y están sumidos en la pobreza y el hambre; millones de estudiantes no pueden asistir a la escuela; millones de personas tienen un acceso deficiente al agua potable y al saneamiento; en muchas partes del país se producen graves violaciones de los derechos humanos, en particular de las mujeres.  Por lo tanto, aunque los expertos en evaluación no hayan evaluado la consecución de los ODS en Etiopía, los ciudadanos de a pie pueden entender que la consecución de los objetivos de los ODS no es buena en general, lo que requiere la atención de todas las partes implicadas, a nivel nacional, regional e internacional.

Atentamente,

Hadera Gebru
Consultora principal de desarrollo y evaluación 
Addis Ababa, Ethiopia

Estimada Emilia,

Gracias por plantear esta discusión. ¡Una reflexión interesante! He leído las contribuciones con interés y creo que ir más allá de la evaluación de los avances hacia el cumplimiento de los Objetivos de Desarrollo Sostenible (ODS) es crucial para alcanzar éstos en 2030. Ahora bien, aunque el seguimiento de los progresos realizados es importante, solamente muestra una parte de la situación. A continuación, enumero algunos posibles ámbitos en los que ayudo a organizaciones e instituciones a ir más allá de las evaluaciones tradicionales:

1. Comprender mejor los desafíos y carencias:

• Ir más allá de las estadísticas habituales: desglosar los datos para comprender cómo las diferentes poblaciones, regiones y grupos están avanzando o retrocediendo.
• Analizar las causas fundamentales: no limitarse a medir resultados, profundizar en los factores subyacentes que dificultan los avances (p. ej. desigualdades, problemas de gobernanza o falta de recursos).
• Examinar las consecuencias no deseadas: evaluar los posibles efectos negativos de las medidas adoptadas para alcanzar algunos ODS, y cómo podrían afectar a otros.

2. Facilitar la acción y la implementación:

• Identificar soluciones prácticas: utilizar datos y análisis para recomendar intervenciones y políticas prácticas que puedan acelerar los avances.
• Trazar vías para la implementación: reducir la brecha entre las políticas y la acción describiendo pasos concretos para lograr los resultados deseados.
• Implicar a las partes interesadas: asociarse con comunidades, empresas y sociedad civil para crear e implementar soluciones de forma conjunta, fomentando la apropiación y la rendición de cuentas.

3. Promover la innovación y la colaboración:

• Explorar soluciones revolucionarias: ir más allá de los enfoques tradicionales y adoptar tecnologías, modelos sociales y prácticas empresariales innovadoras que puedan acelerar los avances de manera significativa.
• Fomentar asociaciones entre múltiples partes interesadas: salir del aislamiento y promover la colaboración entre diferentes sectores, aprovechando la variedad de conocimientos especializados y recursos.
• Apoyar el intercambio de conocimientos y la creación de capacidad: compartir las mejores prácticas y las enseñanzas adquiridas en regiones y países para acelerar los progresos a nivel mundial.

4. Abordar cuestiones sistémicas:

• Abordar las desigualdades subyacentes: reconocer que el acceso desigual a los recursos, las oportunidades y el poder dificulta los avances, y priorizar aquellas acciones que aborden estos desequilibrios.
• Fortalecer las instituciones y la gobernanza: invertir en la creación de instituciones fuertes, inclusivas y responsables que puedan implementar los ODS de manera eficaz.
• Promover el desarrollo sostenible: reconocer que la degradación medioambiental y el cambio climático ponen en peligro los avances hacia el cumplimiento de todos los ODS, e integrar la sostenibilidad en todos los esfuerzos.

Recordemos que para lograr los ODS es preciso un enfoque integral que vaya más allá de cifras y estadísticas. Si conocemos los retos, fomentamos la acción, adoptamos soluciones innovadoras y abordamos las cuestiones sistémicas, podemos ir más allá de la mera evaluación y crear un futuro más justo, equitativo y sostenible para todos.

¿Hay algún ámbito o desafío específico en los ODS que les gustaría explorar más a fondo? Estaré encantado de ayudarles en todo lo que pueda.

Un cordial saludo,
John

---
John Akwetey (he/him/his)
Doctoral Graduate Associate, The Evaluation Center
Interdisciplinary Ph.D. in Evaluation (IDPE) 
Western Michigan University
1903 W. Michigan Avenue
Kalamazoo, MI 49008-5237
+ 1 (269) 210-9349

Editorial Board Member, American Journal of Evaluation (AJE) 
 

Saludos.

Chris señala que sería una buena idea formular, a grandes rasgos, lo que debería hacerse después de 2030.

Sin embargo, tal empresa sería útil si y sólo si tenemos una noción razonablemente clara de lo que se ha hecho y no se ha hecho con referencia al actual conjunto de ODS a pesar de su falta de cohesión lógica. A este respecto, es difícil ver cómo puede adquirirse tal conocimiento sin la evaluación.

Una vez que se disponga de este conocimiento, cabe esperar que el próximo conjunto de objetivos de desarrollo posteriores a 2030 se formule de manera que incorpore una mayor cohesión lógica con referencia a las seis necesidades humanas fundamentales dentro de las propias normas culturales de las personas.

El conocimiento de esas necesidades fundamentales es evidente por sí mismo, y por lo tanto sin jerga, a saber, nutrición con disfrute culinario -después de todo, todavía no somos como máquinas que sólo necesitan combustible-, buena salud, seguridad en su sentido más amplio, educación en su sentido más jutificable, procreación y lo que podría llamarse objetivo no material, que abarca el disfrute estético, los juegos y deportes en los que uno participa y otras formas de entretenimiento. Esto es inmaterial porque su satisfacción no implica ninguna ganancia material.

La mayoría de los ODS actuales son subsumibles en nuestras necesidades fundamentales, ya que las primeras adquieren un valor como medio directo o indirecto de permitirnos alcanzar alguna necesidad fundamental; por lo tanto, son necesidades secundarias o terciarias que constituyen una red jerárquica interconectada de necesidades humanas cuyas ramificaciones reflejan el estado actual de desarrollo de una sociedad. Este desarrollo puede ser justificable o no, por ejemplo, el fomento del consumismo desenfrenado para lograr el crecimiento económico.

Salud.

Lal.

En cuanto a la pregunta de Chris, no estoy seguro de que vaya a haber un próximo marco de desarrollo mundial sucesora después de 2030. El multilateralismo no está en un buen momento. Los ODS se aprobaron tras el final de la guerra fría, pero por desgracia, la guerra fría está volviendo...  Así que está por ver si en 2030 habrá suficiente buena voluntad entre las naciones para llegar a una agenda sucesora.

En relación con los comentarios de Dorothy Lucks en el apartado titulado “Más allá de los ODS”, esperaba algunas sugerencias sobre el próximo marco de desarrollo, pero está claro que ésa no era su intención.

Los inicios de estos marcos se remontan a la meta “Salud para todos en el año 2000”, del entonces Director General de la Organización Mundial de la Salud (OMS), Halfdan Mahler. Posteriormente, el antiguo Secretario General de las Naciones Unidas, Kofi Annan (antiguo funcionario de la OMS), estableció los Objetivos de Desarrollo del Milenio. Hoy en día contamos con los Objetivos de Desarrollo Sostenible (ODS). Dado que el valor de estos marcos de desarrollo radica más bien en el hecho de que proporcionan un marco y no tanto en el grado de cumplimiento de sus objetivos y metas individuales, es importante empezar a trabajar en el próximo marco de desarrollo —y, en particular, en aquello que se ha obviado hasta ahora— mucho antes de 2030. El tratamiento independiente del conocimiento y la información en el desarrollo es una de las cuestiones a abordar.

No basta con considerarlos como algo “transversal” en el desarrollo. Estamos siento testigos del impacto de la desinformación en el conjunto de evidencias del desarrollo. Los bulos y la información falsa están causando cada vez más muertes, como ocurrió en la pandemia de la enfermedad por coronavirus (COVID-19). Incluso cuando no son letales, ralentizan el ritmo del desarrollo humano basado en evidencias. Necesitamos ser capaces de supervisar y evaluar la salud del conocimiento como un objetivo específico —con metas e indicadores— del próximo marco de desarrollo.

Un cordial saludo,

Chris

Chris Zielinski

Centro de Salud Mundial, Universidad de Winchester, Reino Unido de Gran Bretaña e Irlanda del Norte. 

Presidente electo de la Asociación Mundial de Editores Médicos (WAME, por sus siglas en inglés)

Blogs: http://ziggytheblue.wordpress.com y http://ziggytheblue.tumblr.com
Publicaciones: http://www.researchgate.net y https://winchester.academia.edu/ChrisZielinski/

Estimada Emilia,

Gracias por iniciar esta conversación vital sobre el papel de la evaluación en el logro de los Objetivos de Desarrollo Sostenible (ODS). No cabe duda de que esta práctica es crucial para evaluar los progresos, identificar estrategias eficaces y extraer enseñanzas de experiencias de experiencias, a fin de acelerar los avances hacia el cumplimiento de los ODS. A continuación, comparto algunas reflexiones, centradas específicamente en el contexto de Zambia y sus desafíos en materia de evaluación:

Incorporación de los ODS a las evaluaciones. Aunque en nuestros marcos de evaluación nos esforzamos por alinear los objetivos de los proyectos con ODS específicos, somos conscientes de los desafíos singulares a los que se enfrenta Zambia. La escasez de recursos y las limitaciones en materia de capacidad suelen dificultar la evaluación exhaustiva de las contribuciones a los ODS. Se están realizando esfuerzos para mejorar la integración, pero la falta de recursos continúa siendo un obstáculo importante.

Estudios de síntesis. Realizar estudios de síntesis en Zambia es difícil, debido a diferentes carencias en lo que respecta a la disponibilidad y calidad de los datos. La ausencia de un repositorio centralizado para hallazgos de evaluaciones dificulta la síntesis de lecciones comunes, mejores prácticas y desafíos de los diferentes proyectos. Reforzar la infraestructura de datos es crucial para superar esta limitación.

Demanda más allá de los organismos de la Naciones Unidas. Zambia ha mostrado un creciente interés en evaluaciones relacionadas con los ODS más allá de organismos de la Naciones Unidas, especialmente a nivel nacional. Sin embargo, continúa habiendo desafíos a nivel subnacional, ámbito en el que resulta necesario aumentar la concienciación y reforzar el desarrollo de capacidades. El compromiso es evidente, pero se necesitan esfuerzos dirigidos para implicar a diferentes partes interesadas.

Compromiso a nivel subnacional. Las entidades subnacionales de Zambia —incluidos gobiernos locales y organizaciones regionales— participan cada vez más en evaluaciones relacionadas con los ODS. Los enfoques adaptados son esenciales dada la diversidad de contextos locales, pero es necesario aumentar el apoyo y los recursos para garantizar una participación eficaz a este nivel.

Retos y oportunidades. Zambia se enfrenta a desafíos como la capacidad limitada, la falta de datos y la complejidad de las metas interrelacionadas de los ODS. Las oportunidades residen en aprovechar asociaciones y experiencias internacionales para abordar estos retos. Los esfuerzos de colaboración, el intercambio de conocimientos y las iniciativas dirigidas de capacitación pueden convertir estos desafíos en oportunidades para el desarrollo sostenible.

Estamos deseando participar en el próximo taller y seminario web sobre la evaluación de las contribuciones a los ODS. Compartiendo experiencias y puntos de vista esperamos contribuir a un conocimiento más detallado del papel de la evaluación en la promoción del desarrollo sostenible, prestando especial atención a los desafíos singulares de Zambia.

Un cordial saludo,

Mupeta Lovemore

Estimada Emilia,

Gracias por plantear esta discusión. He leído las contribuciones con interés y me gustaría añadir otra perspectiva. La discusión que propones sobre prácticas concretas de evaluación me hizo reflexionar sobre la profundidad y amplitud de prácticas relacionadas con los Objetivos de Desarrollo Sostenible (ODS). 

En mi trabajo como revisora externa de evaluaciones para diferentes organizaciones y evaluadora en metaevaluaciones, evaluaciones a nivel institucional en organizaciones nacionales y multilaterales y síntesis de evaluaciones, leo con detalle o participo en la elaboración de al menos cien informes de evaluación al año. Las aportaciones a esta discusión proporcionan algunos ejemplos punteros y muy valiosos de buenas prácticas de evaluación de los ODS, pero tampoco deberíamos pasar por alto prácticas menos visibles que también están contribuyendo a estos objetivos. 

Para ilustrarlo, podemos pensar en un atolón, un iceberg o una cadena montañosa. Las puntas son visibles, pero debajo hay masas conectadas con los picos. Esto me ha llevado a considerar tres puntos fundamentales, aunque no me cabe duda de que hay más.

Más allá de los ODS

Los ODS no son algo aislado. Se definieron como parte de la Agenda 2030 para el Desarrollo Sostenible, con el fin de transformar nuestro mundo. Los ODS son sólo banderas en el camino hacia una cumbre más importante. No son los únicos procesos que contribuyen al desarrollo sostenible, pero ayudan a centrar la atención. La tendencia a poner el foco en las escasas “evaluaciones de los ODS” no tiene en cuenta el número creciente de evaluaciones que surgen en países y organizaciones en relación con la labor estratégica desarrollada por medio de respuestas nacionales e institucionales a los compromisos de la Agenda 2030. Estas respuestas se reflejan en planes nacionales de desarrollo, cambios institucionales, transiciones a enfoques multisectoriales de los ODS o enfoques más participativos, por citar algunas influencias de la labor de evaluación. Un ejemplo es la Red de Evaluación del Desempeño de Organizaciones Multilaterales (MOPAN), que ha incorporado la evaluación de la medida en que esta organización multilateral —financiada por sus 22 países miembros— ha modificado su estrategia y sistemas en relación con su mandato para alinearse con la Agenda 2030. La organización utiliza estas evaluaciones para considerar mejoras estratégicas y sistemáticas en línea con la Agenda 2030 y otros compromisos globales.

Más allá de los indicadores de los ODS

A medida que los países y las organizaciones cambian, algunos de ellos (p. ej. Ghana, Nepal y muchos otros) y numerosas entidades a todos los niveles han integrado los indicadores de los ODS en sus planes y han reconocido otros factores culturales y nacionales importantes. Esto ha dado lugar a un conjunto de indicadores relevantes para diferentes contextos. Tal y como sostiene Ram con tanta claridad, estos procesos son ahora habituales. Por tanto, podemos profundizar en ellos e ir más allá. Los exámenes nacionales voluntarios son sólo una parte del proceso. Los efectos de los indicadores de los ODS son sólo una parte visible de todo los que se está haciendo para lograr estos objetivos. Algunas de las evaluaciones que leo están claramente vinculadas a la respuesta a los ODS, pero puede que apenas mencionen un vínculo con un ODS específico. Sin embargo, constituyen —en su conjunto— una labor valiosa para avanzar en el cumplimiento de la Agenda 2030.

Más allá del sector de la evaluación. El trabajo que se ha realizado por medio de conferencias sobre capacidades nacionales de evaluación y otras iniciativas de desarrollo de capacidades de evaluación han fomentado éstas, ampliándolas y extendiéndolas a otros sistemas nacionales y subnacionales y a contextos locales. Si suscribimos el principio de que las evaluaciones están diseñadas para apoyar la rendición de cuentas y el aprendizaje con el fin de mejorar el diseño, la implementación, el desempeño y los resultados y avanzar así hacia un futuro más sostenible, entonces los efectos de las numerosas evaluaciones que se están llevando a cabo a todos los niveles están contribuyendo a los resultados de la Agenda 2030.

Una visión realista. Los puntos anteriores no pretenden trasladar una visión idealizada, ni dar la sensación de que el sector de la evaluación está avanzando de forma satisfactoria en la evaluación relacionada con los ODS. En el camino hay muchas grietas y fisuras. Algunas áreas están ocultas y otras se desmoronan. Al igual que muchos de vosotros, me decepciona que no se esté haciendo más. Pero no seamos cortos de miras y pensemos únicamente en las evaluaciones de los ODS a gran escala, pasando por alto la gran cantidad de trabajo valioso que se está llevando a cabo.

Un cordial saludo

Dorothy Lucks 

Directora ejecutiva, SDF Global

Estimada Emilia, 

Me gustaría compartir la experiencia de Finlandia y cómo se están llevando a cabo las evaluaciones de los Objetivos de Desarrollo Sostenible (ODS) en los diferentes niveles de gobierno. 

Finlandia ha estado evaluando sus avances hacia el logro de los ODS y ha realizado dos evaluaciones nacionales del cumplimiento de la Agenda 2030, ambas dirigidas por la Oficina del Primer Ministro.

La primera de ellas fue la evaluación independiente PATH2023, encargada por el Gobierno de Finlandia en 2018. Esta evaluación profundizó en documentos sobre políticas aplicando un marco de economía política para comprender la teoría del cambio subyacente y analizó la situación del desarrollo sostenible utilizando el enfoque de las cuatro íes: instituciones, intereses, ideas e información. Examinó indicadores nacionales de sostenibilidad, objetivos de políticas y la dimensión global del desarrollo sostenible. Para el análisis recurrió a datos de encuestas, entrevistas con expertos y aportaciones de talleres nacionales. Un grupo directivo y un grupo de apoyo se encargaron de la supervisión, con aportaciones del Grupo de expertos en desarrollo sostenible y asesoramiento de la comunidad internacional de evaluación, en particular de EvalPartners. 

En 2023 se realizó una segunda evaluación, que hizo hincapié en los progresos realizados desde la anterior. Ésta utilizó métodos cualitativos, como análisis de documentos, entrevistas, encuestas y análisis comparativos. En concreto, se realizaron 45 entrevistas a expertos del Gobierno de Finlandia. También se organizaron talleres centrados en el papel de éste y el compromiso de la sociedad en la aplicación de la Agenda 2030, y a los que asistieron 40 participantes. Una encuesta recabó opiniones de diversos sectores y un análisis comparativo de Alemania, el Reino de los Países Bajos y Suecia aportó información adicional. Entre otras cosas, la evaluación identificó cuellos de botella en el modelo de gobernanza y formuló recomendaciones para seguir avanzando en el cumplimiento de la Agenda 2030. 

El proceso nacional de evaluación de los ODS en Finlandia está interrelacionado con los exámenes nacionales voluntarios: éstos se consideran un medio para incorporar las conclusiones al ciclo estratégico y de planificación, así como para aumentar la visibilidad y el uso de la evaluación en el país. Las conclusiones de la evaluación de 2019 influyeron en los partidos políticos durante las elecciones parlamentarias y dieron forma al programa de gobierno de 2019 y a los exámenes nacionales voluntarios de 2020. Del mismo modo, la evaluación de 2023 desempeñó un papel fundamental en la planificación del nuevo programa de gobierno y contribuirá a los exámenes nacionales voluntarios de 2025. 

Más allá del ámbito nacional, el Departamento de Evaluación del Desarrollo del Ministerio de Asuntos Exteriores encarga evaluaciones centralizadas de la política y cooperación para el desarrollo de Finlandia, en las que los ODS se integran a través de los diferentes objetivos de dicha política. Este departamento ha publicado también una nota de orientación sobre el desarrollo de la capacidad nacional de evaluación y las evaluaciones dirigidas por países.   

Por último, a nivel subnacional e institucional, los municipios y gobiernos locales finlandeses han asumido un papel cada vez más activo a la hora de incorporar los ODS y el seguimiento y la evaluación en su labor. Algunos gobiernos locales han desarrollado soluciones digitales para datos relacionados con los ODS, al igual que diversas instituciones y oficinas gubernamentales, como el Instituto de la Seguridad Social y la Agencia Tributaria de Finlandia.

Espero que esta experiencia pueda ayudar a otros gobiernos a abordar la evaluación de los ODS. Quedo a su disposición para cualquier aclaración. 

Nea-Mari

Lead Evaluation Specialist; Deputy Director 
Development Evaluation Unit (EVA-11) 
Ministry for Foreign Affairs of Finland
 

----

Berg, Annukka; Lähteenoja, Satu; Ylönen, Matti; Korhonen-Kurki, Kaisa; Linko, Tyyra; Lonkila, Kirsi-Marja; Lyytimäki, Jari; Salmivaara, Anna; Salo, Hanna; Schönach, Paula and Suutarinen, Ira (2019) PATH2030 – An evaluation of Finland’s sustainable development policy. Prime Minister’s Office, Helsinki.http://urn.fi/URN:ISBN:978-952-287-655-3

D'Errico, S., Geoghegan, T. and Piergallini, I. (2020). Evaluation to connect national priorities with the SDGs. IIED, London. Available at https://www.iied.org/17739iied

Haila, Katri; Salminen, Vesa; Roiha, Ulla; Uitto, Heidi; Vikstedt, Elina; Vinnari,  Eija; Vakkuri, Jarmo; Oreschnikoff, Aleksis and Uusikylä, Petri (2023) Assessing the implementation of the 2030 Agenda in Finland. Prime Minister’s Office, Helsinki. Report available (Finnish) and policy brief in English at: https://urn.fi/URN:ISBN:978-952-383-381-4

Ministry for Foreign Affairs (2022) HOW TO? Practical tips for supporting evaluation capacity and systems in partner countries. Available at: https://um.fi/documents/384998/0/Practical_tips_for_supporting_evaluation_capacity_and_systems.pdf/d1ed61b4-4e5a-0198-6f86-4c6766ae8887?t=1678449920584

Räkköläinen, Mari and Saxén, Anu (2022). ”Pathway to the Transformative Policy of Agenda 2030: Evaluation of Finland’s Sustainable Development Policy. In: Uitto, J.I., Batra, G. (eds) Transformational Change for People and the Planet. Sustainable Development Goals Series. Springer, Cham. https://doi.org/10.1007/978-3-030-78853-7_16

Prime Minister’s Office, Finland (2023) POLICY BRIEF 2023:7. Available at: http://urn.fi/URN:ISBN:978-952-383-381-4 (Accessed 07 December 2023). 

Dirigí una evaluación sobre los Objetivos de Desarrollo Sostenible (ODS) en Mali. Para alcanzar nuestros objetivos, realizamos una evaluación participativa.

Estimada Emilia,

Gracias por plantear esta importante cuestión.

1.      He tenido la oportunidad de participar en la evaluación de algunos aspectos de los ODS en Nepal. Creo que evaluar objetivos o metas específicos dentro de los ODS es un proceso normal y que podemos aprender de los enfoques de evaluación existentes. Sin embargo, evaluar la sostenibilidad en un orden superior, teniendo en cuenta la dimensión espacio-temporal de ciertas intervenciones durante o al final de la intervención, puede ser una tarea difícil. Con mi limitada experiencia, he encontrado algunos retos al evaluar intervenciones relacionadas con los ODS. Creo que era bueno ver el alcance de las intervenciones a un nivel superior y considerar todo el ecosistema de las intervenciones seleccionadas (ya que los ODS son intersectoriales, colaborativos y muchos más términos utópicos); sin embargo, este concepto teóricamente atractivo planteó algunas dificultades en la evaluación. Algunas de ellas son las intervenciones de alcance limitado o basadas en proyectos (a corto plazo, poco extendidas, demasiado centradas en la realización de actividades, aisladas, sistemas MEAL débiles y muchas más); los enfoques y la mentalidad tradicionales de encargar y gestionar la evaluación (como la falta de un enfoque de pensamiento sistémico y de visiones anticipatorias de que la intervención puede conducir en el futuro); y la operacionalización de la evaluación de la sostenibilidad (como el diseño deficiente de la intervención, la falta de datos críticos, la falta de atribución y el tiempo limitado asignado para evaluar la condición para la sostenibilidad). Además, existen lagunas sustantivas en las políticas de evaluación, fallos institucionales y carencias críticas de capacidad para evaluar la sostenibilidad a escala nacional y subnacional. Además, no veo mucho interés/entusiasmo por llevar a cabo evaluaciones ex post de los programas, ni siquiera por parte de los grandes donantes y socios de desarrollo.

2.      Llevar a cabo la evaluación de los ODS sigue siendo una idea emergente para muchas organizaciones, incluidas las agencias de la ONU. Dado que los ODS son todavía nuevos a nivel subnacional, la demanda de este nivel es hasta ahora escasa.

Un cordial saludo,

Ram Chandra Khanal

Hola, Emilia.

Permíteme empezar con un comentario que va a ser muy impopular y que ya he hecho en otros foros, a saber, que la lista actual de ODS es lógicamente errónea con respecto a las necesidades justificables de la gente. Dicho esto, la evaluación en este contexto se enfrenta a dos retos básicos:

1. ¿A qué nivel debe llevarse a cabo la evaluación para que sea útil a los responsables políticos y a quienes diseñan la aplicación de las políticas? Es difícil prever que esto se haga si no es a nivel nacional, regional y local dentro de un país. 
2. Parece haber diversos focos de evaluación; sin embargo, dado que los ODS están pensados para mejorar la calidad de vida de la gente real, es imperativo que los cambios en la calidad de vida sean el foco de la evaluación. Obviamente, esto varía significativamente de un país a otro, por lo que no es posible una estandarización en este sentido.

Es una lástima que los ecologistas de todo tipo, nutricionistas, grupos de presión sanitarios, etc., no hayan hecho suficiente hincapié en detener el crecimiento de la población mundial y, de hecho, en reducirlo. Si no se hace esto, el resto seguirá siendo quimérico.

Saludos cordiales.
 

Super helpful! thanks a lot for sharing the report Mark.

Best,

Stefano D’Errico

Puede que esté enfocando la cuestión desde un ángulo ligeramente distinto al que quería Emilia, pero da la casualidad de que mi equipo acaba de publicar un informe sobre pruebas de evaluación (evaluaciones de impacto en particular) para los ODS. Hemos clasificado más de 7.000 estudios de evaluación de impacto por ODS, con el objetivo de responder a la pregunta: "Si soy un responsable político que trabaja para mejorar el progreso en un ODS concreto, ¿de cuántos datos de evaluación dispongo?". (Las preguntas de investigación se formulan de manera mucho más formal en el informe, pero esa es la idea básica).

Descubrimos que se han realizado muchos trabajos de evaluación sobre los ODS "Personas" (por ejemplo, pobreza, seguridad alimentaria, educación), pero que los ODS "Planeta" han sido en gran medida ignorados en la literatura (con la excepción de un gran impulso reciente por parte de investigadores chinos para evaluar la normativa medioambiental en China).

Estimada Emilia, he evaluado en qué medida un Programa Europeo de Medio Ambiente ha sido coherente con los objetivos del Pacto Verde y los Objetivos de Desarrollo Sostenible. Este análisis se basó en la correspondencia de las áreas temáticas del programa con las acciones del Pacto Verde y las metas de los ODS. Los resultados fueron muy positivos y revelaron las áreas temáticas específicas del programa que más contribuyen (en términos de número de proyectos financiados y presupuesto asignado) al Pacto Verde y a los ODS.