¿Está teniendo en cuenta los criterios sociales y medioambientales en sus evaluaciones?

¿Está teniendo en cuenta los criterios sociales y medioambientales en sus evaluaciones?
12 contribuciones

¿Está teniendo en cuenta los criterios sociales y medioambientales en sus evaluaciones?

©Serge Eric Yakeu

Estimados evaluadores de EvalForward,

Creo que todos somos conscientes de que las actividades de desarrollo pueden tener efectos medioambientales y sociales inesperados y de las interacciones entre los factores asociados. Los principales organismos —y la ONU en particular— están estudiando de qué manera integrar los efectos medioambientales y sociales en sus evaluaciones y cómo garantizar esto cuando sus mandatos no los mencionan. Los efectos pueden ser:

  • Medioambientales: cambio climático, sequías, inundaciones, huellas de los proyectos, riesgos y peligros medioambientales.
  • Sociales: discapacidad, población indígena, vulnerabilidad, pobreza, fomento de la resiliencia, inclusión y cohesión social.

Por ejemplo, en Sudán del Sur, como parte de sus esfuerzos por promover la iniciativa “Nueva forma de trabajar” en el marco del nexo entre asistencia humanitaria, desarrollo y paz, el equipo de las Naciones Unidas en el país prestó gran atención a la evaluación de factores medioambientales y sociales de su contribución fundamental a la población beneficiaria. Esto incluyó un apoyo más firme para mitigar las inundaciones y sequías; la mejora de la producción de alimentos en los hogares y el fortalecimiento de las capacidades para afrontar las perturbaciones y adaptarse a ellas; la lucha contra la violencia de género; la prestación de servicios sanitarios esenciales —de gran repercusión y eficaces en relación con su coste— a los destinatarios más vulnerables que se han visto más afectados por el conflicto en el país; la asistencia en el seguimiento y evaluación de la accesibilidad y disponibilidad de los servicios sanitarios; la ayuda para la recuperación económica a través de un enfoque integral destinado a restablecer la confianza y el acceso a los servicios básicos; la restauración de las capacidades productivas y la promoción de las asociaciones eficaces; la ayuda para el retorno seguro, voluntario y digno de las personas desplazadas a fin de que puedan reconstruir sus vidas y retomar las actividades productivas (contribución fundamental del Marco de Cooperación de las Naciones Unidas (UNCF, por sus siglas en inglés) en Sudán del Sur en 2019-2021).

  • ¿Está teniendo en cuenta estos aspectos en sus evaluaciones?
  • ¿A qué desafíos se está enfrentando y cómo cree que deberíamos afrontarlos como comunidad? 

¡Espero conocer sus experiencias e ideas!

Serge Eric

Esta discusión ha terminado. Por favor póngase en contacto con info@evalforward.org para más información.
  • Estimados colegas,

    Es estupendo recibir vuestros comentarios y aportaciones sobre este interesante tema. Me hago eco de algunos colegas para coincidir en que el factor contextual debe guiar siempre la consideración de estas dos áreas de trabajo clave para el desarrollo, tanto en el diseño como en el proceso de evaluación. 
    Me alegra saber por la Sra. Rathner que el grupo de trabajo de las Naciones Unidas está a punto de formalizar las directrices del Grupo de Expertos de las Naciones Unidas sobre esta importante cuestión. 
    Son bienvenidas más contribuciones y reflexiones. 

    Saludos de temporada y feliz año nuevo a todos y a sus queridas familias.

    Serge Eric 

    Serge Eric Yakeu Djiam, Ir., M.Sc., CE
    Credentialed Evaluator / Evaluateur AccréditéInternational Evaluation Expert & Visiting Professor Policy Evaluation Research & Rural Development Co-Chair, EvalIndigenous (EvalPartners Network) Vice-President, International Development Evaluation Association (IDEAS)
     

  • Martina Rathner

    Martina Rathner

    Principal Evaluation Specialist UNESCO

    Estimados miembros de EvalForward,

    El grupo de trabajo del UNEG dedicado al impacto ambiental y social (ESI) realizó un inventario y una valoración inicial de las orientaciones de las agencias existentes sobre la incorporación de las consideraciones ambientales en la práctica de la evaluación. Esto demostró que algunas políticas y orientaciones de las agencias de la ONU ya están integrando consideraciones de impacto ambiental y social específicas de la agencia. El grupo de trabajo prevé formalizar las directrices del Grupo de Evaluación de las Naciones Unidas en una próxima etapa. La evaluación inicial puede encontrarse aquí: http://www.uneval.org/document/detail/2951 (en inglés).

    Saludos cordiales,

    Martina Rathner

     

     

     

     

  • Esimados todos, 
    Lo que medimos refleja nuestros valores y lo que nos importa. Estas son notas del artículo (en inglés) que he vuelto a compartir con vosotros como complemento a mi anterior mensaje. Además, el artículo sugiere que los impactos en los subgrupos deben reflejarse en las mediciones. Esto coincide con las recomendaciones de los participantes en nuestra reunión

    https://ssir.org/articles/entry/data_in_collective_impact_focusing_on_w…;

    Que tenga un buen día
    Malika

  • Hola a todos y gracias por este tema y por compartir sus reflexiones y enfoques. 

    Esto es paralelo a las discusiones mantenidas la semana pasada por la red francófona de evaluación en la FIFE2021. 

    Dicho esto, también creo que se trata más bien de una cuestión de metodologías para poner de manifiesto estos aspectos. Las organizaciones suelen establecer sus políticas para tener en cuenta el medio ambiente y el género en la programación y la evaluación. 

    También me gustaría compartir con ustedes que, como evento paralelo al Día Internacional de las Montañas, organizamos una reunión en torno al "olivo, la montaña y el medio ambiente". La principal y primera recomendación de los participantes fue considerar la planificación y el análisis social y paisajístico a varios niveles cuando se habla del entorno rural. Esto se debe a que las condiciones o resultados de la montaña (casi) desaparecen cuando se considera sólo la faceta rural para el desarrollo o la evaluación.

    Por lo tanto, un enfoque es considerar el análisis interseccional para la evaluación.

    Saludos cordiales 

    Malika 

     

  • Hola Serge y todos,

    Sí, intento integrar estos temas en todas las evaluaciones. Los clientes suelen estar muy dispuestos a saber "para quién" funcionan sus programas. Esta información les ayuda a saber si su programa apoya a diferentes grupos de personas.

    En cuanto al medio ambiente, suele haber un poco de dudas al principio, ya que la relación entre las actividades del programa y las implicaciones medioambientales puede ser difusa. Puede ser que no haya implicaciones. Pero preguntar por el medio ambiente proporciona un punto de partida para el debate.

    Como señaló Silva, ha habido muchos esfuerzos para promover la medición de los impactos sociales. El sistema de las Naciones Unidas suele hacerlo utilizando una perspectiva de derechos humanos e igualdad de género (véanse las Directrices Éticas del UNEG de 2008 y el UN-SWAP de 2006). Muchas agencias de la ONU también destacan esta necesidad en sus políticas de evaluación.

    Del mismo modo, hay muchas directrices para integrar las consideraciones medioambientales y de cambio climático en los programas y políticas (el PNUD hizo un balance en 2010). Los organismos de las Naciones Unidas suelen hablar de este tema en los documentos de orientación para la evaluación.

    Aunque ayudaría que los términos de referencia pidieran y presupuestaran preguntas sobre los impactos sociales y medioambientales de la programación, estoy de acuerdo con Silva en que debemos abogar por ellos si estos elementos no están presentes.

    Un reto al que me enfrenté inicialmente fue "bueno, ¿cómo hacemos esto?". Actualmente estoy terminando mi disertación centrada en responder a esta pregunta. Examinando evaluaciones anteriores de programas de seguridad alimentaria, estoy encontrando muchas pruebas que nos muestran cómo, por qué y en qué contexto debemos integrar estos temas.

    Deberíamos comprometernos con los desarrollos metodológicos de la literatura y probarlos. Hacer preguntas como: ¿cómo experimentan los diferentes grupos este programa? ¿Y cómo ha afectado el cambio climático a las experiencias de las personas? Comparta su proceso y sus aprendizajes.

    Las evaluaciones pueden jugar a favor de la equidad y la sostenibilidad medioambiental, y debemos hacerlo.

    Steven

  • Dear all, 

    1. Social and environmental criteria includes items on gender and equity, gender based violence,  community resources use and management, partnerships and sustainability. 

    2. Our National Evaluation Standards for evaluation apply in areas of social and environment assessment. Copy attached. 

    3. Challenges are more in limited capacity to conduct social and environmental assessment, and limited available of data for use in social and environmental assessment. 

    4. The Uganda Evaluation Association promotes knowledge sharing on the matter. 

     

    Regarding the TORs, another practice is as follows :

    1. The client determines the ToR based on what the client and his or her stakeholders require

    2. The client looks for evaluators who can understand and execute the TOR

    3. The evaluator who thinks can understand and execute the TOR indicates expression of interest to execute the TOR

    4. When the evaluator is provided with chance to execute the TOR he or she writes an inception report showing what he or she has understood and how he or she will execute the TOR

    5. If the client is convinced with the inception report that the evaluator understood the TOR and can execute the TOR then evaluator is given the assignment

    6. The evaluator then executes the TOR based on the inception report agreement

    7. There is no room for the evaluator to maneuver the TOR but understand it and demonstrate the understanding in the inception report.

    Abu

    Uganda

  • Silva estoy totalmente de acuerdo con usted en hacer un comentario sobre los términos de referencia, en la mayoría de los casos si las expectativas no están bien articuladas por ambas partes, la aceptación de los informes de evaluación puede tener problemas.  Por lo tanto, el informe inicial de los comisarios debería discutirse a fondo para aclarar todos los malentendidos de la tarea.

  • Silva, sólo puedo apoyar su preocupación de que una evaluación debe incluir la evaluación de los términos de referencia. Yo diría que esa es la parte más importante de una evaluación, ya que sólo cuando se evalúan los términos de referencia se puede proporcionar orientación para que los futuros proyectos sirvan mejor a los beneficiarios. Con demasiada frecuencia, las evaluaciones, sobre todo cuando son internas, se convierten en una herramienta de propaganda para promover los términos de referencia y el proyecto. Esto puede convertirse en un gran perjuicio para los beneficiarios previstos, ya que reforzará los términos de referencia y los proyectos que son básicamente un fracaso y no aportan ningún beneficio. Creo que este es el caso de los 40 años de dependencia de la organización de productores para canalizar la ayuda a los pequeños agricultores. Una mirada atenta mostrará que son realmente un escándalo, que sólo atraen a un porcentaje muy pequeño de los participantes potenciales, e incluso entonces los miembros desvían la mayor parte de su negocio a otros comerciantes. Consulte las siguientes páginas web:

    https://agsci.colostate.edu/smallholderagriculture/mel-impressive-numbe…;

    https://agsci.colostate.edu/smallholderagriculture/appeasement-reportin…

    https://agsci.colostate.edu/smallholderagriculture/farmers-organization…

    Gracias

  • Estimada EvalForward 

    ¡Saludos!

    Si me pongo a pensar en el tema propuesto relacionado con el medio ambiente, es muy importante recordar y hacer que el medio ambiente sea progresivo. El medio ambiente social es colectivamente todo lo que el ser humano ha superpuesto en la superficie de la tierra.

    Los principales retos medioambientales son varios y están relacionados con la deforestación, la degradación de la tierra, el aumento de la aridez y el sobrepastoreo, la escasez de agua, la eliminación de residuos, el cambio climático y los servicios de los ecosistemas. Y en mi opinión, estos retos provocan tendencias negativas para la pobreza, la salud, la economía y la resiliencia ecológica y humana.

    Si no se mantienen todos los aspectos que he mencionado anteriormente, la existencia de la vida humana correrá un gran riesgo en el futuro.

    Saludos cordiales

    Dr. Said Hassan - Agrónomo 

  • Isha, mencionas que "Nosotros, como evaluadores, estamos obligados a ejecutar los TdR debidamente"

    Mi opinión es que, como evaluadores, también deberíamos cuestionar los términos de referencia y negociarlos.

    Una de las principales contribuciones que podemos ofrecer es la de proponer formas alternativas de ver el cambio, más allá de los TdR de "cortar y pegar" que se nos ofrecen.

    Algunas organizaciones y gestores de evaluación están realmente abiertos a esto.

    Otras no lo están.... y, si es el caso, bueno... su problema.

    Yo, desde luego, no querría trabajar en una evaluación que me parece que no tiene sentido desde el principio. :-)

     

    Verás, como dicen los cicloactivistas sobre los conductores de coches... "no estás en el tráfico, eres el tráfico".

    Como consultores, tenemos el deber de resistirnos a los términos de referencia que sabemos que limitan el aprendizaje y la calidad del trabajo.

     

    Otro punto... Me sorprendió la forma en que se nos presentó la pregunta.

    La pregunta dice: "Las principales agencias, y la ONU en particular, están considerando cómo integrar los impactos ambientales y sociales en sus evaluaciones".

    ¿"Están considerando"? Ahora... las preocupaciones medioambientales son (por desgracia) relativamente nuevas... pero las sociales, ¿lo son realmente?

    Hace tiempo que tenemos todo tipo de temas transversales (género, discapacidad y similares...).

    Me asusta mucho cómo se presentan el "triple nexo" (una versión glorificada del continuo ayuda/desarrollo - discutido durante las últimas 2 décadas) y los "impactos sociales" como si fueran algo nuevo, que requiere empezar con una pizarra en blanco.

    Sería más saludable destacar que estas preocupaciones no son en absoluto nuevas, ya que de lo contrario se corre el riesgo de dar vueltas en círculo.

    Un saludo a todos

    Silva

  • Los problemas son los siguientes 

    Falta de evaluación horizontal: el problema más común en los TdR es la falta de evaluación horizontal. Hay varias lagunas en el proceso de evaluación que podrían llenarse pero, en cambio, los TdR a menudo piden centrarse en su tema de forma vertical y no horizontal.
    Nosotros, como evaluadores, estamos obligados a ejecutar los TdR debidamente y esto provoca:


    - Falta de supervisión: deberíamos poder utilizar en nuestro beneficio los elementos externos importantes que puedan haber influido en la intervención.

    - Carencia en las herramientas de observación, como las herramientas de comportamiento de las partes interesadas

    - Carencia en los debates de los grupos focales: es decir, falta de tiempo y preparación

    - Lagunas en los factores externos al programa.

    También suele haber un conocimiento inadecuado de la comunidad, los lugares o la intervención por parte del equipo de evaluación: la mayoría de los evaluadores llegan al tema con nociones preconcebidas basadas en sus experiencias anteriores. Este es uno de los errores más graves que se cometen. Creo firmemente que los programas comparables pueden enfrentarse a diferentes obstáculos, metodologías, perfiles de beneficiarios y comportamientos, y que hay que tener en cuenta las variables temporales. Hay que pensar en nuevas dificultades. No utilizar el mismo equipo una y otra vez.

    Estos son algunos de los aspectos sociales y medioambientales que deben incluirse en la evaluación:
     

    Los medios de vida deben evaluarse en función del tema y del contexto local, por ejemplo, la producción de cultivos: la evaluación debe examinar la colaboración y la cohesión del gobierno o de cualquier otra organización, la capacidad (por ejemplo, la logística del gobierno y los servicios a la comunidad: instalaciones sanitarias, educación, centros agrícolas para la promoción, la capacidad de los beneficiarios de la recogida de productos, el desarrollo de la capacidad de colaboración) y los nuevos conocimientos sobre los cambios climáticos, la mitigación de los riesgos, las subvenciones del gobierno (consejos, fertilizantes, semillas, tecnología, etc.).
     

    Contribución de las partes interesadas: Evaluación de los conocimientos de la comunidad y de las acciones relacionadas con sus medios de vida. Lagunas de coherencia, conocimientos técnicos, logística (localización y nuevas tecnologías de desarrollo de cultivos), conocimiento de los productos, información sobre el mercado, variables de precios y contribuciones de los intermediarios del mercado. Además, hay interferencias e impactos políticos locales.
     

    Actores (comportamientos de los beneficiarios) - Consistencia en los campos de producción: aspectos de salud (riesgos de bienestar, deterioro de la salud por epidemia, enfermedades infecciosas, abusos familiares y externos, niveles de educación (formal, informal y subjetiva), nivel nutricional de la familia (adultos y niños).
     

    Gestión financiera - Pobreza: Reducción Trampas, ganancias y pérdidas, las mujeres tienen mayor acceso a la microfinanciación dentro y entre las familias. El crédito debe dirigirse a los hogares de bajos ingresos, especialmente a las mujeres.

     

  • Hola Serge,

    En mi organización nos enfrentamos al reto de integrar ambos aspectos en las evaluaciones de nuestros programas, porque tradicionalmente se abordaban por separado. Nos hemos dado cuenta de que no podemos separar el impacto social de una evaluación interna o externa centrada en los resultados de nuestras intervenciones, incluyendo dimensiones nunca antes consideradas. Por ejemplo, en la fase final de una actividad centrada en el fortalecimiento de los productores sobre mejores prácticas agrícolas estamos diseñando los términos de referencia para una evaluación de impacto que tendrá como objetivo incluir las perspectivas de la participación de la mano de obra migrante en las actividades agrícolas.

    Según mi experiencia, los principales retos a los que nos enfrentamos están relacionados con la falta de experiencia en la transmisión de los aspectos sociales dentro de los enfoques rurales a los que tradicionalmente nos enfrentamos. Estamos buscando la evaluación interna de los pares en la primera etapa y más adelante buscaremos la evaluación externa con expertos de organizaciones hermanas.

    Creo que hay que reflexionar y trabajar más sobre la integración de ambas perspectivas, pero también es un área de gran oportunidad para colaborar con nuestros pares.

    Gracias por el espacio y el post, saludos

    - Nayeli