Me gustaría compartir la experiencia que tiene el Cirad, la organización francesa de investigación agrícola y cooperación internacional que trabaja por el desarrollo sostenible de las regiones tropicales y mediterráneas, y los esfuerzos que se han realizado en los últimos años para fortalecer una cultura orientada al impacto a través del fomento de un pensamiento evaluativo. Creo que este trabajo coincide con los retos y la voluntad de utilizar la evaluación para dirigir mejor el desarrollo de la ciencia y la tecnología y contribuir a los procesos de innovación.
El Cirad ya ha hecho un primer esfuerzo de reconstrucción de lo que llaman el proceso de "construcción de una cultura de impacto" y puede acceder a información más detallada aquí: https://doi.org/10.1093/reseval/rvy033
Me incorporé al Cirad hace un año y, viniendo del CGIAR, no me sorprendió ver que existía un repositorio de acceso público y que se hacía un seguimiento periódico de un conjunto de indicadores bibliométricos normalizados: https://indicateurs-publication.cirad.lodex.fr/
Me enteré de que, al ser el Cirad una institución pública, se somete a una evaluación periódica (cada cuatro años) coordinada por una autoridad pública independiente, el Haut Conseil de l'évaluation de la recherche et de l'enseignement supérieur (Hcéres). Hay tres puntos que me llamaron la atención cuando examiné por primera vez el marco y el método de evaluación del Hcéres. https://www.hceres.fr/fr/referentiels-devaluation
El primer punto es que antes de que un panel externo de expertos nacionales e internacionales de alto nivel realice la evaluación, hay un proceso de autoevaluación interna que realiza el propio Cirad.
El segundo punto fue que el marco de evaluación identifica claramente la capacidad de la organización para orientar y aplicar su estrategia en función de los retos y demandas de la sociedad, la centralidad de las asociaciones y la calidad de la ciencia como criterios clave.
El tercer punto fue la granularidad de la evaluación que se realizó tanto a nivel institucional como para cada una de las unidades de investigación.
Junto con esta evaluación comprometida externamente, también se realizan evaluaciones periódicas para valorar las principales redes regionales de investigación y desarrollo (https://www.cirad.fr/en/worldwide/platforms-in-partnership).
El mecanismo institucional que he descrito brevemente, se enriqueció, a partir de hace unos diez años, gracias a los esfuerzos científicos y metodológicos dirigidos por un equipo de investigadores y expertos bajo el paraguas de la iniciativa Impacto de la Investigación en el Sur (ImpresS). https://impress-impact-recherche.cirad.fr/
ImpresS ha definido un conjunto de principios metodológicos (es decir, aprendizaje reflexivo, perspectiva sistémica, análisis de estudios de caso, análisis de contribuciones, enfoque centrado en los actores y participativo, orientación a los resultados, enfoque en el desarrollo de capacidades y procesos de apoyo a las políticas) para desarrollar y aplicar enfoques y herramientas de evaluación que actualmente se utilizan para evaluar las trayectorias de innovación a largo plazo (ImpresS ex post: https://www.cirad.fr/nos-activites-notre-impact/notre-impact) y para concebir nuevas intervenciones (ImpresS ex ante: https://www.cirad.fr/les-actualites-du-cirad/actualites/2021/impress-co…). En los últimos años, la cartera de proyectos de investigación para el desarrollo coordinados por el Cirad ha aumentado constantemente. Recientemente se ha puesto en marcha un mecanismo para fomentar y mejorar el uso sistemático de las evaluaciones de resultados para la gestión adaptativa y el aprendizaje, y construir un cuerpo de conocimientos coherente sobre la contribución de la investigación a los cambios sociales y medioambientales. Este mecanismo proporcionará financiación y apoyo metodológico a los equipos que ejecuten intervenciones emblemáticas y estratégicas.
La diversidad de perspectivas y enfoques me parece un factor clave para evaluar dimensiones importantes de las actuaciones y contribuciones de una organización de investigación para el desarrollo y desentrañar, lo mejor posible, la complejidad de las interacciones y los bucles de retroalimentación que caracterizan la mayoría de estas intervenciones en contextos de desarrollo. No obstante, el marco de evaluación más completo no sería suficiente si los órganos de gobierno y gestión en los diferentes niveles de la organización y la organización en su conjunto no estuvieran dispuestos y fueran capaces de aprender y adaptarse a partir del uso de los hallazgos de la evaluación.
RE: How to evaluate science, technology and innovation in a development context?
Estimados todos,
Me gustaría compartir la experiencia que tiene el Cirad, la organización francesa de investigación agrícola y cooperación internacional que trabaja por el desarrollo sostenible de las regiones tropicales y mediterráneas, y los esfuerzos que se han realizado en los últimos años para fortalecer una cultura orientada al impacto a través del fomento de un pensamiento evaluativo. Creo que este trabajo coincide con los retos y la voluntad de utilizar la evaluación para dirigir mejor el desarrollo de la ciencia y la tecnología y contribuir a los procesos de innovación.
El Cirad ya ha hecho un primer esfuerzo de reconstrucción de lo que llaman el proceso de "construcción de una cultura de impacto" y puede acceder a información más detallada aquí: https://doi.org/10.1093/reseval/rvy033
Me incorporé al Cirad hace un año y, viniendo del CGIAR, no me sorprendió ver que existía un repositorio de acceso público y que se hacía un seguimiento periódico de un conjunto de indicadores bibliométricos normalizados: https://indicateurs-publication.cirad.lodex.fr/
Me enteré de que, al ser el Cirad una institución pública, se somete a una evaluación periódica (cada cuatro años) coordinada por una autoridad pública independiente, el Haut Conseil de l'évaluation de la recherche et de l'enseignement supérieur (Hcéres). Hay tres puntos que me llamaron la atención cuando examiné por primera vez el marco y el método de evaluación del Hcéres. https://www.hceres.fr/fr/referentiels-devaluation
El primer punto es que antes de que un panel externo de expertos nacionales e internacionales de alto nivel realice la evaluación, hay un proceso de autoevaluación interna que realiza el propio Cirad.
El segundo punto fue que el marco de evaluación identifica claramente la capacidad de la organización para orientar y aplicar su estrategia en función de los retos y demandas de la sociedad, la centralidad de las asociaciones y la calidad de la ciencia como criterios clave.
El tercer punto fue la granularidad de la evaluación que se realizó tanto a nivel institucional como para cada una de las unidades de investigación.
Junto con esta evaluación comprometida externamente, también se realizan evaluaciones periódicas para valorar las principales redes regionales de investigación y desarrollo (https://www.cirad.fr/en/worldwide/platforms-in-partnership).
Aquí puede encontrar el último informe de evaluación de Hcéres (2021) en francés: https://www.cirad.fr/les-actualites-du-cirad/actualites/2021/evaluation…;
El mecanismo institucional que he descrito brevemente, se enriqueció, a partir de hace unos diez años, gracias a los esfuerzos científicos y metodológicos dirigidos por un equipo de investigadores y expertos bajo el paraguas de la iniciativa Impacto de la Investigación en el Sur (ImpresS). https://impress-impact-recherche.cirad.fr/
ImpresS ha definido un conjunto de principios metodológicos (es decir, aprendizaje reflexivo, perspectiva sistémica, análisis de estudios de caso, análisis de contribuciones, enfoque centrado en los actores y participativo, orientación a los resultados, enfoque en el desarrollo de capacidades y procesos de apoyo a las políticas) para desarrollar y aplicar enfoques y herramientas de evaluación que actualmente se utilizan para evaluar las trayectorias de innovación a largo plazo (ImpresS ex post: https://www.cirad.fr/nos-activites-notre-impact/notre-impact) y para concebir nuevas intervenciones (ImpresS ex ante: https://www.cirad.fr/les-actualites-du-cirad/actualites/2021/impress-co…). En los últimos años, la cartera de proyectos de investigación para el desarrollo coordinados por el Cirad ha aumentado constantemente. Recientemente se ha puesto en marcha un mecanismo para fomentar y mejorar el uso sistemático de las evaluaciones de resultados para la gestión adaptativa y el aprendizaje, y construir un cuerpo de conocimientos coherente sobre la contribución de la investigación a los cambios sociales y medioambientales. Este mecanismo proporcionará financiación y apoyo metodológico a los equipos que ejecuten intervenciones emblemáticas y estratégicas.
Aquí puede encontrar los documentos metodológicos y otras publicaciones relacionadas con el trabajo de ImpresS: https://impress-impact-recherche.cirad.fr/resources/impress-publications
La diversidad de perspectivas y enfoques me parece un factor clave para evaluar dimensiones importantes de las actuaciones y contribuciones de una organización de investigación para el desarrollo y desentrañar, lo mejor posible, la complejidad de las interacciones y los bucles de retroalimentación que caracterizan la mayoría de estas intervenciones en contextos de desarrollo. No obstante, el marco de evaluación más completo no sería suficiente si los órganos de gobierno y gestión en los diferentes niveles de la organización y la organización en su conjunto no estuvieran dispuestos y fueran capaces de aprender y adaptarse a partir del uso de los hallazgos de la evaluación.