RE: How are mixed methods used in programme evaluation? | Eval Forward

Estimado Jean,

En respuesta a tus comentarios a mi contribución a esta discusión[1], en primer lugar me gustaría dar las gracias a Malika Bounfour y Marlene Roefs por compartir dos documentos muy valiosos.

Por favor, consulten la definición de “diseño paralelo convergente” en la página 6 del documento Métodos mixtos en el seguimiento y evaluación de proyectos de desarrollo: aprender de la experiencia de los profesionales (en inglés). Éste es el enfoque al que me refiero cuando afirmo que “las herramientas de recopilación de datos se desarrollan en paralelo, o de forma simultánea”. En lo que respecta a la existencia de “UNA matriz de diseño de la evaluación”, esto se ajusta al denominado “diseño integrado”, descrito también en la página 6 del citado documento.

En cuanto a los métodos de muestreo, les invito a consultar este enlace de Statistics Canada. Durante más de 30 años he trabajado para esta agencia estadística nacional como experta en metodologías de encuestas.

En particular, para distinguir entre el muestreo probabilístico (utilizado en las encuestas cuantitativas) y el muestreo no probabilístico (utilizado en la recopilación de datos cualitativos; p. ej. muestreo intencional), por favor consulten la sección 3.2 sobre muestreo.

En el apartado 3.2.3 se explica por qué algunos profesionales están considerando la posibilidad de utilizar el muestreo intencional en encuestas cuantitativas. No suele ser la práctica habitual en las oficinas nacionales de estadística. También se explica por qué el muestreo no probabilístico debe utilizarse con especial precaución.

Espero que esto sea útil. En la página 13 del documento Métodos mixtos en el seguimiento y evaluación de proyectos de desarrollo: aprender de la experiencia de los profesionales (en inglés), compartido por Marlene, se afirma lo siguiente: “Combinar información de la investigación cuantitativa y cualitativa proporciona una visión más completa de la contribución de un programa a diversos tipos de cambio (social)”. Estoy completamente de acuerdo con esta afirmación.

Gracias por plantear este tema en EvalForward. Ha suscitado gran interés. Personalmente, estoy a favor del enfoque de métodos mixtos. De hecho, según mi experiencia, las conclusiones de una evaluación que utiliza esta metodología tienen mejor acogida entre los clientes. Y es que, cuando el proceso de comprobación muestra los mismos resultados de diferentes fuentes, rebatir las conclusiones resulta complicado.

Saludos cordiales,

Jackie

P. D. En mi primera contribución a esta discusión compartí este enlace, en el que encontrarán cientos de ejemplos de evaluaciones que han utilizado métodos mixtos.

 

[1]Jackie: Muchas gracias por tu tiempo y tus perspicaces comentarios. En relación con nuestra práctica de la evaluación, ¿podrías explicar cómo “se puede responder [cualquier pregunta de evaluación] utilizando un enfoque de métodos mixtos”? En tu opinión, las herramientas de recopilación de datos se desarrollan en paralelo, o de forma simultánea. Y sostienes que hay UNA matriz de diseño de la evaluación. De ahí que ambos métodos intenten responder a la misma pregunta. En cuanto al muestreo, ¿podrías aclarar cómo has utilizado el muestreo probabilístico o no probabilístico? ¿O al menos describir cuál aplicaste, por qué y cómo? ¿Se podría aplicar el muestreo intencional a una evaluación cuantitativa?”