From being a Community Development Facilitator, Community Supervisor, Auditor, then a Project Director of Administration and Finance as well as Financial Analyst, Mr Janvier Mwitirehe has done considerable efforts to become an expert in monitoring and evaluation. He is the founder of the Horizon of Excellence Ltd, a research, consulting and training company created in 2011. Through it, Janvier is recognized for his role in M&E capacity development in Rwanda.
Mr Mwitirehe is an active member of the Rwanda Monitoring and Evaluation Organization (RMEO) and other M&E platforms. More so, Janvier is a part-time researcher in statistics for policy development and a part-time trainer of planning, monitoring and evaluation (PM&E) approved by Rwanda Management Institute (RMI) since January 2020. It is in this framework that he developed a Strategic PM&E training package that was given a concurrence by RMI management.
His main areas of intervention include the following:
- Use of statistics and big data to build an Effective M&E System: to address the issue of statistical illiteracy among M&E professionals, Janvier has been a strong proponent of the use of statistics in M&E. Moreover, he has developed a prototype of an effective M&E system and, this facilitated his doctoral studies in “Leveraging Big Data to Build an Effective Monitoring, Evaluation and Learning (MEL) system of a water utility company”.
- Data mining, analysis and visualization: Janvier masters different data mining techniques and is computer literate in Ms Office, Power BI, SurveyCTO, R, Python, Stata, Eviews, Epi Info and SPSS with statistical modeling and analytical skills. Using advanced Excel, GIS, Power BI and Tableau, Janvier can develop interactive performance dashboards.
- Designing experimental and quasi-experimental impact evaluations: Janvier created an Evaluation Research Team skilled in randomized control trial, propensity score matching, difference in difference, instrumental variables, regression discontinuity designs.
- Doing research in Performance, Impact and Efficiency (PIE) Evaluation: Janvier has so far published two papers: “Robust Impact Evaluation Experiments in Rwanda” and “Evaluation de l’Efficacite et Efficience du Système de Santé Rwandais”. In addition, Janvier is completing his third paper: “Integration of Big Data in Water Monitoring, Evaluation and Learning System”. Case Study of Water and Sanitation Corporation (WASAC) LTD in Rwanda.
Janvier [user:field_middlename] Mwitirehe
Janvier Mwitirehe
Evaluation Researcher
Horizon of Excellence Ltd
Rwanda
Janvier Mwitirehe
Evaluation Researcher Horizon of Excellence LtdHello John,
The answer is NO.
Thanks
Janvier Mwitirehe
Evaluation Researcher Horizon of Excellence LtdCher John, merci pour vos commentaires et vos très bonnes questions de suivi.
La réponse à ces deux questions est OUI. En outre, je voudrais indiquer que, dans la perspective de l'USAID, les interventions (activités ou projets) sont conçues dans le cadre d'hypothèses et de preuves locales ; et que les hypothèses sont l'une des composantes de la théorie du changement (TdC). Pour ceux qui ont besoin de savoir, définissons d'abord le développement de l'USAID, le cadre de la CLA, et expliquons ensuite comment la TdC peut être examinée, en donnant des exemples :
Contexte de développement de l'USAID
Pour que l'USAID puisse opérer dans un pays, elle définit tout d'abord un plan stratégique (appelé stratégie de coopération au développement par pays - CDCS) en l'alignant sur les priorités du pays partenaire. La CDCS se fonde sur l'analyse des risques pays et sur des consultations avec les différentes institutions gouvernementales et partenaires. Le CDCS décrit un objectif de développement du pays avec des objectifs de développement sectoriel à l'appui de cet objectif et des résultats intermédiaires relevant des OD. Chaque OD est décrit avec les risques et les hypothèses qui lui sont propres. Notons que le plan de suivi des performances est conçu en même temps que le plan stratégique.
Conformément à la stratégie, un ou plusieurs projets sont conçus pour contribuer à la réalisation des objectifs de développement. Un "projet" désigne un ensemble de mécanismes de mise en œuvre complémentaires ou "activités", sur un calendrier et un budget établis, visant à atteindre un résultat de développement discret, qui est souvent aligné sur un résultat intermédiaire dans un CDCS. Celui-ci va de pair avec le plan MEL du projet qui lui est associé.
Enfin, l'activité qui est le niveau de mise en œuvre. L'USAID met en œuvre ses stratégies et ses projets par le biais de la conception et de la mise en œuvre des activités. Une activité réalise une intervention ou un ensemble d'interventions, généralement par le biais d'un mécanisme de mise en œuvre tel qu'un contrat, un programme d'assistance ou un partenariat. Cela va de pair avec son activité associée, le plan MEL.
En termes simples, toute activité est considérée dans le cadre d'un certain projet qui, à son tour, répond à un certain objectif de développement. Le plan de l'activité MEL est intégré au plan du projet MEL, qui est également intégré au plan de suivi des performances.
Cadre CLA
Pour faire face à un environnement en évolution, l'USAID intègre la collaboration, l'apprentissage et l'adaptation (CLA) dans le cycle de vie de ses programmes afin de s'assurer que les interventions sont coordonnées avec d'autres, fondées sur une solide base de preuves et adaptées de manière itérative pour rester pertinentes tout au long de la mise en œuvre. Le cadre CLA consiste en une gestion adaptative par le biais de l'apprentissage continu.
Définitions de l'USAID :
Faire une pause et réfléchir régulièrement aide à identifier ce qui fonctionne et ce qui doit être adapté et permet à l'USAID de prendre en compte l'impact des changements dans l'environnement ou le contexte d'exploitation. Parmi les exemples de possibilités de pause et de réflexion, on peut citer l'examen des portefeuilles, les événements d'apprentissage, les réunions d'équipe, les communautés de pratique, les réseaux d'apprentissage, etc.
Examen de la TdC
Dans le contexte de l'USAID, la logique sous-jacente d'un projet/activité est saisie dans la TdC. Une TdC forte est un récit qui résume le contexte, identifie les points de levier pour le changement, spécifie les résultats nécessaires, décrit les interventions prévues pour atteindre ces résultats et énonce les hypothèses associées.
Le processus d'élaboration de la TdC doit être participatif, impliquant un large engagement avec les parties prenantes locales et une série d'exercices de réflexion critique dynamique pour examiner l'ensemble des preuves, faire ressortir les différents points de vue et parvenir à un consensus sur la meilleure approche possible compte tenu des informations disponibles.
Par conséquent, la conception de la TdC est toujours basée sur des preuves et des hypothèses locales ; et étant donné la rigueur du processus, il est moins probable qu'elle soit mal comprise. Même si cela peut arriver ou si les hypothèses changent, des actions régulières de pause et de réflexion aideront à réaliser que la gestion adaptative et les lacunes doivent suivre. Par exemple, pour les activités de sécurité alimentaire, les partenaires sont tenus d'élaborer une théorie du changement pour leurs activités et de la revoir "chaque fois qu'il y a de nouvelles preuves, ou quand il y a des changements dans le contexte qui affectent les hypothèses ou les voies hypothétiques de changement" et, au minimum, chaque année.
Nous avons des exemples où la TdC a été examinée :
En conclusion, l'USAID dispose de différentes options pour adapter ses interventions : au niveau des activités, des projets ou des stratégies. Grâce à sa collaboration, l'USAID peut également co-créer. Pour que cela soit possible, son apprentissage doit être renforcé.
Merci
Janvier M.
Janvier Mwitirehe
Evaluation Researcher Horizon of Excellence LtdChers tous,
La réalité est que nous opérons dans un environnement en évolution rapide dont il faut tenir compte lors de la mise en œuvre de nos programmes ou projets. Comme l'ont fait remarquer des collègues, les contraintes soulevées par COVID-19 par exemple devraient pousser à s'adapter afin de parvenir aux résultats escomptés.
Cela peut être fait par exemple en introduisant ce que l'USAID appelle "le cadre de collaboration, d'apprentissage et d'adaptation (CLA)" [CLA Tool Kit Landing | USAID Learning Lab] qui implique un ensemble de pratiques intégrées dans le cycle de programme pour s'assurer que les programmes sont coordonnés avec d'autres, fondés sur une base de preuves solides, et adaptés de manière itérative pour rester pertinents tout au long de la mise en œuvre. Ainsi, les hypothèses critiques identifiées au cœur d'une TdC doivent être périodiquement testées - ce qui est une caractéristique centrale de la planification basée sur des hypothèses - et si elles ne sont plus valables, des mesures de gestion adaptative doivent être prises en conséquence.
Il est vrai que cela entraîne une complexité de mise en œuvre qui nécessite également l'utilisation de méthodes d'évaluation complexes et réactives nouvelles et toujours en évolution. Dans ces conditions, il est nécessaire d'intégrer la science des données* dans les activités de la MEL.
Note : La science des données est un domaine interdisciplinaire qui utilise des méthodes, des processus, des algorithmes et des systèmes scientifiques pour extraire des connaissances et des aperçus de nombreuses données structurelles et non structurées. La science des données est liée à l'exploration des données, à l'apprentissage machine et aux données volumineuses (https://en.wikipedia.org/wiki/Data_science).
Meilleur,
Janvier