Senior Evaluation Specialist in the UN system (FAO, IAEA, WFP)
Food security analysis and Humanitarian assistance programmes management in the field with international NGOs (1999- 2003)
My contributions
Cet effort a notamment consisté à développer sa capacité à exploiter de manière plus efficiente et efficace les éléments de preuve contenus dans son portefeuille d'évaluation. Cela a naturellement conduit à considérer l'intelligence artificielle (IA) comme une option pour automatiser l'extraction de texte.
Constatant le fort intérêt suscité par l'IA, je partage quelques informations sur ce projet, qui débute, ainsi que des réflexions tirées de notre expérience jusqu’ici.
Pourquoi l'intelligence artificielle est-elle utile?
La prise de décision fondée sur les preuves est essentielle pour de nombreuses organisations multilatérales telles que le PAM. L'évaluation est un fournisseur essentiel de preuves crédibles
Disability inclusion in evaluation
DiscussionLa pandémie de COVID-19 a exposé et/ou exacerbé toutes les problématiques préexistantes à travers le monde. Pour les évaluateurs également, dans la mesure où, depuis mars 2020, des questions supplémentaires se sont posées quant à la manière de veiller à ce que les évaluations offrent des contributions utiles à leurs destinataires. Mues par le besoin de continuer à soutenir l'apprentissage et la redevabilité, les évaluations ont également adopté de nouvelles manières de travailler, devenant en grande partie virtuelle. Savons-nous comment cela a affecté l'utilité de notre travail? Alors que nous reconnaissons les nouvelles limitations imposées par la situation de pandémie
L’état des connaissances sur ce sujet est très diffus. Partant, le Bureau de l’Evaluation de la FAO et EvalForward ont commencé une étude pour renseigner les dynamiques de l’évaluation au sein des Ministères de l’agriculture et leur relation avec les autres institutions qui évaluent ce secteur.
Alors que cette étude est en cours, le Forum International Francophone de l’Evaluation -FIFE 2019 qui s’est tenu à Ouagadougou du 11 au 15 Novembre a fourni une occasion d’échanger sur ces questions. Lors d'une table ronde qui réunissait aussi des dirigeants des unités de Suivi et Evaluation (S&E)des ministères de l'Agriculture au Cameroun
The African Evaluation Association’s 9th International Conference will be held in Abidjan, Cote D’Ivoire from 11 to 15 March 2019. The Conference theme is Accelerating Africa’s Development: Strengthening National Evaluation Ecosystems. It aims at expanding the “Made in Africa” evaluation approaches, supporting knowledge sharing, capacity development and networking opportunities among a wide range of organisations and individuals working on evaluation.
EVAL-ForwARD will actively promote and support one of 12 work strands of the Conference, titled “Improving Agriculture and Food Security through Evaluation”.
Those interested in contributing to the conference may propose: papers, roundtables, posters, exhibitions and workshops
Developmental evaluation
Discussion
Aurelie Larmoyer
Senior Evaluation officer WFPChère Muriel,
Je suis d'accord que l'I.A. apporte tant de potentiel à l'évaluation, et beaucoup de questions à la fois !
Au sein du Bureau de l'évaluation du PAM, alors que nous cherchions à accroître notre capacité à mieux répondre aux besoins de nos collègues en matière de données probantes, les progrès récents de l'intelligence artificielle (IA) nous sont apparus comme une solution évidente à explorer. C'est pourquoi je suis heureuse de partager avec vous l'expérience et les réflexions que nous avons accumulées depuis que nous avons commencé à nous intéresser à ce domaine.
Notre point de départ pour nous intéresser à l'IA a été de reconnaître que nous étions limités dans notre capacité à tirer le meilleur parti de la richesse des connaissances contenues dans nos évaluations, pour répondre aux besoins d'apprentissage de nos collègues. Cela s'explique principalement par le fait que la localisation et l'extraction manuelles d'éléments probants sur un sujet d'intérêt donné, afin de les synthétiser ou de les résumer pour eux, demandent beaucoup de temps et d'efforts.
Nous travaillons donc au développement d'une solution basée sur l'IA pour automatiser la recherche d'informations à l'aide d'outils de traitement du langage naturel (NLP), permettant d'interroger nos informations à l'aide de questions en langage naturel, un peu comme nous le faisons avec n'importe quel moteur de recherche sur le web. Ensuite, en tirant le meilleur parti des avancées technologiques récentes dans le domaine de l'IA générative, comme le Chat GPT, la solution pourrait également fournir du texte nouvellement généré à partir des passages de texte extraits, tels que des résumés de connaissances.
Nous nous attendons également à ce que l'automatisation de la recherche de texte présente d'autres avantages, tels que l'étiquetage automatique et plus systématique des documents que ne le font les humains, afin de faciliter l'analyse et l'établissement de rapports, et à ce que l'IA donne également la possibilité d'adresser directement des informations pertinentes à des publics en fonction de leur rôle, de leurs intérêts et de leur localisation, tout comme le font Spotify ou Netflix.
Comme nous parvenons à avoir une solution qui offre une bonne performance dans les résultats de recherche proposés, nous espérons qu'elle pourra ensuite être reproduite pour répondre à d'autres besoins similaires.
Au-delà de ces utilisations que nous explorons spécifiquement au sein du Bureau d'évaluation du PAM, je vois d'autres avantages de l'IA pour les évaluations, tels que :
J'espère que ces contributions seront utiles et j'attends avec impatience les expériences des autres, car nous apprenons tous au fur et à mesure, et ce processus est en effet plein de promesses, de risques et nous fait certainement sortir de nos zones de confort.
Cordialement
Aurelie