Je suis d'accord que l'I.A. apporte tant de potentiel à l'évaluation, et beaucoup de questions à la fois !
Au sein du Bureau de l'évaluation du PAM, alors que nous cherchions à accroître notre capacité à mieux répondre aux besoins de nos collègues en matière de données probantes, les progrès récents de l'intelligence artificielle (IA) nous sont apparus comme une solution évidente à explorer. C'est pourquoi je suis heureuse de partager avec vous l'expérience et les réflexions que nous avons accumulées depuis que nous avons commencé à nous intéresser à ce domaine.
Notre point de départ pour nous intéresser à l'IA a été de reconnaître que nous étions limités dans notre capacité à tirer le meilleur parti de la richesse des connaissances contenues dans nos évaluations, pour répondre aux besoins d'apprentissage de nos collègues. Cela s'explique principalement par le fait que la localisation et l'extraction manuelles d'éléments probants sur un sujet d'intérêt donné, afin de les synthétiser ou de les résumer pour eux, demandent beaucoup de temps et d'efforts.
Nous travaillons donc au développement d'une solution basée sur l'IA pour automatiser la recherche d'informations à l'aide d'outils de traitement du langage naturel (NLP), permettant d'interroger nos informations à l'aide de questions en langage naturel, un peu comme nous le faisons avec n'importe quel moteur de recherche sur le web. Ensuite, en tirant le meilleur parti des avancées technologiques récentes dans le domaine de l'IA générative, comme le Chat GPT, la solution pourrait également fournir du texte nouvellement généré à partir des passages de texte extraits, tels que des résumés de connaissances.
Nous nous attendons également à ce que l'automatisation de la recherche de texte présente d'autres avantages, tels que l'étiquetage automatique et plus systématique des documents que ne le font les humains, afin de faciliter l'analyse et l'établissement de rapports, et à ce que l'IA donne également la possibilité d'adresser directement des informations pertinentes à des publics en fonction de leur rôle, de leurs intérêts et de leur localisation, tout comme le font Spotify ou Netflix.
Comme nous parvenons à avoir une solution qui offre une bonne performance dans les résultats de recherche proposés, nous espérons qu'elle pourra ensuite être reproduite pour répondre à d'autres besoins similaires.
Au-delà de ces utilisations que nous explorons spécifiquement au sein du Bureau d'évaluation du PAM, je vois d'autres avantages de l'IA pour les évaluations, tels que :
L'automatisation des processus couramment menés dans les évaluations, tels que la synthèse des preuves existantes pour générer de brefs résumés qui pourraient alimenter les évaluations en tant que données secondaires.
Un meilleur accès aux connaissances ou aux orientations et la facilitation de la conservation des éléments probants en vue de l'établissement de rapports, par exemple dans le cadre des exercices de rapport annuel.
Faciliter la production de synthèses et l'identification de modèles à partir d'exercices d'évaluation ou d'examen.
Améliorer l'édition grâce à des outils de révision automatisée des textes afin d'améliorer le langage.
J'espère que ces contributions seront utiles et j'attends avec impatience les expériences des autres, car nous apprenons tous au fur et à mesure, et ce processus est en effet plein de promesses, de risques et nous fait certainement sortir de nos zones de confort.
RE: Artificial intelligence in the context of evaluation
Chère Muriel,
Je suis d'accord que l'I.A. apporte tant de potentiel à l'évaluation, et beaucoup de questions à la fois !
Au sein du Bureau de l'évaluation du PAM, alors que nous cherchions à accroître notre capacité à mieux répondre aux besoins de nos collègues en matière de données probantes, les progrès récents de l'intelligence artificielle (IA) nous sont apparus comme une solution évidente à explorer. C'est pourquoi je suis heureuse de partager avec vous l'expérience et les réflexions que nous avons accumulées depuis que nous avons commencé à nous intéresser à ce domaine.
Notre point de départ pour nous intéresser à l'IA a été de reconnaître que nous étions limités dans notre capacité à tirer le meilleur parti de la richesse des connaissances contenues dans nos évaluations, pour répondre aux besoins d'apprentissage de nos collègues. Cela s'explique principalement par le fait que la localisation et l'extraction manuelles d'éléments probants sur un sujet d'intérêt donné, afin de les synthétiser ou de les résumer pour eux, demandent beaucoup de temps et d'efforts.
Nous travaillons donc au développement d'une solution basée sur l'IA pour automatiser la recherche d'informations à l'aide d'outils de traitement du langage naturel (NLP), permettant d'interroger nos informations à l'aide de questions en langage naturel, un peu comme nous le faisons avec n'importe quel moteur de recherche sur le web. Ensuite, en tirant le meilleur parti des avancées technologiques récentes dans le domaine de l'IA générative, comme le Chat GPT, la solution pourrait également fournir du texte nouvellement généré à partir des passages de texte extraits, tels que des résumés de connaissances.
Nous nous attendons également à ce que l'automatisation de la recherche de texte présente d'autres avantages, tels que l'étiquetage automatique et plus systématique des documents que ne le font les humains, afin de faciliter l'analyse et l'établissement de rapports, et à ce que l'IA donne également la possibilité d'adresser directement des informations pertinentes à des publics en fonction de leur rôle, de leurs intérêts et de leur localisation, tout comme le font Spotify ou Netflix.
Comme nous parvenons à avoir une solution qui offre une bonne performance dans les résultats de recherche proposés, nous espérons qu'elle pourra ensuite être reproduite pour répondre à d'autres besoins similaires.
Au-delà de ces utilisations que nous explorons spécifiquement au sein du Bureau d'évaluation du PAM, je vois d'autres avantages de l'IA pour les évaluations, tels que :
J'espère que ces contributions seront utiles et j'attends avec impatience les expériences des autres, car nous apprenons tous au fur et à mesure, et ce processus est en effet plein de promesses, de risques et nous fait certainement sortir de nos zones de confort.
Cordialement
Aurelie