Gender and evaluation of food security

Gender and evaluation of food security
15 contributions

Gender and evaluation of food security

@FAOEvaluation

Chers membres

Je voudrais dans le cadre de notre réseau, partager avec vous quelques préoccupations qui ressortent de manière récurrente sur la question du « genre » au cours des différentes évaluations auxquelles j’ai participé depuis plus d’une vingtaine d’années maintenant.

Pourriez -vous me donner vos avis et partager vos expériences et ressources utiles sur cette question ?

  1. Comment prendre correctement en charge la thématique « genre » lors de l’évaluation des projets et programmes de sécurité alimentaire ou d'agriculture durable ? Est-il suffisant d’associer simplement les femmes aux différentes activités menées dans les projets/programmes comme c’est souvent la pratique pour dire que l’on est genre sensible ? Quels sont les critères d'évaluation généraux et spécifiques que l’on peut faire valoir sans créer de polémique ?
  2. Comment appréhender les changements induits en matière de genre par les projets/programmes quand cette question n`a pas été prise en compte dans les diagnostics sur la situation de base/de référence lors de la formulation des projets/programmes?
  3. Quels indicateurs quantitatifs et qualitatifs (des exemples) formuler pour évaluer l'aspect genre dans le domaine de la sécurité alimentaire et d'autres domaines qui y sont liés tels que la nutrition ?

Je vous remercie d`avance pour l`intérêt et le partage ;

Georgette Konate Traoré

Cette discussion est terminée. Veuillez contacter info@evalforward.org pour plus d'informations.
  • Dear all, 

    here is a summary of the discussion and main issues raised by participants. 

    • Gender should be addressed at the time of formulation of the development action and design of its results framework, including the choice of indicators and data collection methods.
    • If gender was not included in the programme design and baselines are not available, it will be more difficult, though still possible, for the evaluation to address it and for baselines to be replaced by historical analyses;
    • The type of evaluation (process, impact or outcome evaluation) and the target audience will influence the way the evaluation considers gender aspects.
    • Given the complexity and multisectoral nature of gender, evaluations of gender should include social analysis, which is necessary to understand social systems and the constraints that perpetrate the women’s condition in the context of food security. 
    • To evaluate gender equality and empowerment of women, gender-responsive methodologies, methods, tools, and data analysis techniques should be selected (see references below).
    • It is important to consider possible trade-offs related to gender: an example from a project that aimed to support women by assigning them livestock with higher productivity but did not consider additional workload and the missing links to market opportunities that could allow to translate the higher production into income.
    • Examples of gender-responsive indicators were referenced and on how to make indicators gender sensitive.
    • Women, along with other stakeholders, should participate in co-producing the evaluation framework and take part in evaluations themselves, in a participatory approach. The evaluator / evaluation team should play the role of a facilitator and recognize the experiential knowledge of stakeholders.
    • Gender evaluations in Africa, as in other regions, must consider that unfortunately the level of understanding of the gender approach still varies a lot, which does not facilitate its application.
    • Some country initiatives:
      • Benin: a study on the sensitivity of the national system of monitoring and evaluation in relation to gender allowed to identify national indicators by sector to evaluate the gender aspect and to incorporate norms and standards to take gender into account in all evaluations.
      • Burundi: the Ministry of Local Government is looking at how to integrate gender in the five-year development planning process of municipalities, defining the basic "gender" indicators that will be monitored and evaluated during the life of this plan.
      • Costa Rica: The Ministry of Planning worked with UN Women on a guide on how to evaluate gender and human rights to complement the evaluations carried out within the National Planning System of Costa Rica.

    References and links shared by participants / Références et liens partagés par les participants / Referencias y enlaces compartidos por los participantes 

    Other references / Autres références (en anglais) /Otras referencias (en inglés)

     

  • Dear members,

    Sorry for catching up late on the discussion on gender and evaluation.

    One of the comments posted to the debate raised by Georgette highlighted that disparity between women and men persists in many communities and in the mindset of many people.

    I believe that, as evaluators, we should be guided by the human rights and gender equality principles to which our organizations are committed.  In fact, our own personal bias can have a significant impact on the way that we view an evaluation subject, the questions we ask, the conceptual framework that we use and the methodology that we adopt. The UN Evaluation Group Norms and Standards norm on ‘human rights and gender equality’ states that, “The universally recognized values and principles of human rights and gender equality need to be integrated into all stages of an evaluation. It is the responsibility of evaluators and evaluation managers to ensure that these values are respected, addressed and promoted, underpinning the commitment to the principle of ‘no-one left behind’.”  The UNEG standard on a human rights-based approach and gender mainstreaming strategy further elaborates that the evaluation design might also include some process of ethical review of the initial design of the evaluation subject. More specifically, the evaluation terms of reference should:

    • Indicate both duty bearers and rights holders (particularly women and other groups subject to discrimination) as primary users of the evaluation and specify how they will be involved in the evaluation process;
    • Spell out the relevant human rights and gender equality instruments or policies that will guide evaluation processes;
    • Incorporate an assessment of relevant human rights and gender equality aspects through the selection of the evaluation criteria and questions;
    • Specify an evaluation approach and methods of data collection and analysis that are human rights-based and gender-responsive;
    • Specify that evaluation data should be disaggregated by social criteria (e.g. sex, ethnicity, age, disability, geographic location, income or education);
    • Define the level of expertise needed among the evaluation team on human rights and gender equality, define responsibilities in this regard and call for a gender-balanced and culturally diverse team that makes use of national/regional evaluation expertise.

    The UNEG publication Integrating Human Rights and Gender Equality in Evaluations, already mentioned during this exchange, provides additional guidance on this topic.

    With regard to the specific questions raised by Georgette around data, monitoring and measurement related to evaluations in the agricultural sector, please find the following documents on this topic:

    We are proud of the diversity on this Community of Practice, which is open to all opinions and reflect the practice and realities on the ground of evaluators and professionals working across sectors at country level and hope to continue these lively exchanges.

    Deborah

  • Bonjour,

    Je voudrais ajouter un document developpé par ONU Mujeres (Panama) y le Ministère de Planificacion de Costa Rica (en espagnol) qui donne beaucoup de propositions comme on peut intégrer les thèmes genre et droit de l'homme dans tout le processus d'une evaluacion:

    https://documentos.mideplan.go.cr/share/s/UWG8czewS5-A8GJsx8xBCw

  • Réverien Ndikubwayo

    Réverien Ndikubwayo

    Bonjour chers membres

    Je voudrais partager les préoccupations de Georgette qui sont bien pertinentes. Je n'ai pas de réponse à lui proposer, mais je voudrais simplement dire qu'au Burundi, le ministère en charge des collectivités locales est en train de voir comment intégrer le "genre" dans le processus de planification du développement des communes sur cinq ans. Cela permettra alors de définir les indicateurs de base sur le "genre" qui seront suivis et évalués pendant la durée de vie de ce plan. L'activité de planification va bientôt commencer, d'où je ne dispose pas de réponses pour l'instant aux questions de Georgette.

    Cordialement

    Réverien NDIKUBWAYO

    Burundi

  • Jamal Berdaa

    Jamal Berdaa

    Bonjour à toutes et à tous.

    Concernant l'évaluation de programmes en sécurité alimentaire, quel que soit le type de programme, l'évaluation devrait être réalisée avec et non pas sur les parties prenantes.

    Dans notre cas, c'est la participation des femmes en premier lieu, mais aussi toute autre personne concernée de près ou de loin par le programme (responsable, gestionnaire, producteurs, revendeurs....). Tout ce beau monde devrait s'asseoir sur la même table pour collaborer ensemble d'abord pour la coproduction d'un référentiel d'évaluation concerté et en suite dans la realisation de l'évaluation participative elle même. Il n'est plus question maintenant en évaluation de jouer le rôle d'un expert qui s'amène avec son modèle d'évaluation prédéfini mais plutôt d'un facilitateur et d'un négociateur qui accompagne les parties prenantes dans tout le processus d'évaluation, de la conception des outils jusqu'à la communication des résultats. Cette manière de faire qui est de plus en plus utilisée permet ainsi une plus grand acceptabilité des résultats mais aussi l'émancipation des différents acteurs qui deviennent plus autonomes dans leur prise de décision. Elle n'a rien avoir avec les méthodes traditionnelles de recherche-action par exemple où la participation est plutôt une formalité plus qu'une reconnaissance des savoirs expérientiels des acteurs.

  • Bonjour à toutes et tous,

    Suite à mon message du 29/06/18 relatif à la thématique en objet, vous avez été nombreux à réagir ( Bintou du Mali, Elias et Emile du Bénin, Dowsen du Zimbabwe, Mustapha, Dorothy et Emmanuel …) en me donnant des informations, des points de vue ainsi que des références documentaires sur les questions proposées.

    Je suis conscience du fait que nous n’avons pas épuisé la question mais les réactions fort utiles que vous avez faites me permettront certainement de conforter mes propres opinions sur la question et surtout d’avancer dans mon travail avec plus d’assurance.

    Grand merci à toutes et tous et également à Alena pour ces informations très enrichissantes sur les questions posées.

    D'autres contributions sont les bienvenues!

    Cordialement

    Georgette

  • Alena Lappo

    Alena Lappo

    Dear members,

    In relation to the questions of Georgette:

    Q 1. Many evaluators struggle with the evaluation of the gender equality and empowerment of women, limiting the assessment to women’s participation in different project activities. This approach, however, does not allow the evaluation of the multiple dimensions of gender equality and empowerment of women, such as the allocation of resources to gender programs, equal participation in decision-making, and access to productive resources, services and markets. To better evaluate gender equality and empowerment of women, gender-responsive methodologies, methods and tools, and data analysis techniques should be selected. Guiding documents for gender equality and empowerment of women such as the System-wide Action Plan on Gender Equality and the empowerment of Women (UN-SWAP), which provide guidance on gender-responsive indicators can be consulted to do so.

    It is important to assess/map the possible positive and negative consequences right from the start and possibly include them into the evaluation methodology. Data rehearsal/finding rehearsal method can be applied: https://evalsdgs.files.wordpress.com/2018/06/unicef-innovation-in-evaluation-webinar-ppt.pdf (p. 22).

    The implication of trade-offs related to gender activities need to be taken into account. For example, in the project X there were indications of added responsibilities for women that were not necessarily accompanied by proportional income gain. “The single women supported under ‘One Cow Per Poor Family project’, were provided with the cow breeds which have higher milk production.  However, women were concerned about increased work drudgery related to fodder supply, especially within the context of its scarcity. Higher milk production per cow could result in additional income source for women. However, the project did not foresee connection to a potential markets making income gains uncertain.”

    In addition, as mentioned by Dowsen Sango, the type of evaluation matters – some project and programmes provide little or no space for gender dimension.

    Q 2. The UNEG Guidance Integrating Human Rights Further provides examples of the gender-responsive indicators helping to design/access/evaluate projects www.uneval.org/document/download/1294 (p. 46-47). 

    The UN-SWAP assessment is done through scorecards answering the following questions:

    1) Gender equality and the empowerment of women (GEEW) is integrated in the evaluation scope of analysis and evaluation criteria and questions are designed in a way that ensures GEEW related data will be collected.

    2) A gender-responsive methodology, methods and tools, and data analysis techniques are selected.

    3) The evaluation findings, conclusions and recommendation reflect a gender analysis. 

    Technical note on how to score the above criteria can be read here:

    www.unevaluation.org/document/download/2148 

    These guidance documents might be well-known, yet not often applied in evaluation design and projects assessment.

    Alena Lappo
    Evaluation Analyst
    FAO

  • Emmanuel Ndongo

    Emmanuel Ndongo

    Bonjour

    Dans le cadre de notre réseau je viens vers vous partager mon point de vue sur la question du genre.

    Il serait souhaitable à mon avis que nous parlions de parité entre hommes et femmes au lieu de passer du temps à vouloir faire savoir à tous que la femme n'a jamais été considéré comme un être entier. Depuis la création de l'humanité nous savons la place que la femme occupe dans la société. L'homme occupera toujours sa première place et aura toujours à ses côtés la femme. La notion du genre ne devrait donc pas venir renverser ces valeurs.

  • Bonjour à toutes et à tous,

    Je voudrais apporter ma contribution au débat qui porte sur le respect de la dimension "genre" dans l'évaluation des actions de développement - j'utilise le terme générique d'action de développement pour désigner un projet, un programme ou une politique. Je trouve le débat lancé par Georgette assez important et qu'il va falloir le faire sortir d'un débat qui resterait philosophique et stérile, tellement les praticiens du développement ont besoin d'éléments pratiques pour apporter les corrections nécessaires de leur façon de faire. Il va sans dire que la dimension "genre" est très importante pour le développement mais ceci ne doit pas nous amener à l'utiliser comme une clé "passe-partout" à utiliser dans toutes les actions de développement; nous devons donc traiter de cette question "genre" de façon systématique et obligatoire dans les actions de développement qui ont effectivement une dimension "genre" indéniable.

    En suivant la filigrane de ce débat, j'ai la faiblesse de croire que nous sommes en train de traiter de cette question tout juste au moment de l'évaluation - c'Est un débat que je rencontre très souvent parmi les praticiens de l'évaluation "simple et simplifiée" alors que cet aspect doit être déjà traité bien en amont, au moment de la formulation de l'action de développement, de la conception de son cadre de résultats, en général, et du choix des indicateurs et de la collecte de données - qui doivent être désagrégées selon la dimension "genre", et e la mise en place du système de suivi-évaluation de cette action de développement, en particulier. Si une action de développement quelconque est articulée sur une forte dimension "genre", la lecture du document du projet, de son cadre de résultats et des indicateurs qui y sont inscrits, et de son plan de suivi-évaluation, etc., doivent pouvoir refléter cette forte dimension "genre", avant même que les activités de cette action de développement ne soit lancée sur le terrain. Sans une telle perspective intégrative de Gestion Axée sur les Résultats, l'évaluation sera totalement déconnectée du reste des activités d'une action de développement, notamment des activités de suivi-évaluation, et ne pourra nous aider dans une telle situation d'apporter toutes les réponses nécessaires aux questionnements sur le genre que nous pourrions nous poser au moment d'une évaluation. C'est sur ce débat restrictif de l'évaluation, réductionniste et "saucissonné" d'un processus de gestion du cycle d'une action de développement auquel je voulais apporter une première contribution ors de mon premier message sur cette plateforme il y a quelques semaines que je voulais attirer l'attention de tous les membres sur le danger de parler de manière restrictive de l'évaluation en dehors d'une perspective de Gestion Axée sur les Résultats.

    A bon entendeur, salut!

    Mustapha

    Mustapha Malki, PhD

    Canada

  • Bonjour à tous,

    Voici les réponses que je propose aux trois questions de Georgette:

    1. Comment prendre correctement en charge la thématique « genre » lors de l’évaluation des projets et programmes de sécurité alimentaire ou d'agriculture durable ? Est-il suffisant d’associer simplement les femmes aux différentes activités menées dans les projets/programmes comme c’est souvent la pratique pour dire que l’on est genre sensible ? Quels sont les critères d’évaluation généraux et spécifiques que l’on peut faire valoir sans créer de polémique ?

    Non. Il ne suffit pas d’associer simplement les femmes aux activités de mise en œuvre des projets. Il s’agit d’intégrer à toutes les étapes les aspects spécifiques à prendre en compte différemment pour homme et pour femme afin que les projets/programmes en question soient plus efficaces et aient plus d’effets et impacts

    2. Comment appréhender les changements induits en matière de genre par les projets/programmes quand cette question n’a pas été prise en compte dans les diagnostics sur la situation de base/de référence lors de la formulation des projets/programmes?

    Il faut dans ce cas faire une enquête historique sur les effets et impacts des projets/programmes.

    3. Quels indicateurs quantitatifs et qualitatifs (des exemples) formuler pour évaluer l'aspect genre dans le domaine de la sécurité alimentaire et d'autres domaines qui y sont liés tels que la nutrition ?

    Normalement, il n’y a pas d’indicateurs particuliers à formuler pour évaluer l’aspect genre. Il s’agit plutôt de rendre les indicateurs genre sensibles pour orienter leur mesure. Ex : « Le nombre d’hommes et de femmes malnutris » ou « Le taux de malnutris parmi les hommes et parmi les femmes ».

    Merci.

    Dr Ir. Emile N. HOUNGBO

    Benin

  • Bintou Nimaga

    Bintou Nimaga

    Bonjour à vous chers-ères membres de Eval Forward.

    La question de Gorgette est effectivement très intéressante comme sujet de débat mais difficile d’y répondre de façon pratique. A partir de mes expériences, j’ai compris que toute la difficulté d’application du genre(EFH) dans les programmes d’évaluation, se trouve dans sa transversalité aux différents secteurs mais aussi aux sous-groupes sociaux. Le plus compliqué est aussi la capacité de l’évaluateur-rice à pouvoir faire une analyse intégrée selon les objectifs, les résultats attendus et la méthodologie utilisée. C’est pourquoi, le genre dans l’évaluation nécessite une compétence dans l’évaluation mais aussi dans l’analyse sociale genre.

    En fait, l’analyse genre est intégrée et transversale à tout le dispositif de l’évaluation notamment l’analyse des éléments d’évaluation (pertinence – efficacité – durabilité – efficience …) et celle des indicateurs du programme en question. Evidemment, il est plus efficace d’avoir une équipe d’évaluateurs-trices avec des compétences diverses en lien avec les objectifs visés. Le genre n'est pas la femme, bien qu'on cherche à lever des contraintes sociales qui limitent l'épanouissement de cette catégorie. Vous convenez bien avec moi, que ces contraintes ne se situent pas au seul niveau de la femme, mais notamment dans les façons de vivre, le regard de l'autre envers elle, les comportements, les valeurs sociales etc. Toutes choses qui donnent, maintiennent et perpétuent le pouvoir du masculin sur le féminin et qui engendre pour elle un confinement dans un statut inférieur. L'analyse sociale est nécessaire pour comprendre ce système dans le contexte de la sécurité alimentaire, afin d'agir pour réduire ce pouvoir au profit du féminin. C'est à ce seul titre, qu'on peut envisager une sécurité alimentaire durable et efficace et qui donne la chance aux ménages, aux communautés et à nos pays d'accéder au bien être alimentaire. On a l’habitude d’avoir une liste d’indicateurs genre, mais je pense qu’avec le temps, ceux-ci se sont avérés inefficaces, car la sécurité alimentaire est un secteur assez vaste. L’analyse intégrée des indicateurs lors de l’évaluation demande aussi des réflexions d’adaptation selon le programme, le contexte social et les objectifs de l’évaluation.

    Enfin, je pense que la réponse à vos questions se trouvera dans le travail d’équipe et la complémentarité des compétences constituées pour l’évaluation. Toutefois, on pourra en faire un sujet de débat afin de mettre les expériences des uns et des autres à profit.

    Bintou NIMAGA

    Mali

  • Dowsen Sango

    Dowsen Sango

    1.       How to properly take charge of the "gender" theme during evaluations of food security projects and programs or sustainable agriculture? Is it enough to simply associate women to different activities carried out in projects / programs as it is often practice to say that one is gender-sensitive? What are the general and specific evaluation criteria that can be put forward without creating controversy?

    Gender in Evaluation is a thorny issue. I would like to think that first it depends on the Type of Evaluation (Process, Impact or Outcome Evaluation). It also depend on the audience of the evaluation report. A project is often a contractual thing therefore an evaluator is guided by contractual obligations the project implementer went into with the funder. In this regard Gender should only be evaluated if it was contractual. Let’s say a Market Linkages project had not in its design been focused on making markets work for women but then a crossectional impact study shows that women made less money than men. Would one conclude that the project was not gender sensitive?

  • Bonsoir chers membres,

    Les préoccupations de Georgette du Burkina sont on ne peut plus pertinentes. Nous n'avons pas encore trouvé la réponse au Bénin, mais nous avons initié une activité qui, nous l'espérons, nous aidera à commencer à apporter des réponses pertinentes. Il s'agit de l'étude diagnostique de la sensibilité du système national de suivi évaluation par rapport au genre.

    Cette étude a été faite au Bénin, en Afrique du Sud et en Ouganda. Le diagnostic a porté sur les politiques nationales d'évaluation et les systèmes nationaux de suivi évaluation des trois pays. Les résultas de l'étude nous ont permis  d'adopter un plan d'actions d'amélioration comportant, entre autres, la définition d'indicateurs nationaux par secteur pour évaluer l'aspect genre, ainsi que la révision de notre politique nationale d'évaluation, pour y intégrer des normes et standards en vue de prendre en compte le genre dans toutes nos évaluations.

    Cela ne répond certainement pas aux questions de Georgette, mais c'est pour montrer au moins que la préoccupation est partagée.

    Bien cordialement

  • Evaluating the Sustainable Development Goals - through an equity and gender lens

    Authors/editor(s): Michael Bamberger, Marco Segone and Florencia Tateossian

    lac.unwomen.org/en/digiteca/publicaciones/2017/06/evaluating-the-sustainable-development-goal

  • Dear members,

    Thanks to Georgette Konate Traoré from Burkina Faso for raising these concerns on evaluation of gender with the EVAL-ForwARD community. Please feel free to share your view on any of the issues she raises by replying to this email.

    I take the opportunity to invite you all to use this space in the weeks to come to:

    • Start discussions: post queries on topics of your interest inviting members to respond and to share their experiences and views.
    • Post information on and links to publications, events, calls and other activities of interest to other members.

    Discussions, resources and information shared will start forming the knowledge base of the EVAL-ForwARD community. Please contact me for practical support or any further information at Renata.mirulla@fao.org

    Related to quantitative and qualitative indicators to evaluate gender (question 3 below), FAO is adopting the pro-WEAI index, which helps assess women’s empowerment within agricultural developmental projects using 12 indicators. Here is a link to the WEAI webpage weai.ifpri.info  and to a recent presentation in FAO www.fao.org/webcast/home/en/item/4695/icode