Résultats et impact

Dans le cadre de notre système de MRM, Swisscontact définit des indicateurs d'impact global parallèlement aux données liées aux activités de sensibilisation, de création d’emplois et de revenus de chaque projet, qui font l'objet du rapport annuel de Swisscontact. Pour saisir les données relatives à ces impacts, la plupart de nos projets réalisent des études d'impact rigoureuses qui analysent et vérifient que les améliorations dans la vie de nos groupes cibles en termes d'emplois et de revenus peuvent être attribuées au projet. Erka Çaro, spécialiste MRM de Swisscontact en Albanie, explique ci-dessous comment les impacts sont évalués dans un programme de développement des compétences, en prenant l'exemple du projet de la Direction du Développement et de la Coopération (DDC) Skills for Jobs (S4J) en Albanie.

Quels sont les impacts attendus du programme S4J pour le groupe cible, les étudiants ?

Erka Çaro: S4J aborde les principaux défis du système albanais d'enseignement et de formation technique et professionnel (EFTP) en se concentrant sur la garantie d'un changement systémique, le développement des capacités et l'autonomisation des acteurs clés. L'objectif principal du projet est que les jeunes femmes et les jeunes hommes de tous les groupes sociaux en Albanie trouvent un emploi attrayant et rémunérateur grâce à l'amélioration de leurs compétences. S4J vise à augmenter le revenu des jeunes en leur offrant des possibilités de formation pertinentes basées sur de nouvelles méthodes d'apprentissage et en coopération avec le secteur privé.

Comment évaluez-vous ces impacts ?

S4J utilise ce qu'on appelle des études de suivi de l’insertion professionnelle des diplômés. Nous suivons les diplômés pendant six mois à un an après l'obtention de leur diplôme pour évaluer les principaux indicateurs d'impact du projet : les diplômés de l'EFTP ont-ils un emploi et quelle est leur situation en matière de revenus ? Pour évaluer si les changements observés dans le cadre de l'étude de suivi peuvent être attribués au projet, S4J utilise la méthode de l’Ecart dans les Différences / Difference-in-Differences (DiD), en comparant les résultats avec les données de base et les groupes de contrôle.

Quels sont les principaux défis que vous rencontrez dans une étude d'impact et comment les relever ?

La conception et la mise en œuvre des études d'impact sont des défis, en particulier pour les programmes de développement des compétences. Il est parfois difficile de retrouver les étudiants un an après l'obtention de leur diplôme, car ils ne sont plus accessibles par l'intermédiaire de l'école et nous avons peu de possibilités d'entretien en face à face. Nous essayons de surmonter cette difficulté en envoyant des questionnaires en ligne standardisés aux diplômés pour la collecte de données.

En outre, il est souvent difficile d'identifier un groupe de contrôle approprié présentant des caractéristiques similaires, afin d’évaluer l’impact du projet et vérifier si les résultats découlent de nos interventions. Nous avons élaboré un manuel de MRM pour guider la conception des études d'impact et nous avons recours à la communauté de pratique mondiale de Swisscontact pour bénéficier des expériences d'autres projets. Nous partageons également avec la communauté internationale du développement des enseignements et des conseils clés tels que notre Manuel de MRM.