Niveau de l'Indicateur
Libellé de l'indicateur
Indicateur Objectif
Comment collecter et analyser les données nécessaires
Déterminez la valeur de l'indicateur en utilisant la méthodologie suivante :
1) Définissez un nombre limité de connaissances et/ou de compétences parmi les plus importantes que les participants sont censés mettre en pratique à l'issue de l'accompagnement du projet. Veillez à ce que les connaissances et/ou compétences sélectionnées correspondent à ce que les participants peuvent réellement mettre en pratique dans leur contexte.
2) Définissez la période de référence au cours de laquelle les participants sont censés avoir mis en pratique les connaissances et/ou compétences sélectionnées. Assurez-vous que les participants auront eu un besoin réel ou l'occasion de les mettre en pratique au cours de cette période.
3) Déterminez comment vous allez évaluer si les participants ont mis en pratique les connaissances et/ou compétences prédéfinies au cours de la période de référence fixée à l'étape 2. Passez en revue les approches suivantes et sélectionnez la ou les options les mieux adaptées à votre contexte :
Entretiens structurés :
Mener des entretiens avec un échantillon représentatif de participants. Demandez : « Pouvez-vous me dire lesquelles des connaissances ou compétences suivantes vous avez utilisées au cours de [préciser la période de référence] à la suite de [préciser l’activité spécifique du projet]? »
Les options proposées dans l’ réponse t doivent correspondre à celles que vous avez définies à l’étape 1 ci-dessus. Prévoyez également une option « Autre – précisez : ……... ». Les réponses enregistrées sous la rubrique « Autre » ne doivent pas être prises en compte dans le calcul de l’indicateur, mais peuvent apporter des informations complémentaires utiles.
Question : « Avez-vous mis à profit d'autres connaissances ou compétences abordées dans le cadre de [préciser l'activité] au cours de cette période ? »
Enfin, vérifiez si les personnes ont réellement mis en pratique les connaissances ou compétences qu’elles ont déclarées en leur demandant : « Pourriez-vous me dire comment et quand vous avez utilisé [précisez la connaissance ou la compétence déclarée]? »
Observation directe : dans la mesure du possible, vérifiez si les participants utilisent correctement les compétences visées, en vous appuyant sur des critères prédéfinis le cas échéant. Dans certains contextes, vous pouvez consulter des documents écrits attestant de la mise en pratique des connaissances ou des compétences acquises.
Témoignage d'une autre personne : Dans certains contextes, il peut être possible d'interroger des supérieurs hiérarchiques, des collègues ou des membres de la communauté pour savoir s'ils ont observé le participant mettre en pratique les connaissances ou les compétences concernées.
4) Définir à l'avance un critère minimum permettant de déterminer à quel moment un participant sera considéré comme ayant mis en pratique les connaissances et/ou les compétences acquises. En fonction de l'intervention, ce critère peut préciser :
le nombre minimal de connaissances ou de compétences clés qui doivent avoir été mises en pratique ;
la fréquence minimale d'utilisation, par exemple « au moins deux fois au cours du mois dernier » ; et/ou
preuve qu’une compétence a été correctement mise en pratique.
Veillez à ce que les critères que vous définissez soient facilement mesurables et réalistes. Envisagez de faire appel à un formateur ou à une autre personne qui comprend bien ce que les participants étaient censés apprendre. Testez-les au préalable et adaptez-les si nécessaire.
5) Recueillir les données requises à un moment approprié après la réalisation de l'activité du projet, en utilisant la période de référence définie à l'étape 2.
6) Pour déterminer la valeur de l'indicateur:
compter le nombre de participants évalués qui satisfont à la norme minimale d'utilisation définie à l'étape 4 ;
diviser ce chiffre par le nombre total de participants évalués pour lesquels il a été possible de déterminer si la norme était respectée ; et
multipliez le résultat par 100 pour le convertir en pourcentage.
Indiquez séparément le nombre de participants pour lesquels il n'a pas été possible de déterminer si les connaissances ou les compétences avaient été mises en pratique.
Ventilation par
Ces données peuvent être ventilées par sexe et par tranche d'âge et, si cela est pertinent et faisable, également par type d'aide reçue, par statut de handicap et selon d'autres critères pertinents.
Commentaires importants
1) Dans la mesure du possible, évaluez les connaissances et compétences pertinentes avant et après l'activité du projet. Les données de référence peuvent également vous aider à orienter la conception des activités de renforcement des connaissances et des compétences dans le cadre d'un projet.
2) Déterminez si l'indicateur mesurera l'utilisation des connaissances ou des compétences issues d'une seule activité du projet (par exemple, une formation) ou l'effet cumulatif de plusieurs activités du projet. Appliquez cette définition de manière cohérente lorsque vous sélectionnez les connaissances ou les compétences à évaluer et lorsque vous interrogez les participants sur leur utilisation.
3)S'assurer que les participants ont eu un besoin réel ou l'occasion d'utiliser les connaissances / compétences au cours de la période de référence. S'ils n'ont pas eu cette occasion, une valeur faible de l'indicateur pourrait ne pas refléter leur volonté ou leur capacité à mettre en pratique ce qu'ils ont appris.
4) Veillez à ce que la collecte de données évalue l'utilisation effective des connaissances et des compétences, et non pas simplement l'intention de les utiliser. Demandez aux participants de donner des exemples concrets illustrant comment et quand ils les ont mises en pratique. Dans la mesure du possible, recoupez les informations fournies par les participants avec des observations, des documents ou des informations provenant d'autres personnes afin de réduire le biais de désirabilité sociale.
5) Si possible, répétez l'évaluation à plusieurs reprises au fil du temps, par exemple peu de temps après l'activité, puis à nouveau quelques mois plus tard. Cela permettra de déterminer si l'utilisation des connaissances et des compétences s'inscrit dans la durée ou si elle ne se limite qu'à la période immédiatement suivant l'activité.
6) Demandez également comment et pourquoi les participants ont utilisé ou non les connaissances et compétences acquises. Cela peut permettre d'identifier les obstacles et les facteurs favorables à la mise en pratique, et d'évaluer si l'accompagnement apporté par le projet était adapté aux besoins des participants.
Indicateurs sectoriels pertinents
Pensez également à utiliser les indicateurs suivants :
Amélioration des connaissances / compétences (permet de vérifier si les acquis d'apprentissage visés ont bien été atteints avant d'évaluer s'ils sont mis en pratique)
Prévalence des obstacles au changement (ce qui permet d'expliquer pourquoi les participants savent peut-être ce qu'il faut faire, mais ne le mettent pas en pratique)