Étape 6 : Plan de suivi et d’évaluation
Des exemples d’indicateurs de suivi et d’évaluation pour chaque produit sont présentés ci-dessous sous forme d’exemples illustratifs. Ils doivent être adaptés au contexte local.
Le suivi et l'évaluation (M&E - Monitoring and evaluation) constituent un enjeu stratégique de toute activité de programme, car il fournit des informations sur la progression du programme en termes d'atteinte des objectifs définis.
Si la planification M&E doit être intégrée à la stratégie de communication, il ne s'agit pas d'élaborer un plan de suivi complet lors du développement de la stratégie (indicateurs, échantillons, outils, personnes chargées du suivi, fréquence de recueil de données, etc.). Au cours de celle-ci, il convient de se concentrer sur les indicateurs à intégrer dans le plan du programme. Les indicateurs M&E doivent être élaborés à partir d'une recherche formative et indiquer si les messages clés et les stratégies ont l'effet désiré sur le public visé.
Un plan complet M&E doit ensuite être bâti dans un document de programme distinct. L'élaboration d'un plan M&E doit spécifier les indicateurs à surveiller, les modalités et la périodicité du recueil des données, et le traitement appliqué aux données suite à leur analyse. De nombreuses sources de données peuvent servir à recueillir des données M&E. Il est important d'évaluer le champ d'action et le contexte du programme afin d'appliquer la méthodologie la mieux adaptée, car les coûts, les moyens humains et les exigences technologiques de ces activités peuvent varier. Si certaines options M&E à coût réduit permettent d'identifier des tendances en matière de demande de services, elles sont peut-être incapables de fournir des résultats approfondis sur les conséquences des activités et le fonctionnement du programme. Pour mesurer les causes et conséquences, il convient de mener des activités de recueil de données spécifiques au programme à des fins d'évaluation. Ci-dessous, consultez des exemples d'options à coût réduit et à coût élevé.
Si le recueil de données M&E tend à focaliser l'attention, le processus d'analyse et d'étude des données collectées ne doit pas être en reste. Les données M&E doivent permettre d'informer sur les modifications du programme et l'élaboration de nouveaux programmes. Pour garantir la diffusion régulière des indicateurs M&E, il est préférable d'élaborer ces processus d'étude au sein d'activités de gestion de programme.
Système/sources de données
Option à coût réduit
L’option à coût réduit utilise des sources de données et des opportunités existantes pour acquérir des informations sur le programme et son rôle dans les changements en matière de demande ou d’adoption du misoprostol, du sulfate de magnésium et de la chlorhexidine. Toutefois, elle permet uniquement d’identifier les tendances et n’offre pas la possibilité d’attribuer les changements à un programme ou une activité de programme en particulier. Voici des exemples de sources de données pour une option à coût réduit:
- La recherche formative pour les messages clés, le positionnement, l'élaboration de matériel et la sélection des médias (groupes de discussion avec les publics visés et entretiens approfondis avec des membres du public principal et du public d'influence)
- L'évaluation des campagnes de communication (groupes de discussion avec les publics visés, entretiens approfondis avec des membres du public principal et du public d'influence, ajout de questions à l'enquête omnibus concernant les campagnes, messages et activités)
- Les statistiques de service (informations issues du milieu hospitalier et des prestataires, telles que les fiches de référence et les registres de présence)
- Les statistiques des canaux de communication (informations issues de la télévision ou la radio sur l'audience recueillie par les activités de médias)
- Les enquêtes omnibus (ajout de questions liées à l'exposition et l'impact d'un programme)
- Les données autodéclarées par les prestataires (enquête à petite échelle parmi les prestataires sur les services dispensés et les pratiques de prescription, audits des ventes à petite échelle au sein des pharmacies et des boutiques de médicaments rurales sur les produits demandés et proposés)
- Les enquêtes démographiques et de santé (tendances en matière de santé maternelle et néonatale, environ tous les cinq ans)
Option à coût élevé
L'option à coût élevé recourt à des enquêtes représentatives spécifiques au programme et d'autres méthodes de recueil des données pour acquérir des connaissances approfondies sur les effets du programme et son fonctionnement. Voici des exemples de sources de données pour une option à coût élevé:
- La recherche formative pour les messages clés, le positionnement, l'élaboration de matériel et la sélection des médias (groupes de discussion avec les publics visés, entretiens approfondis, reportage photo ou observation au sein des familles ou des cliniques et pharmacies ou auprès des ASC à observer et documenter)
- Les statistiques de service (informations issues du milieu hospitalier et des prestataires, telles que les fiches de référence et les registres de présence)
- Les statistiques des canaux de communication (informations issues de la télévision ou la radio sur l'audience recueillie par les activités de médias)
- Les données autodéclarées par les prestataires (sur les services dispensés, audits des produits et des ventes parmi les grossistes et les agences gouvernementales d'approvisionnement, audits au sein des pharmacies et des boutiques de médicaments rurales sur les produits demandés et proposés)
- Les enquêtes représentatives et adaptées au programme à l'échelle nationale (axées sur les problèmes liés aux connaissances, aux perceptions, à l'acceptation et à l'utilisation). Elles peuvent inclure une enquête, un suivi et les limites de base pour mesurer les changements et les résultats.
- Les entretiens finaux des clients (pour évaluer la mise en place ou non de l’éducation sanitaire concernant la disponibilité et/ou l’utilisation du misoprostol, du sulfate de magnésium et de la chlorhexidine, ainsi que la satisfaction utilisateur des services reçus, notamment la perception, l’expérience et les intentions)
Indicateurs M&E
Les indicateurs M&E doivent inclure des indicateurs de processus, de portée et d'impact:
Indicateurs de processus: évalue la mesure dans laquelle les activités de création de la demande respectent le calendrier de mise en œuvre.
Indicateurs de portée du programme: mesure (a) les modifications d'opportunité des publics, la capacité et la motivation à utiliser le produit et (b) la mesure dans laquelle ces modifications coïncident avec l'exposition au programme.
Indicateurs de portée sur les comportements: mesure (a) les changements de comportement des publics et (b) la mesure dans laquelle ces modifications coïncident avec l'exposition au programme.
Indicateurs d'impact sanitaire: mesure les changements en matière de santé.
Pour améliorer l'utilité des données M&E, les indicateurs doivent être regroupés afin de permettre une analyse plus approfondie des performances du programme. Il est recommandé de les regrouper par sexe, situation géographique, type de prestataire, etc.
Voici des biais statistiques courants que doivent connaître les programmateurs lors de la conception, la mise en œuvre et l'interprétation du M&E:
- Le biais d’autosélection – par exemple, une femme qui a eu recours/a recours à des services SAN au sein d’une clinique peut être davantage intéressée et peut souhaiter répondre à une enquête concernant les services SAN, en comparaison à une personne n’y ayant pas eu recours.
- Le biais de désirabilité sociale – suite à l'exposition à des initiatives de promotion sanitaire, les publics visés peuvent se sentir contraints de donner les « bonnes réponses » aux questions, notamment en faisant état de leurs attitudes positives à l'égard d'un produit alors qu'ils n'en sont pas totalement convaincus. Comme les interventions pour créer de la demande tendent à définir des normes sociales positives, le biais de désirabilité sociale constitue un véritable défi M&E.
Exemples illustratifs d'indicateurs M&E
- Indicateurs M&E concernant le misoprostol
- Indicateurs M&E concernant le sulfate de magnésium
- Indicateurs M&E concernant la chlorhexidine
En cliquant sur les liens ci-dessous, vous pourrez visualiser ces exemples par étapes soit sous forme d'aperçu (sans téléchargement), soit en les téléchargeant au format Word ou PDF. Une version complète de chaque stratégie de communication est également disponible sous les « stratégies adaptables », dans la barre latérale de droite, aux formats Word ou PDF. La stratégie complète inclut des recommandations et des exemples pour l'ensemble de la stratégie.
À propos des produits d’urgence de santé maternelle et néonatale