L’évaluation de l’intervention peut être exhaustive (analyse de chaque activité et stratégies) ou ciblée sur certaines activités et/ou stratégies.
Elle étudie différents aspects : efficacité, accessibilité, réactivité, sécurité et qualité, mobilisation des ressources.
Dès le début de l’intervention, définir les objectifs et les indicateurs, s’assurer que les outils permettant de collecter les données sont disponibles et que le personnel est formé à leur utilisation.
Certains indicateurs sont collectés en routine tout au long de l’épidémie. D’autres sont collectés lors de visites sur le terrain dans un échantillon d’établissements de soins ou sites de vaccination, selon une méthodologie et avec des outils spécifiques, établis dès le début de l’intervention. Les informations sont compilées et analysées en fin d’épidémie.
Un rapport final d’évaluation de l’intervention est rédigé et présenté au comité de gestion de l’épidémie. Il consiste en une analyse critique des interventions menées et formule des recommandations pour améliorer la prochaine riposte. Il se base sur les tableaux d’évaluation présentés ci-après.
7.5.1 Évaluation de la surveillance
Indicateurs | Données nécessaires |
Source/ outils de collecte |
Méthode | Commentaires |
Efficacité opérationnelle | ||||
---|---|---|---|---|
Proportion |
– Nombre d’établissements où la définition de cas est disponible |
– Liste des établissements de soins |
Visite d’un échantillon d’établissement de soins |
Faire particulièrement attention aux structures périphériques
Résultat attendu : 100% |
Proportion |
– Nombre d’établissements qui envoient la fiche de surveillance chaque semaine |
– Formulaire de suivi hebdomadaire de réception des données de surveillance |
Exhaustif, sur la durée de l’épidémie |
Résultat attendu : 100% |
Délai de transmission des fiches hebdomadaires de surveillance |
– Date de transmission des fiches hebdomadaires de surveillance |
– Liste des établissements de soins |
Exhaustif, sur la durée de l’épidémie |
Résultat attendu : |
Surveillance biologique | ||||
% des prélèvements |
– Nombre de prélèvements réalisés par type d’examen demandé |
– Registre des examens biologiques |
Exhaustif, sur la durée de l’épidémie, sur les districts sentinelles |
|
Délai de confirmation |
– Date et localisation des premiers cas |
– Formulaire de surveillance hebdomadaire |
– Analyse des formulaires de surveillance hebdomadaire ou des registres des établissements de soins |
Résultat attendu : |
Surveillance des MAPI | ||||
Existence d’une |
– Système de surveillance existant |
– Médecin chef de district, responsable de la surveillance |
Interview | |
Incidence des MAPI |
– Nombre de MAPI par classe d’âge et lieu sur la période |
– Feuille de notification individuelle des MAPI rougeole |
– Exhaustif |
|
Répartition des MAPI |
– Nombre total de MAPI graves par cause |
– Feuille de notification individuelle des MAPI rougeole |
– Exhaustif |
7.5.2 Évaluation de la prise en charge des patients
Indicateurs | Données nécessaires |
Source/ outils de collecte |
Méthode | Commentaires |
Efficacité | ||||
---|---|---|---|---|
Létalité déclarée |
– Nombre de cas et de décès par unité administrative (région, district, etc.) |
– Fichier Excel de surveillance de la rougeole |
Analyse du fichier Excel de surveillance de la rougeole |
Facilement mesurable si le système de surveillance est efficace
Résultat attendu : < 5% |
Létalité globale et |
– Nombre de cas et de décès enregistrés par âge, par établissement, pour la période épidémique |
– Registre des cas de rougeole |
– Calcul pour chaque hôpital |
Élimine le biais dû à un système de surveillance non fiable
Résultats attendus : |
Accessibilité | ||||
Proportion |
– Nombre d’établissements approvisionnés par unité |
– Formulaire de dotation |
Analyse détaillée des feuilles de dotation et de la liste des établissements de santé |
Vérifier que tous les établissements de soins sont fonctionnels
Résultat attendu : 100% |
Proportion |
– Nombre d’établissements où le protocole est disponible |
– Protocole présent dans l’établissement |
Visite d’un échantillon d’établissements de soins |
Protocole en langue nationale
Résultat attendu : 100% |
Proportion |
– Rupture de stock constatée au niveau du district : date et durée |
– Fiche de stock |
– Analyse détaillée des fiches de stock, formulaires de dotation et fichier de suivi de la disponibilité en traitements |
Analyse systématique au niveau du district
Résultat attendu : |
Réactivité | ||||
Délai d’approvisionnement |
– Date à laquelle les premiers cas ont été rapportés |
– Fichier Excel de surveillance des cas de rougeole |
Analyse détaillée des : |
Faire spécialement attention aux structures périphériques
Résultat attendu : |
Délai entre l’alerte au |
– Liste des structures de santé approvisionnées et |
– Fichier Excel de surveillance des cas de rougeole |
Analyse détaillée des : |
Faire spécialement attention aux structures périphériques
Résultat attendu : |
Sécurité/Qualité | ||||
Proportion de cas traités selon le protocole recommandé |
– Nombre de cas |
– Protocole recommandé |
Sur un échantillon de structures, analyse des : |
Faire spécialement attention aux structures périphériques
Résultat attendu : 100% |
Sécurité des injections |
– Nombre d’établissements utilisant des conteneurs de sécurité |
– Grille d’évaluation |
Visite d’un échantillon d’établissements et observation |
Résultat attendu : 100% |
Coût | ||||
Coût par patient traité |
– Coût total du volet curatif de l’intervention |
– Factures |
Ces coûts comprennent : les médicaments, le matériel, les transports et le personnel |
Nécessite une préparation avec le personnel de la comptabilité |
7.5.3 Évaluation de la vaccination
Indicateurs | Données nécessaires |
Source/ outils de collecte |
Méthode | Commentaires |
Efficacité | ||||
---|---|---|---|---|
Efficacité vaccinale |
– Définition de cas |
– Registre des cas de rougeole ou line listing |
Plusieurs méthodes : |
Réalisé par un épidémiologiste (voir Section 7.6)
Résultat attendu : > 80% |
Nombre de cas évités par la vaccination Fraction préventive |
– Données démographiques |
– Fichier Excel de surveillance des cas de rougeole |
– Sur un échantillon de lieux |
Réalisé par un épidémiologiste |
Accessibilité | ||||
Couverture vaccinale par classe d’âge, par lieu |
– Nombre de doses administrées : total, par classe d’âge, par lieu |
– Fichier Excel synthèse des vaccinations rougeole |
– Analyse des recueils de données |
Résultats attendus : |
Proportion de sites qui n’ont pas eu de rupture de stock en vaccins ou SAB |
– Date et durée des ruptures de stock au niveau du district |
– Fiche de stock |
– Analyse des documents |
En fin de campagne :
Résultat attendu : 100% |
Réactivité | ||||
Délai entre l’alerte épidémique et le début et la fin de la campagne de vaccination |
– Date de l’alerte |
– Fichier Excel de surveillance des cas de rougeole |
– Exhaustif si possible |
Calculé en fin de campagne
Résultat attendu: |
Nombre de personnes vaccinées par jour et par |
– Durée de la campagne : date par lieu (séparer zones urbaines et rurales) |
– Feuille de pointage |
– Exhaustif si possible |
Analyser séparément zones urbaines et rurales
Résultats attendus : |
Sécurité/Qualité | ||||
Taux d’utilisation des vaccins |
– Nombre de doses injectées |
– Fichier Excel de synthèse de vaccination |
Exhaustif tout au long de la campagne |
Résultat attendu : ≥ 85% |
Ratio des SAB utilisées / nombre de conteneurs de sécurité utilisés |
– Nombre de SAB utilisées |
– Fichier Excel de synthèse de vaccination |
– Exhaustif |
Le ratio ne doit pas être supérieur à la capacité maximale des boîtes utilisées
Résultats attendus : |
Proportion de personnel s’étant piqué au cours de la campagne (AES) |
– Nombre de personnes s’étant piquées au cours de la campagne |
– Formulaire de déclaration des AES |
– Analyse exhaustive (si déclaration des AES mis en place) |
Si utilisation du questionnaire, vérifier l’application de la procédure recommandée en cas d’AES |
Proportion de réfrigérateurs possédant une feuille de surveillance de la T° à jour |
– Nombre de réfrigérateurs utilisés pour la campagne |
– Liste des réfrigérateurs utilisés pour stocker les vaccins |
– Sur un échantillon de lieux de stockage tirés au hasard |
– Au minimum, contrôler la chaîne de froid du district
Résultat attendu : 100% |
Proportion des sites de vaccination ayant dispositif de collecte et d’élimination des déchets correcte |
– Nombre total de sites |
– Grille d’observation |
– Échantillon de sites |
Au cours de la campagne
Résultat attendu : 100% |
Coût | ||||
Coût global de la campagne |
– Montant total des dépenses |
– Comptabilité des dépenses |
Analyse des dépenses : vaccins, matériel d’injection, transport, personnel, chaîne de froid, logistique, etc.) |
|
Coût d’une personne vaccinée |
– Montant total des activités de vaccination (zones urbaines/rurales) |
– Fichier Excel de synthèse de vaccination |
Analyse des dépenses |
Nécessite une préparation avec le personnel de la comptabilité |
Coût par cas et décès évités |
– Montant total des activités de vaccination |
– Fichier Excel de surveillance des cas de rougeole |
Analyse des dépenses | Après la campagne |
Ressources | ||||
Ratio des SAB utilisées/ nombre de vaccins administrés |
– Nombre de SAB utilisées |
– Fichier Excel de synthèse de vaccination |
– Global au niveau du district |
Résultat attendu : le ratio ne doit pas être inférieur à 1 |
Proportion d’équipes avec un nombre de personnes adapté |
– Nombre de personnes par équipe et qualification adaptée à la tâche |
– Grille d’observation |
– Sur un échantillon de sites tirés au hasard |
– Composition standard des équipes fixée en début de campagne (urbain et rural)
Résultat attendu : 100% |
7.5.4 Évaluation de la mobilisation sociale
Indicateurs | Données nécessaires |
Source/ outils de collecte |
Méthode | Commentaires |
Efficience/Efficacité opérationnelle | ||||
---|---|---|---|---|
Proportion des motifs de non vaccination liés au manque d’information |
– Nombre total de personnes non vaccinées |
Enquête de couverture vaccinale avec étude de motifs de non vaccination |
Enquête de couverture vaccinale |
Réalisée en fin de campagne
Résultat attendu : < 10% |