Expertise France est à la recherche d'un consultant, et/ou d'une société de conseil, pour réaliser une évaluation de la qualité des données (CQD) du projet financé par UNITAID. La mission devrait suivre les procédures d'Expertise France sur la conduite d'un CQD et utiliser la liste de contrôle pour l'évaluation de la qualité des données.

Le consortium prévoit de renforcer le système global de suivi et évaluation du projet en utilisant les conclusions du CQD pour résoudre les problèmes liés à la qualité des données. En tant que chef de file du consortium, Expertise France a donc l'intention d'avoir recours aux services d'un ou de plusieurs consultants externes pour effectuer un audit et une évaluation complets de la qualité des données parmi un échantillon représentatif d'établissements offrant des services de dépistage et de traitement de l'HPV (Papillomavirus humain).  Expertise France discutera et conviendra avec le(s) consultant(s) du nombre d'indicateurs pour des domaines techniques spécifiques qui seront évalués.  

L'objectif principal de l'évaluation de la qualité des données est de déterminer si les données déclarées par les établissements de santé répondent aux normes de validité, d'intégrité, de précision, de fiabilité et d'actualité des données. On s'attend à ce que cela se fasse au moyen d'évaluations régulières des systèmes et de vérifications des données.  L'activité évaluera en permanence le système global de gestion des données, l'accent étant mis en particulier sur l'évaluation de la concordance des données figurant dans les documents sources avec les données figurant sur les formulaires récapitulatifs et les données disponibles dans le système électronique des donateurs. Les CQD doivent mettre en évidence les forces et les faiblesses des systèmes de gestion des données au niveau des sites, des districts et des projets.  Les résultats de l'évaluation de la qualité des données devraient faciliter la prise de décisions concernant les processus d'amélioration de la collecte, du regroupement, de l'analyse, de la communication et de l'utilisation des données au niveau des sites. En résumé, le CQD se concentrera sur les points suivants:

1. Évaluation de la qualité des rapports soumis dans le cadre du DHIS2 (ou logiciel connexe) et des systèmes des bailleurs en fonction de leur concordance avec les registres sources
2. Évaluation de l'exhaustivité des données au niveau du patient pour un ensemble d'indicateurs cliniques
3. Estimation de la marge d'erreur des données déclarées par rapport aux données de base
4. Évaluation des différents systèmes de collecte, de traitement et de gestion des données mis en place
5. Évaluation du flux de données à partir du point de collecte initial et des niveaux de déclaration.
6. Identification des domaines de vulnérabilité potentielle qui affectent la crédibilité et l'utilité générales des données recueillies.
7. Recommandation de mesures pour remédier à toute faiblesse identifiée dans la collecte des données, la compilation/traitement, l'analyse et l'utilisation des données soumises.

LIVRABLES

Pour chaque mission, l'équipe de CQD fournira les livrables suivants :

1. Protocole du CQD (rapport initial) décrivant les objectifs, les méthodologies, les outils et les échéanciers Ébauche du rapport pour examen et rétroaction. Le CQD devrait être aligné sur le protocole du CQD d'Expertise France.
2. Le CQD devrait inclure un résumé des points forts, des points faibles et des possibilités d'amélioration, ainsi que de leur importance pour l'amélioration des processus et des systèmes de S&E.
3. Un ensemble de recommandations pour remédier aux faiblesses.
4. Les résultats du CQD doivent être présentés (en PPT) lors d'une réunion de débriefing complète avec le personnel du projet. Le rapport final est soumis sous forme électronique à l'adresse suivante

MÉTHODOLOGIE

L'expert en CQD élaborera un protocole décrivant la méthodologie, les processus, les étapes et les outils qui seront utilisés pour la vérification. Le CQD se fera principalement par le biais de visites sur le terrain à l'aide d'outils convenus. Le CQD sera réalisé en présence d'un représentant du Ministère de la Santé. L'expert analysera les indicateurs sélectionnés à chaque étape du système de gestion des données (de la collecte à l'établissement du rapport). 

Les éléments suivants peuvent guider le processus d'évaluation :

• Conception : qu'il s'agisse de données transversales ou longitudinales
• Sources de données primaires : formulaires clients, registres, Dhis2 et formulaires de rapport
• Source de données secondaires : version papier et électronique des rapports mensuels, rapports trimestriels disponibles au niveau du site/district.
• Entretiens avec des travailleurs de la santé, des commis aux données sur place, des adjoints à l'information sur la santé/assistants aux dossiers médicaux et le personnel du programme du consortium.

Le CQD se veut une vérification des données par une tierce partie et, par conséquent, l'équipe de vérification doit respecter les principes d'indépendance par rapport à toutes les parties, y compris Expertise et ses partenaires du consortium.

En général, le consultant suivra les protocoles d'Expertise France pour la conduite d'un CQD, en utilisant les lignes directrices d'Expertise France pour le CQD : 1) examiner les procédures de collecte, de mise à jour et de traitement des données afin de s'assurer que les procédures sont appliquées de façon uniforme et continuent d'être adéquates ; 2) identifier les points à améliorer, si possible ; et 3) conserver la documentation du CQD, soumise à Expertise France.

Avant de se rendre sur les sites du projet, le consultant travaillera avec le bureau extérieur de Jhpiego et/ou d'Expertise France pour réaliser une autoévaluation de la qualité des données. C'est le personnel de leurs systèmes de collecte de données qui s'en charge.

Le consultant choisira les indicateurs au niveau des résultats et les indicateurs au niveau des extrants à tester. Le consultant vérifiera si la documentation confirme que l'équipe de S&E a effectué des mesures internes de qualité des données conformément au plan de S&E pendant toute la durée du projet. Le CQD analysera les indicateurs du programme pour :

• Évaluer la qualité des données soumises par rapport aux normes de validité, d'intégrité, de précision, de fiabilité et d'actualité des données.
• Évaluer le système de collecte et d'analyse des données d'Expertise France et de ses partenaires
• Évaluer le système d'information de gestion Expertise France et ses partenaires pour l'enregistrement, la maintenance et le reporting des données
• Identifier les domaines de vulnérabilité potentielle qui affectent la crédibilité et l'utilité générales des données.
• Recommander des mesures pour remédier à toute faiblesse identifiée dans les données soumises par Expertise France et ses partenaires dans les procédures et systèmes de S&E.

Le consultant appliquera les critères de qualité des données et examinera les systèmes et les approches de collecte des données afin d'assurer la qualité des données au fil du temps utilisées dans un CQD, et documentera les résultats - formels ou informels. Le CQD devrait comprendre les éléments suivants :

1. Vérifier les anomalies, les erreurs de transcription et évaluer l'effet de tout écart de contrôle de la qualité, en se basant sur un jugement professionnel contextuel ;
2. Examiner l'affichage graphique des ensembles de données sur les caractéristiques et les tendances ; identifier toute valeur aberrante, examiner et vérifier les hypothèses sous-jacentes aux tests, etc.

De cette mission, Expertise France souhaiterait recevoir des informations importantes permettant au consortium de tirer des conclusions sur les forces et les faiblesses des preuves fournies par les données du consortium.

Expertise France fournira au consultant tous les documents nécessaires, y compris le plan de suivi et d'évaluation approuvé par UNITAID. La mission consistera à visiter le projet SUCCESS et son personnel (Expertise France et ses partenaires) pour réaliser le CQD et en partager les résultats.

Le consultant tiendra un débriefing avec l'équipe SUCCESS M&E à la fin de la mission.

Période du projet pour le CQD : septembre 2020 - décembre 2022

Durée de l'affectation :

Les CQD seront effectués une fois par an, généralement après que les données auront été soumises au Ministère de la Santé et aux bailleurs.

• Jusqu'à 15 jours, septembre 2020 - décembre 2022 pour le Burkina Faso - 5 jours par an
• Jusqu'à 15 jours, septembre 2020 - décembre 2022 pour la Côte d'Ivoire - 5 jours par an
• Jusqu'à 15 jours, septembre 2020 - décembre 2022 pour les Philippines - 5 jours par an
• Jusqu'à 15 jours, septembre 2020 - décembre 2022 pour le Guatemala - 5 jours par an