Synth

1
Synthèse générale
Séminaire sur le Suivi et lEvaluation des
programmes de santé au niveau du district
Applications pratiques. 14 juin 02 juillet
2010, Dakar/Sénégal
2
Semaine 1

• Introduction aux théories S E
• Elaboration dun Plan S E
• Présentation des Tdr des travaux de groupes sur
  les plans de S E
• Rôle de linformation stratégique
• Les cadres de S E

3
Semaine 1

• Les indicateurs de S E
• Les sources dinformation en S E
• Elaboration dun plan de S E
• Méthodes Quantitatives danalyse des données
  sanitaires

4
Semaine 2

• Méthodes Qualititatives danalyse des données
  sanitaires
• Méthodologie dévaluation de limpact
• Evaluation de la rentabilité et de lefficience
  dun projet/programme
• Programme de Communication pour le Changement de
  Comportement
• Suivi des projets et programmes

5
Semaine 2

• Gestion de la logistique des médicaments
• Programme de santé de lenfant PCIME
• Programme Elargi de Vaccination PEV
• Programme SR
• Programme de santé de lenfant Nutrition
• Elaboration dun plan de S E Etat
  davancement.

6
Semaine 3

• Elaboration dun plan de SE
• Programme IST/sida/TB
• Programme Paludisme
• Préparation des TP sur le terrain
• TP sur le terrain
• Analyse et interprétation des résultats des
  travaux de terrain
• Finalisation des travaux sur le terrain
• Présentation des divers travaux et clôture.

7

• Différences SUIVI et EVALUATION?

8
Suivi ET Evaluation

• Suivi  Que faisons-nous ?
• Suivi des intrants, processus et extrants pour
  déterminer si les programmes sexécutent comme
  prévu
• (formations, distribution de préservatifs, etc.)

• Évaluation  Quavons-nous accompli ?
• Évaluation de limpact des programmes sur les
  comportements ou la santé
• (usage du préservatif lors des derniers rapports
  sexuels risqués, incidence du VIH, etc.)

9
Définitions

• Le SUIVI est une fonction
  LEVALUATION est un exercice
• continue qui vise à fournir aux limité
  dans le temps qui vise à
• gestionnaires du programme et mesurer
  objectivement limpact
• aux principales parties prenantes, (résultats)
  observé au niveau de
• des indications sur le progrès de la
  population, attribuable aux
• réalisés ou des difficultés
  interventions du projet/program-
• rencontrées au cours de la mise me.
• en œuvre du programme.

10
Définitions suivi

• La collecte routinière des informations sur les
  activités dun programme/projet, ses produits,
  résultats attendus
• La mesure des progrès réalisés dans le sens de la
  latteinte des objectifs dun programme/projet
  cest le comptage des extrants
• Surveillance routinière de lutilisation des
  ressources financières et le fonctionnement dun
  programme/projet.
• Constitue la base de lévaluation dun
  programme/projet lorsquil est lié à un
  programme/projet spécifique.

11
Définitions évaluation

• Lanalyse rigoureuse, à caractère scientifique
  des informations relatives aux ressources,
  activités, et résultats du projet/programmes pour
  déterminer le mérite ou la valeur dudit programme
• Requière la conception détudes parfois un
  groupe de contrôle ou témoin souvent la mesure
  dans le temps.
• Lanalyse des données de suivi pour améliorer les
  projets/programmes et informer les décisions
  concernant les futures allocations de ressources.

12
Intrants

• Ce sont les Ressources utilisées dans le cadre
  dun projet/programme, telles que les ressources
  financières, humaines, matérielles
• - ressources financières provenant du
  gouvernement, des partenaires et bailleurs
• - personnel
• - protocoles et directives
• - supports de formation
• - etc

13
Processus/Activités

• Ce sont les Activités que le projet/programme
  mènent pour atteindre ses objectifs, telles que
  la sensibilisation, la distribution de supports,
  les séances de counseling, les ateliers et
  formations, la supervision.
• Assurer le counseling pré-test, le test du
  VIH, la distribution des moustiquaires

14
Extrants/Résultats au niveau du programme

• Ce sont les Produits directs ou produits
  livrables du projet/programme tels que les
  séances dinterventions réalisées, les personnes
  atteintes ou les supports éducatifs distribués
• Nombre dagents formés
• nbre de clients recevant un counseling
  pré-test,se faisant dépister du VIH et
  bénéficiant de counseling post-test.

15
Effets

• Ce sont les Résultats du programme qui se
  produisent aussi bien immédiatement quun certain
  temps après lachèvement des activités tels que
  les changements au niveau des connaissances, des
  attitudes, des croyances,des compétences,comportem
  ents,de laccès au services, des politiques.

16
Impacts

• Ce sont les Résultats à long terme dun ou de
  plusieurs programmes, dans le temps tels que les
  changements au niveau de linfection, de la
  morbidité
• - taux de transmission
• - taux dincidence
• - morbidité et mortalité.

17

• Quelle est la fonction dun Plan S/E?

18
Plan SE Fonctions

• Résume comment le programme mesurera ses
  résultats
• Imputabilité
• Résume le processus de consensus
• Transparence
• Responsabilité
• Guide la mise en œuvre du système SE
• Standardisation
• Coordination
• Archive la mémoire institutionnelle
• Un plan SE est un document vivant qui aura
  besoin dêtre ajusté quand le programme est
  modifié
• La fonction et la forme dun plan SE sera
  différent aux différents niveaux du système

19

• Quels sont les éléments clés dun Plan S/E?

20
Eléments clés dun plan de SE(1/2)

• Introduction/Description du problème de santé
• Description du programme- buts, objectifs, cadre
  conceptuel, activités, cadre des résultats
• Description des indicateurs avec sources de
  données, etc. (matrice et feuilles de référence)
• Description des mécanismes de collecte des
  données
• Suivi
• Evaluation

21
Eléments clés dun plan de SE(2/2)

• 5. Plan de démonstration de limpact
• 6. Plan de dissémination et utilisation des
  données/résultats
• 7. Analyse des obstacles à la qualité des données
  et solutions potentielles
• 8. Plan de mise en œuvre du Plan S/E avec
  calendrier et budget

22

• Barrières à lutilisation des données?

23
Déterminants de la Demande et Utilisation des
données et des Informations
CULTURE
APPROCHE TECHNIQUE
APPROCHE SYSTEMES
POLITIQUE
SOCIETE
COMPORTEMENT INDIVIDUEL
La prise de décisions intervient dans des
contextes sociopolitiques et culturel définis
24
(No Transcript)
25

• Quels sont les 3 types de cadres qui peuvent
  être utiles pour les gestionnaires de programmes
  et staff de S/E quand ils ont besoin de décrire
  leur programme??

26
Synthèse Cadres de S/E
Type de cadre Description Gestion de Programme Utilité dans le S/E
Conceptuel Interaction entre différents facteurs Détermine quels sont les facteurs qui vont influencer les résultats/impacts du programme Explique les résultats, surtout dans Evaluation dImpact
Logique Montre les liens logiques entre les intrants, les activités, produits/ résultats du programme Montre les relations causales entre les activités et les résultats Suivi/évaluation du processus et du résultat
Résultat Montre les liens logiques entre les objectifs du programme Montre les relations causales entre les objectifs du programme Suivi/évaluation des résultats
27

• Qu'est ce que cest, un indicateur?

28
Quest-ce quun indicateur ?

• une variable
• qui mesure
• un aspect du programme ou projet

29

• Quelle est lutilité des indicateurs standardisés
  au niveau international?

30

• Ces indicateurs
• aident chaque pays à évaluer lefficacité de sa
  riposte nationale
• permettent de fournir des informations majeures
  sur lefficacité de la riposte aux plans régional
  et mondial
• améliorer la comparabilité des données et/ou
  réponses entre pays ou entre régions
• mesurer les progrès dans le secteur de la
  mobilisation des ressources, de la politique
  générale et de la défense de la cause en matière
  de santé.

31

• Quelles sont les différentes sources des données
  ?

32
Système dinformation sanitaire données pour la
planification, le suivi et lévaluation dans le
secteur de population, santé et nutrition
Non-Routine
Routine
TYPE
UTILISATION
Niveau National
Aggreg. Statist. de Service Aggreg. Données de
gestion Aggreg. Données Surveill Données
financières Etat civil
Décision de politique Planification
stratégique Suivi de programme Surveillance de
maladie Soutien Technique Logistique
Enquêtes de Population EDS
Enquêtes de services De santé
Aggreg. Stat. Services Aggreg. Données
gestion Sites Sentinelles Liste
Observation Auto-Évaluation
Méthodes Évaluation Rapide
Planification) Management (Qualité/Efficience) Sup
ervision (Performance) Surveillance de maladie
Niveau District
Études Spéciales
Dossier Client Dossiers Financiers Logistiques FS
y registres, dossiers Données Commun.
Gestion et suivi client Gestion unité de
santé Planning travail/ de fin. Priorités
FS Client
Recensement
Naissances et décès Dossiers Scolaires Registres
ASC Recouvrement des coûts
Gestion et suivi client Gestion
logistiques Sensibilisation Communauté
Commun.i
Special
33
Quelles sont les six dimensions de la qualité des
données?

1. Exactitude ou validité
2. Fiabilité
3. Précision
4. Exhaustivité
5. Promptitude
6. Intégrité.

34

• Quel est le rôle particulier des méthodes
  qualitatives et quantitatives danalyse des
  données dans un bon système de suivi et
  évaluation?

35
Différences entre enquêtes qualitatives et
quantitatives (1/3)
Qualitative Quantitative
Permet d explorer les attitudes, les motivations, les pratiques etc. Mesure les évolutions, les niveaux, etc.
Détermine pourquoi Décrit Combien, combien de fois
Les modèles, les processus et les interactions sont plus faciles à observer Relations entre variables sont indiquées avant létude
Le questionnaire est ouvert linformation provient des interviewés A un objectif défini tous les termes et les questions importantes sont limités aux questions posées
Permet dexplorer les sujets sensibles Plus difficile de prendre en compte les questions sensibles
Na pas besoin déchantillons de grande taille Exige des échantillons importants
36
Différences entre études qualitatives et
quantitatives(2/3)
Qualitative Quantitative
Relativement moins cher à réaliser et les résultats sont faciles à obtenir Coûteux et prend du temps
Les résultats ne peuvent pas être généralisés à des populations plus larges Les résultats peuvent être généralisés à des populations plus larges
Il y a beaucoup de données et lanalyse est ardue Le traitement et lanalyse de données importantes est relativement facile
Pas besoin dexpert en statistiques pour lanalyse des données Connaissance statistique indispensable pour lanalyse
Les agents de santé peuvent participer à l étude Enquêteurs et agents de santé peuvent participer à l enquête
37
Différences entre études qualitatives et
quantitatives(3/3)

• Qualitative Quantitative

interprétation peut être biaisée par le chercheur Possibilité de maîtriser le biais
38

• Quels sont les différents avantages des approches
  dévaluation dimpact?

39
Récapitulatif des approches préférées
Approche Observations
Méthode expérimentale Généralement peu pratique suite aux difficultés à établir et à maintenir des conditions expérimentales contrôlées dans les études nationales.
Méthode quasi-expérimentale Plus pratique car la répartition aléatoire n'est pas nécessaire. Mais plus vulnérable au biais de sélection et autres risques de validité que les expériences aléatoires.
Méthodes de régression à niveaux multiples La moins exigeante des approches non expérimentales préférées. Evaluation de la relation entre les variables mesurant les activités du programme et des effets en fonction des données transversales de ménages et/ou d'établissements sanitaires recueillis dans les mêmes régions géographiques (par exemple, grappes EDS). Limitation-clé  risque d'estimations biaisées lorsque les programmes ne sont pas exécutés de manière uniforme ou aléatoire entre les régions géographiques.
40
Programmes de santé

• Description des cadres de S/E (Conceptuel,
  Logique et Résultats) 
• Identification des interventions/approches
  majeures permettant daméliorer le programme 
• Discussion de limpact principal et des
  indicateurs de résultat et identification des
  forces et faiblesses de ces indicateurs 
• Exemples spécifiques sur la manière dont les
  indicateurs de SE sont utilisés pour
  lamélioration du programme et la prise de
  décision 
• Développement d un cadre conceptuel et
  identification des indicateurs de SE dune des
  interventions identifiées discussion également
  des sources de données, des forces et faiblesses
  des indicateurs ( but des études de cas).

41

• MERCI