CONCEPTS EN « Suivi et évaluation »

DR SOUGOU,
SMSP/FMPO/UCAD

1
 Objectifs
A la fin de ce cours, l’étudiant devra être capable
de :

•Définir les concepts de suivi et évaluation dans le

contexte d’un programme/projet de santé,

•Décrire les outils et les méthodes pour le suivi et

l’évaluation,

•Décrire les composantes d’un plan de suivi et

évaluation.

2
 Plan du Cours
I. Aperçu General et Définition des Concepts de Suivi et
Evaluation

II. Description des Outils et des Méthodes pour le suivi et

l’évaluation

III. Avantages et défis du suivi et évaluation d’un

programme/projet de santé.

3
I. DEFINITION DES CONCEPTS ET APERÇU GENERAL
DU SUIVI ET EVALUATION

4
 Définitions et concepts de base

1. Le suivi
2. L’évaluation
3. Indicateur
4. Donnée, Sources de données

5
BUT DU SUIVI ET DE L’ÉVALUATION

Le but du suivi et de l'évaluation

est de mesurer
l'efficacité des programmes.
 Le suivi et l'évaluation permet aux
responsables de:
• prendre des décisions de gestion et de prestation de service;
• assurer l'usage le plus efficace et le plus rentable possible des
ressources ;
• évaluer la progression du programme/projet et apporter les
rectifications qui s'imposent ;
• évaluer la mesure dans laquelle le programme/projet produit
ou a produit l'impact désiré.
 SUIVI et ÉVALUATION des performances

Le suivi des performances peut :

• indiquer si le programme/projet est conforme au plan de mise en
œuvre ;
• identifier l'évolution dans le temps des intrants et extrants, de l'usage
des services et de certains résultats ;
• laisser entrevoir les problèmes possibles et leurs solutions
éventuelles.

L'évaluation peut :
• identifier l'évolution dans le temps des résultats globaux ;
• indiquer la mesure dans laquelle les changements observés sont le
résultat de l'intervention du programme/projet.
 Définition du concept « suivi »

• Le Suivi est un processus continu de

collecte et d’utilisation de
l’information normalisée visant à
évaluer:
– l’utilisation des ressources,
– la progression vers des objectifs, et
– l’obtention des résultats et effets escomptés.

9
 Définition du concept : suivi
• Le SUIVI est une fonction continue qui vise à
fournir aux gestionnaires du programme et
aux principales parties prenantes, des
indications sur le progrès réalisés ou des
difficultés rencontrés au cours de la mise en
oeuvre du programme pour :
– aider dans la prise de décision opportune,
– garantir la responsabilité et
– fournir la base pour l'évaluation et
l'apprentissage

10
 Définition « Évaluation »

• L’évaluation est l’appréciation systématique et

objective d’une initiative en cours ou achevée (dans sa
conception, dans sa mise en œuvre et dans ses résultats).

• L'évaluation est un exercice qui se fait en un moment donné

qui vise à apprécier systématiquement et objectivement la
pertinence, la performance et le succès du
projet/programme en cours ou achevé:
Ø Est-ce que les objectifs et résultats du projet ont été atteints?
Ø Est-ce qu’ils ont eu les effets attendus en termes d'amélioration de
l’offre de services de santé et de conditions de travail des RHS?
Ø Est-ce que l'intervention a été efficiente en termes de coûts-avantages
du projet?

11
 DEFINITION DE L’ EVALUATION

• L’évaluation = démarche scientifique

qui consiste à déterminer et à
appliquer des critères et des normes
dans le but de porter un jugement sur
les différentes composantes du
programme

12
 Le but d'évaluation

En général, les évaluations sont critiques pour la

prise de décision basée sur des preuves selon
les attributs suivants :
• Pertinence
• Performance
• Efficacité
• Efficience
• Impact
• Durabilité
• Apprentissage institutionnel
13
 Les types d'évaluation
§ Ex-ante/Initiale : conduite avant la mise en œuvre
pour évaluer des besoins et des attentes et pour
déterminer la faisabilité du projet
§ Évaluation à mi-parcours : conduite pendant la
mise en œuvre pour identifier des secteurs pour le
changement ou les modifications ; détecter des
lacunes et assurer la refonte immédiate des
stratégies d'intervention
§ L'évaluation finale :conduite à la fin du
programme pour évaluer les résultats
§ L'évaluation ex- post : conduite pour mesurer la
durabilité de programme après sa clôture.
14
 Utilité du S&E

• Le suivi & évaluation sert essentiellement à mieux :

– Gérer la mise en œuvre des plans/programmes
– Informer les parties prenantes et le Gouvernement sur la
mise en œuvre du plan/programme
– Contrôler la réalisation des activités et l'atteinte des
résultats
– Ajuster la logique de l 'intervention à l 'évolution du
contexte (stratégies)
– Identifier et mesurer les réalisations et les résultats
– Piloter et aider la prise de décision des bases factuelles

15
Suivi vs. évaluation

16
Compréhension du cadre logique des projets

17
 Intrants/Ressources

Un ensemble de ressources qui sont

le matériel brut de la
programmation.

Ex: financement, personnel, équipement,

matériel, etc.
 Activités/Processus

• Actions et mesure(s) interne(s) à mettre en œuvre pour

produire un ou plusieurs extrants du programme. Pour
exécuter des activités

Exemples d’activités :
– Entreprendre une étude sur la motivation des personnels de santé
– Organiser une formation sur le nouveau système d’information des
RHS
– Améliorer la capacité des écoles de formation des infirmiers et sages-
femmes

19
 Extrants - Résultats immédiats
(ou à court terme)
• Les extrants sont des produits ou services découlant directement
de la mise en œuvre des activités. Ils relèvent généralement du
contrôle des responsables du programme; Ce sont habituellement
des éléments tangibles qui peuvent être comptés; on parle aussi
dans le même contexte de « produits livrables ».

• En termes d'échéancier, il s'agira de résultats à court terme.

• Exemples d’extrants :
– Rapport d’étude disponible
– 150 cadres formées à l’utilisation du nouveau système d’information des
RHS
– La capacité de formation des 5 écoles ont été renforcées

20
 Effets (résultats moyen terme)

• Les extrants du programme induisent des effets ou des

changements. On parle aussi dans le même contexte de «
retombées ». C’est le type de résultats qui devraient
logiquement suivre, une fois qu'au moins un résultat
immédiat a été atteint;

• Exemples :
– Résultats de l’étude sont utilisés dans le plaidoyer du
Gouvernement avec les partenaires et l’élaboration de Programmes
des RHS
– Amélioration de la qualité des données et la gestion des RHS grâce
à l’utilisation du nouveau SIRHS
– Amélioration de la qualité de services de soins infirmiers et
obstétriques
21
 Résultats ultimes/Impact

• Le résultat ultime est la conséquence d'un ou de

plusieurs résultats intermédiaires qui ont été
atteints;

• Un résultat ultime contribue souvent à la réalisation

des résultats stratégiques de haut niveau du
ministère

• Exemple: Contribution à la baisse de la mortalité

maternelle
22
 Cadres de suivi et évaluation

• Cadres de Suivi et Evaluation : sont des

diagrammes ou représentations schématiques des

liens entre les composantes d’un programme

(intrant, processus, jusqu’à impact)
 Cadre logique de S&E

Intrants Activités Produits Résultats Impact

Qu’est ce qui est Qu’est ce qui a Qu’est ce qui a été Résultats à Résultats à long
investi? été fait? produit ? moyen terme terme

Temps Formations Directives, Connaissances Morbidité

Personnel, Réunions Agents formés, Attitudes réduite
Equipement, Ateliers MII distribuées Pratiques
Matériels, Visites de Ménages traités Compétences Mortalité réduite
Fonds supervision Médicaments Comportement
distribués Bien être social et
Couvertures économique

MISE EN ŒUVRE DU PROGRAMME RESULTATS DU PROGRAMME

Indicateurs Indicateurs Indicateurs de Indicateurs de Indicateurs

d’intrants d’activités produits résultats d’impact

Indicateurs pour le monitorage de la Indicateurs pour évaluer les

performance du programme paludisme, résultats du programme,
mesurés au sein de la population.
mesurés au niveau du programme.
 Différents niveaux d’indicateurs

Cinq niveaux d’indicateurs

• Intrants
• Processus
• Extrants
• Résultats/Effets
• Impact

25
 Types d’indicateurs

• Indicateur d’intrants :mesure qui montre l'utilisation des

ressources d'un programme.
• Indicateur d’intrants :mesure qui montre l'utilisation des
ressources d'un programme.
• Indicateur d'activités : une mesure qui montre la
réalisation immédiate des activités,
• Indicateur de produit : une mesure qui montre l'effet à
court terme des activités d'un programme.
• Indicateur d'effet : une mesure qui montre l'effet à moyen
terme des activités d'un programme sur la population ciblée.
• Indicateur d'impact : une mesure qui montre l'effet à long
terme des activités d'un programme sur la population ciblée.
26
 Qu’est-ce qu’un indicateur ?

Une variable qui mesure un aspect du programme

ou projet (en terme de changement)

Un ensemble approprié d'indicateurs inclut au

moins un indicateur de chaque aspect significatif
du programme ou du projet (c.-à-d. au moins un
par case du cadre de S&E)

27
 Qualités des indicateurs

• Quantitatif • Qualitatif
• Peuvent être directement • Impliquent la perception,
comptés et exprimés par un peuvent être analysés
nombre
quantitativement
• % de…
• # de…. • Congruence avec…
• Fréquence de…. • Satisfaction avec …
• Ratio….. • Connaissance de …
• Quantité de • Capacité de
• Adéquation…
• importance de
28
 Formes générales d’un indicateur

Un indicateur peut être :

• taux
• ratio
• pourcentage
• moyenne
• classement
• nombre
• indice composite

29
Caractéristiques d’un bon indicateur(1/2)

• SMART
– Specifique;
– Mesurable;
– Adaptable;
– Realisable;
– Temporel.

30
Caractéristiques d’un bon indicateur(2/2)

• Spécifique: mesure claire et précise de qu’il est censé

mesurer:
• Mesurable: erreur de mesure minime
• Adaptable: valeurs existantes dans différents groupes de
population et sous différentes approches du programme
• Réalisable: disponibilité des valeurs de l’indicateur
• Temporel: mesure à intervalles réguliers et appropriés en
fonction des objectifs et des activités du programme

31
Critères de sélection d’un indicateur

– Disponibilité de données
– Logique et lien avec les cadres de suivi et
évaluation
– Ressources/ coûts
– Besoins programmatiques, du gouvernement,
des bailleurs
– Consensus entre les parties prenantes
– Exigences des bailleurs.

32
 Définition du concept « donnée »

• Une donnée est un élément fondamental sur lequel se bâtit

un raisonnement, une recherche ou une étude;

• Les donnes se réfèrent souvent aux données brutes ou

informations non traitées

• Une information est un ensemble de données portant sur un

sujet précis et présentées dans un contexte particulier; par
exemple un contexte de prise de

• Une donnée peut être quantitative ou qualitative

33
 Sources de données
• En plus du système d’information des RHS et du
Système d’Information Sanitaire, il y a aussi
d’autres sources potentielles:

1. Les recensements de la population

2. Les enquêtes sur la population active
3. Les évaluations dans les établissements de santé
4. Les livres de paye de la fonction publique
5. Les registres des organes de réglementation
professionnelle
6. L’observatoire des RHS

34

34
II. Les outils et méthodes de suivi &
évaluation

35
 Outils de collecte de données

Instruments utilisés pour enregistrer l'information qui sera

recueillie à travers une méthode particulière.

Exemples d'outils de collecte

• Réunion
• Visite de terrain/supervision
• Registre/Formulaire
• Enquête – Questionnaire
• Email

36
 Les méthodes

• Évaluation de l’efficience (Intrants,

Processus et produits)
– Évaluation économique
• Evaluation de l’efficacité (Extrants,
Effets et Impact)
– La méthode quantitative
– La méthode qualitative.
37
III. Le Cadre de suivi et évaluation
d’un programme/projet de santé

38
 CADRE DE SUIVI ET EVALUATION

Il comprend plusieurs sous étapes:

1. Le Plan de S &E ou Cadre de performance,

2. Le système de gestion des données

3. Les mécanismes de coordination du S&E.

39
 PLANIFICATION S/E

La planification du suivi et de l'évaluation est essentielle

• Le suivi et l'évaluation exigent l'allocation de ressources de
projet :
– temps
– argent
– personnel
• La démonstration des effets du programme exige une preuve
empirique :
– indicateurs valables et données fiables
– valeurs de référence et mesures régulières pendant la projet
– analyse approfondie des résultats imprévus ou anormaux
• Engagement d'utilisation et gestion des données S/E
– la planification est un processus d'apprentissage pour les
administrateurs et autres effectifs
 PLANS S/E DES PERFORMANCES : PRINCIPES

La planification S/E exige la prise en compte des points suivants :

– idées et hypothèses à la base des buts du programme l’idéal

est de déterminer les buts du programme par un processus
d'évaluation contextuelle des besoins ;

– les rapports attendus entre les activités du programme, les

autres facteurs clés et les résultats.
 AVANTAGES DU SUIVI ET DE L’ÉVALUATION
Le suivi des performances permet :
• l'évaluation des réussites et des échecs en cours de mise en
œuvre des programmes/projets ;
• l'enregistrement fiable de l'évolution des intrants, extrants,
résultats et impact ;
• l'identification des problèmes résolubles en cours de projet.
L'évaluation des performances permet :
• l'isolement des variations marginales de résultats ou d'impact
imputables aux activités et aux interventions ;
• l'analyse des données qualitatives et quantitatives d'un aspect
du projet en vue d'améliorer les mises en œuvre futures dans
des contextes similaires ou différents.
 Défis possibles et faiblesses

• Faible leadership en S & E

• Les outils non-harmonisés de collecte de données
• L'attitude insuffisante vers la gestion de données

• Évaluation non-participative et études non menées par

consultation

• Les compétences insuffisantes dans l'analyse de

données, la diffusion, et l'usage de données de S&E,

43
 Défis possibles et faiblesses

• Infrastructure faible;
• Les allocations financières inadéquates pour le
S&E
• Le soutien logistique faible, surtout le contrôle de
soutien de supervision pour S & E .

• Faible partenariat en S&E pour atteindre l'objectif

de ‹ un système de S & E harmonisé › pour
rapporter des procédures de gouvernement, la
société civile, le secteur privé, et les partenaires au
développement
44
 Conclusion: Retenir que

Le but du suivi et de l'évaluation

est de mesurer
l'efficacité des programmes.
 Conclusion: Retenir que
Les buts du suivi et de l'évaluation des performances aide à
mieux:
– allouer les ressources en fonction des objectifs et résultats
mesurables du programme ;
– améliorer les programmes futurs et leurs impacts en fonction
de données réelles sur les résultats.

Les composantes des plans de suivi et évaluation des

performances incluent :
– les hypothèses, objectifs et projections du programme ;
– la description des activités avec ressources identifiées dans un
contexte local ;
– les résultats souhaités en termes de résultats objectifs
(mesurables), avec détails complets des indicateurs et des
mesures d'évaluation régulière des progrès réalisés, et
stratégies spécifiques de collecte, analyse et usage des données.
MERCI DE VOTRE ATTENTION

47