l’évaluation

L’évaluation
 Clarification du concept
 C’est un processus qui permet de porter un
jugement de valeur fondé sur la mesure et
l’appréciation des résultats d’un service ou
d’un programme en relation avec ses
objectifs
 Appréciation aussi systématique et objective
que possible de la conception, de la mise en
oeuvre et des effets d’une politique, d'un
programme ou d'un projet.
 L’évaluation (suite)

 Opération qui consiste à estimer, à

apprécier, à porter un jugement de valeur ou
à accorder une importance à une personne, à
un processus, à un événement, à une
institution ou à tout objet à partir
d’informations qualitatives et/ou
quantitatives et de critères précis en vue
d’une prise de décision.
Évaluer, c’est comprendre, éclairer l’action de
façon à pouvoir décider avec justesse de la
suite des événements.

(Renald LEGENDRE - Dictionnaire actuel de l’éducation, 1993 - GUÉRIN / ESKA).
 L’évaluation (suite)

 Démarche ou processus conduisant au

jugement et à la prise de décision.
Jugement qualitatif ou quantitatif sur la
valeur d’une personne, d’un objet, d’un
processus, d’une situation ou d’une
organisation, en comparant les
caractéristiques observables à des normes
établies, à partir de critères explicites, en
vue de fournir des données utiles à la
prise de décision dans la poursuite d’un
but ou d’un objectif.
(Renald LEGENDRE - Dictionnaire actuel de l’éducation, 1993 - GUÉRIN / ESKA).
 L’évaluation (suite)
 Au total
 Elle se réfère aux résultat des activités
menées et aux facteurs qui conditionnent
ces résultats
 La raison même de l’évaluation est la rétro
action (feed-back) sur les décisions
initiales.
 Sans ce feed-back l’évaluation est une
action inutile
 Elle dépend d’un bon système d’information
c’est-à-dire sur une somme limitée
d’informations utiles et vraies au bon
endroit et au bon moment
 L’évaluation (suite)

 Elle suppose une mesure et une

comparaison de la mesure avec quelque
chose
 On pourrait dire qu’évaluer c’est répondre
à 3 questions:
1 – qu’est ce qui a été fait ?
2 – qu'est ce qui se fait ?
3 – qu’est ce qu’on pourrait faire ?
 L’évaluation (suite)

. Evaluation
décision

SUPERVISION

instructions

exécution résultats
 L’évaluation (suite)

Il faut différencier l'évaluation de

la supervision.
 L'évaluation a pour objet un programme, qui est
analysé en vue d'une décision le concernant.
 La supervision est tournée vers les personnes.
On n'évalue pas les personnes, on les supervise.
La supervision fait partie du management des
ressources humaines et a pour but l'amélioration
(ou le maintien) de la performance des personnes.
 L’évaluation (suite)

typologie de l’évaluation
 L’évaluation formative
 Elle se fait avec l’objectif de produire
l’information afin d’influencer le déroulement
d’un programme
 Elle est appropriée lorsque le programme est
encore à sa phase de développement
 Elle nécessite souvent une collecte périodique et
continue d’informations et fait appel à une
approche descriptive
 L’évaluation (suite)

 L’évaluation sommative

 Elle se fait dans le but de déterminer la valeur

d’un programme (certifier un produit fini)
 Elle requiert une collecte de donnée ponctuelle
et fait appel à une approche analytique
 L’évaluation (suite)

 L’évaluation normative

Elle consiste à porter un jugement sur une

intervention en comparant les ressources mises
en œuvre et leur organisation (structure), les
services ou les biens produits processus) et les
résultats obtenus à des critères ou des normes
 L’évaluation (suite)

 L'évaluation "pragmatique"
 Elle est réalisée par des professionnels de terrain
dans le cadre de leurs pratiques.
 Elle a pour but de comparer la pratique quotidienne
aux données acquises de la science puis
d'examiner les causes d'une éventuelle
discordance afin d'y remédier
 Elle vise à s'assurer de la conformité de la mise en
oeuvre du programme et/ou à l'obtention des effets
attendus, donc l'amélioration de la performance du
programme .
 L’évaluation (suite)

 La recherche évaluative
 Consiste à porter un jugement à posteriori sur les
relations qui existent entre les différentes
composantes d’un programme
 Elle s’inscrit dans une démarche analytique au
moyen de méthodes scientifiques.
 Elle peut s’insérer dans la perspective formative
ou sommative
 Elle est plutôt ponctuelle et requiert un processus
complexe permettant d’approfondir un
questionnement
 L’évaluation (suite)

 La recherche évaluative est pratiquée par des

chercheurs et a pour finalité de contribuer à
remettre en cause et à améliorer les données de la
science, qui ne sont jamais définitivement acquise .
 Elle vise à établir l'efficacité de nouvelles
interventions, autrement dit elle a une finalité
fondamentale , qui est la poursuite de la
connaissance . Un exemple de ce type d'évaluation
est l'essai thérapeutique, où l'efficacité d'un
nouveau traitement est comparée à celle d'un
ancien traitement.
 L’évaluation (suite)

 D'autres auteurs définissent l'évaluation de

recherche de façon plus large. Pour eux, il y a
recherche évaluative dès lorsqu'on met en place
une démarche scientifique pour tester la relation
entre une intervention et ses effets.
Suivant cette définition, l'évaluation de recherche
concerne également les programmes
professionnels.
 La plupart des auteurs opposent l'évaluation
pragmatique et l'évaluation de recherche (ou
recherche évaluative)
 L’évaluation (suite)
 Les éléments spécifiques de
l’évaluation:
 Trois concepts fondamentaux:
La pertinence - L’efficacité - L’efficience
 Deux concepts connexes:
L’utilité - L’égalité (équité)
 L’évaluation se définit comme l’étude de la
pertinence, de l’efficacité et de l’efficience
des actions entreprises
 L’évaluation (suite)

 la pertinence:
C’est la cohérence de l’action par rapport
au problème posé par une situation
objective, c’est - à - dire qu’on se pose la
question de savoir quelle est la raison
d’être de ce qu’on fait
 L’évaluation (suite)

 L’efficacité

Correspond à la comparaison des résultats

avec les objectifs, c.à.d le degré auquel on a
atteint les objectifs préétablis, par le résultat
des activités
exemple: 1°) si on a comme objectif de couvrir
1000 femmes enceintes et qu’on en a atteintes que
700, l’efficacité est de 70%
2°) si on a comme objectif de traiter
100 tuberculeux a INH (qui donne 67% de guérison)
et qu’on a 67 guéris, le programme est efficace à
100%
 L’évaluation (suite)

 L’efficience

C’est la comparaison des résultats par

rapport au coût. Que ce coût soit
monétaire (cas le plus fréquent) ou extra
monétaire (non comptabilisable, dans ce
cas il s’agit des préjudices résultant des
activités menées, tels les effets
secondaires d’un traitement)
 L’évaluation (suite)

 L’utilité

 c’est la qualité d’une action d’avoir

un effet qui va dans le sens des effets
attendus (du but).

 On peut dire aussi que l’importance du

changement réalisé donne l’utilité des
activités entreprises
 L’évaluation (suite)

 L’équité

 Savoir si les résultats obtenus se

répartissent sur toute la population ou
bien sur une partie seulement. On
compare donc les résultats à l’intérieur
des différents groupes de la population
visée.
 C’est à la fois une forme de pertinence
et une forme d’efficience.
 L’évaluation (suite)
Schéma récapitulatif
.
P problèmes
E
R
Buts et priorités
T
I EFFICACITE
N objectifs
E Ressources
N engagées
C activités
E
EFFICIENCE
résultats
 L’évaluation (suite)

 Les étapes de l’évaluation

 Il n’y a pas d’évaluation type, pas de modèle

prêt à l’emploi.
 L’évaluation se construit en fonction du
programme, des questions qui se posent, et
aussi des ressources disponibles pour y
répondre.
 Les 9 étapes suivantes peuvent servir de guide
dans cette démarche toujours singulière.
 L’évaluation (suite)

1ère étape: les préalables

Avant toute démarche d’évaluation, il y a
quatre préalables à réaliser :
a. Constituer un comité d’évaluation.
a. Formuler les questions auxquelles
l’évaluation doit répondre.
a. Répondre aux questions préalables pour
s’assurer que l’évaluation est pertinente et
réalisable.
a. Reprendre les intentions de départ du
cadre logique du programme pour vérifier
la cohérence de la démarche.
 L’évaluation (suite)

2ème étape: Le cadre logique

 L’évaluation doit toujours repartir des intentions de
départ et tenir compte de la façon dont l’action ou
le programme a réellement été mis en œuvre.
 Elle doit prendre en considération les imprévus et
les changements qui sont survenus.
 Avant toute démarche d’évaluation, il faut revisiter
les étapes de la planification et de la mise en
oeuvre.
 L’évaluation (suite)

3ème étape: Les objectifs de l’évaluation

 L’évaluation est un instrument de mesure et de
conduite du changement.

 Planifier l’évaluation c’est :

 Préciser la ou les questions auxquelles
l’évaluation doit répondre afin d’instruire les
décisions à prendre.


 Listerles critères qui permettront de répondre

à ces questions.
 L’évaluation (suite)

4ème étape: Méthodes et indicateurs

d’évaluation
 L’évaluation combine généralement deux approches du
programme: l’une axée sur la logique de l’intervention,
l’autre globale, centrée sur les interactions.
 L’information sur les critères est obtenue par des
indicateurs, qui seront interprétés en les comparant à des
références.
 Choisir des indicateurs, c’est choisir les méthodes de
recueil de l’information selon la source : analyse
documentaire, observation ou mesure, enquêtes.
 L’évaluation (suite)
 IMPORTANT :
 Ne pas confondre les critères et les indicateurs : les
indicateurs sont les variables qui seront effectivement
mesurées ou observées pour renseigner le critère.
Exemples :
 la mortalité est un critère de l’état de santé des
nourrissons, le taux de mortalité néonatale est un
indicateur.
 la pauvreté est un critère de la situation de précarité,
le revenu mensuel moyen est un indicateur.
 En général, il faut plusieurs indicateurs pour évaluer tous
les aspects d’un critère, mais il faut toutefois limiter leur
nombre pour que l’évaluation reste réalisable.
 L’évaluation (suite)

5ème étape: Programmation de l’évaluation

 Une fois les méthodes et les indicateurs définis,
ainsi que les sources des données, il faut définir
qui fait quoi dans la mise en oeuvre de
l’évaluation.
 Si l’évaluation est réalisée uniquement par des
acteurs du programme, elle est interne. Si
l’évaluateur est extérieur aux organismes ayant
mis en oeuvre le programme, elle est externe.
 L’évaluation (suite)

6ème étape: Réalisation de l’évaluation

 La première phase consiste à mobiliser les
personnes et les ressources matérielles
nécessaires.
 Trois étapes de réalisation :
1. collecter les informations,
2. les analyser,
3. en tirer des conclusions et des
recommandations.
 L’évaluation (suite)

7ème étape: Le recueil d’information

par enquêtes
 Les enquêtes permettent de recueillir des
informations sur :
1. Le programme : connaissance des
activités, des services, des outils ; perception des
effets, des points forts et des points faibles ;
2. Des personnes : leurs opinions, leurs
connaissances, leurs comportements, leurs
capacités, les changements perçus, ou d’autres
caractéristiques personnelles...
 L’évaluation (suite)

 Que les enquêtes soient qualitatives ou

quantitatives, elles doivent :
 Être ciblées sur des objectifs précis.
 Êtreorganisées à l’avance avec un protocole
qui décrit les étapes du travail.
 S’appuyer sur un outil de recueil de données,
grille d’entretien ou questionnaire.
 Êtreanalysées suivant une méthode
rigoureuse prévue dès le départ.
 Répondre à des critères éthiques.
 L’évaluation (suite)

8ème étape: Le rapport d’évaluation

et le résumé
 Le rapport d’évaluation
 Il décrit et analyse le processus d’évaluation, les
données recueillies et les résultats obtenus.
 Le rapport doit être compréhensible par n’importe
quel lecteur. Évitez les mots difficiles.
 La présentation doit bien distinguer le constat de la
réalité, de l’appréciation qui en est faite.
 Les recommandations doivent être distinguées des
conclusions.
 L’évaluation (suite)

 Le résumé
 Il permet une lecture rapide des résultats de l’évaluation
pour les acteurs qui n’ont pas le temps de lire le rapport
dans sa totalité.
 Il permet également d’élargir le public des lecteurs
intéressés par l’évaluation.
 Enfin, il renferme l’information essentielle, diffusable en
nombre, à moindre coût.
 Il reprend tous les chapitres avec une synthèse de
quelques lignes pour chacun d’entre eux.
 Il fait apparaître les points essentiels de la conclusion et
des recommandations.
Le résumé fait partie intégrante du rapport. Il est
placé au début de celui-ci pour être immédiatement
accessible.
 L’évaluation (suite)

9ème étape: Valorisation de l’évaluation

et prise en compte des recommandations
 La valorisation vise :
à ce que l’évaluation soit utilisée,
 à ce que les résultats et les recommandations
soient mieux connus et pris en considération (par
les financeurs et les acteurs),
 à mobiliser les acteurs concernés par le
programme,
 à informer et faire évoluer le programme avec les
commanditaires (financeurs et partenaires).
 L’évaluation (suite)
 La prise en compte des recommandations
 Elle prouve l’utilité de l’évaluation.
 Lesrecommandations doivent être forces de
proposition susceptibles d’améliorer le
programme étudié.
 Elles
doivent être opérationnelles, tenir compte
des contraintes de l’organisme qui porte le
programme et des personnes qui le mettent en
oeuvre.
« Il est utile de maintenir un suivi des
recommandations, dans le temps, par
l’intermédiaire du comité d’évaluation.»
 L’évaluation (suite)

 Au total
La démarche d’évaluation peut être elle-même
évaluée par ses acteurs: C’est l’évaluation de
l’évaluation, qui porte sur son déroulement, sur les
événements intervenus durant celle-ci, et
éventuellement sur les effets qu’a eu l’évaluation
sur le programme et les décisions à prendre. Son
but est de tirer les leçons de la démarche mise en
place.

« Une évaluation n’a de sens que si elle

produit du changement tout en produisant
de la connaissance »
MERCI