742201 – Efficience et équité des systèmes éducatifs

Efficience, efficacité, équité

Pistes de lecture à l’aide des
indicateurs

Adriana Gorga
 742201 – Efficience et équité des systèmes éducatifs

Problématique
• Défis auxquels l’enseignement tertiaire est confronté:
– Sur le plan socio-économique
• la mondialisation et l’émergence des pays nouvellement industrialisés et très
compétitifs
• la démographie (le vieillissement de la population et les flux migratoires)
• l’évolution rapide du marché de travail
• la révolution des TIC
– Sur le plan de l’utilisation des connaissances
• L’intensité du savoir au quotidien dans la société de la connaissance
– « know-what » : connaissance de la réalité et des faits
– « know-why » : compréhension des principes de base et des lois de la nature ;
– « know-how » : capacités humaines et compétences nécessaires pour agir
intelligemment dans un environnement complexe et changeant ;
– « know-who » : capacité sociale de coopérer, de communiquer, de mettre en
place un réseau de relations. ( Lundvall & Johnston,1994; Miller, 2003 )

Importance croissante des questions d’efficacité (performance), d’efficience

(relation entre les moyens engagés et les résultats) et d’équité (à la fois
équité d’accès, de traitement et de résultats)

Besoin d’une meilleure et d’une plus large information portant

sur les systèmes d’enseignement supérieur.
 742201 – Efficience et équité des systèmes éducatifs

Critères de performance
• Critères d’ordre économique et critères
d’ordre social de la performance

Tirer le meilleur parti possible des ressources

qu’on utilise (efficience) pour offrir les
meilleurs services possibles (qualité) afin
d’accomplir les objectifs des usagers
(efficacité) en plein respect de la justice
sociale (équité).
 742201 – Efficience et équité des systèmes éducatifs

Questions
• Comment documenter l’efficacité,
l’efficience et l’équité de l’enseignement
supérieur à l’aide des indicateurs?

• Quelle utilisation des indicateurs

d’efficience, d’efficacité et d’équité de
l’enseignement supérieur dans le
processus de prise de décision politique?
 742201 – Efficience et équité des systèmes éducatifs

Les trois niveaux du savoir et le

cycle de savoir
• Trois niveaux du savoir:
– Données ---> images brutes ou chiffres qui résultent
des observations ou des mesures
– Informations ---> la mise en relation des données et
leur organisation dans des modèles de sens
– Savoirs proprement-dits ---> la compréhension du
domaine
• Le cycle du savoir
– Plus les données sont fiables, plus le niveau de
l’information est pertinent et plus le niveau de
compréhension, de savoir, d’un certain domaine est
élevé.
(Crié, 2003, Hislop, 2005)
 742201 – Efficience et équité des systèmes éducatifs

Les indicateurs
• « Les indicateurs sont des signaux déterminés à partir de bases de données
ou de données subjectives qui indiquent la nécessité d’analyser un écart par
rapport à des critères d’activité de performance normatifs ou d’autres valeurs
préalablement définies. »
(OCDE, 1992)
Les indicateurs:
PAS AU NIVEAU DES DONNEES
• se distinguent des statistiques car ce sont des signaux et non des valeurs absolues; si
l’on veut qu’elle puisse constituer un indicateur, une donnée statistique doit, en outre,
pouvoir être rapportée à un point de référence (ex. la comparaison entre pays)

PAS AU NIVEAU DU SAVOIR

• ne fournissent pas des renseignements exhaustifs sur l’état complet du système
d’enseignement mais, en donnent une vision rapide à un moment donné; importance de
la cohérence dans le temps des indicateurs
• donnent une information, mais ils n’indiquent pas les causes

AU NIVEAU DE L’INFORMATION
• doivent rendre compte de la situation du système dans son ensemble
• Du fait de la complexité du domaine de l’enseignement, un indicateur isolé ne peut
apporter qu’une information limitée. Il est indispensable de construire un système
d’indicateurs susceptible de fournir une représentation adéquate de l’état du système
éducatif.
 742201 – Efficience et équité des systèmes éducatifs

Phases dans le système d’assurance qualité (1)

Problème Rôle de Fondements Nature de
l’assurance de l’examen
qualité l’information externe et
rapports
1. Des doutes Identification des Rapports Sommatif;
sérieuses sur les sous-standards descriptifs accréditation,
standards des programmes Indicateurs de vérification des
éducatifs éducatifs performance standards.
Rapport à l’Etat
2. Des doutes sur Accountability Des rapports Hiérarchisation
l’efficience du publique descriptifs / des institutions.
système Prise de stratégiques sur Rapports à
d’enseignement conscience de la la performance et l’intention de
supérieur et/ou qualité dans les les procédures l’Etat et des
des institutions institutions institutions.
Identification des
bonnes pratiques
Westerheijden, D. F. (2007)
 742201 – Efficience et équité des systèmes éducatifs

Phases dans le système d’assurance qualité (2)

Problème Rôle de Fondements Nature de

l’assurance de l’examen
qualité l’information externe et
rapports
3. Des doutes sur Stimulation de la Accountability Rapports d’auto-
la capacité capacité publique évaluation sur
d’innovation et la d’autorégulation a) les procédures
capacité des institutions b) la performance
d’assurance
qualité des Rapport d’audit à
institutions l’intention de:
-l’institution
-de l’Etat

Westerheijden, D. F. (2007)
 742201 – Efficience et équité des systèmes éducatifs

Phases dans le système d’assurance qualité (3)

Problème Rôle de Fondements Nature de
l’assurance de l’examen
qualité l’information externe et
rapports
4. Besoin de Séparation entre: Séparation entre: Séparation entre:
stimuler dans les -développement -rapports -Rapport d’audit
institutions une basé sur d’autoévaluation de l’institution
culture de la l’autorégulation sur les processus -Vérification des
qualité durable -accoutability et les stratégies données à
publique basés sur incorporer dans
l’analyse SWOT une base de
ou le données publique
benchmarking
- des rapports sur
les indicateurs de
performance
Westerheijden, D. F. (2007)
 742201 – Efficience et équité des systèmes éducatifs

Phases dans le système d’assurance qualité (4)

Problème Rôle de Fondements Nature de

l’assurance de l’examen
qualité l’information externe et
rapports
5. Nouveau défis Régulation du Indicateurs de Publication des
Accroître la marché, c’est-à- performance sur indicateurs de
transparence des dire informer les les « produits » performance
systèmes clients (étudiants, (savoir et comparatifs.
d’enseignement employeurs) compétences des Standardiser
supérieur gradués) l’évaluation des
gradués?

Westerheijden, D. F. (2007)
 742201 – Efficience et équité des systèmes éducatifs

Utilisation des indicateurs: risques de

« comparaisons au rabais »
• Les « comparaisons-jivaros »
– Comparaisons qui réduisent une
problématique à un indicateur ou à un groupe
d’indicateurs (ex. la qualité de l’enseignement
tertiaire est exprimé uniquement par les
dépenses totales dans ce domaine)
– Type de comparaison qui ne tient pas compte
des réalités nationales que l’on prétend
comparer

Nécessité de contextualiser les indicateurs

 742201 – Efficience et équité des systèmes éducatifs

Limites des
Les indicateurs d’enseignement indicateurs liées à
la dimension
supérieur dans la prise de décision politique du
contexte
politique

• La pertinence des indicateurs d’enseignement

pour le processus de prise de décision est en
lien direct avec le fait:
– qu’ils alimentent le débat public;
– qu’ils correspondent aux objectifs concrets
• « le but ultime des indicateurs en matière d’éducation peut
être décrit comme la manière de fournir un support au
pilotage de la qualité de l’éducation ». Scheerens et
Hendriks (2004, p. 105)
 742201 – Efficience et équité des systèmes éducatifs
Limites des
Limites des indicateurs de indicateurs liées
à la dimension
l’enseignement tertiaire technique du
contexte
Plus de complexité dans la collecte, la production et
l’interprétation des données
Exemples:
– classification entre les programmes
– données manquantes par rapport à l’enseignement scolaire
(primaire et secondaire)
– utilisation des moyennes dans un secteur où les variations en
coût comme en taux d’encadrement peuvent être très fortes
suivant les différentes filières de l’enseignement supérieur
– la prise en compte de la fréquentation des établissements
d’enseignement supérieur à temps partiel
– la difficulté de déterminer l’âge typique d’obtention d’un
diplôme dans un contexte où on tend vers la formation tout au
long de la vie
 742201 – Efficience et équité des systèmes éducatifs
Limites des
indicateurs liées
Limites des indicateurs de à la dimension
analytique du
l’enseignement tertiaire contexte

La pertinence analytique des indicateurs

• Le caractère unidimensionnel des

indicateurs
 742201 – Efficience et équité des systèmes éducatifs

Aspects qualitatifs des indicateurs

• utile à la décision ;

• accessible, les données utilisées pour produire l’indicateur sont faciles à obtenir ;

• crédible, auquel les personnes concernées le reconnaissent comme un témoin adéquat;

• compréhensible par un vaste auditoire ;

• économique, représentant un coût inférieur aux bénéfices escomptés ;

• valide, capable de témoigner réellement de l’état de l’événement dont il est censé témoigner ;

• fidèle, capable de fournir la même information lorsque l’indicateur est utilisé de manière répétée
dans les mêmes conditions ;

• sensible, la valeur indiquée par l’indicateur varie parallèlement aux changements de l’état de
l’événement observé ;

• opérationnel, c’est-à-dire facile à utiliser;

• cumulable, il peut être additionné à d’autres indicateurs

 742201 – Efficience et équité des systèmes éducatifs

Exemples d’indicateurs d’efficience

• Liés aux taux de rendement à l’obtention
d’un diplôme d’études tertiaires
• Liés aux inputs dans les systèmes
d’éducation et de formation
• La dépense totale en éducation tertiaire en % du
PNB
• Les dépenses privés et publiques
• La durée moyenne de l’enseignement tertiaire
 742201 – Efficience et équité des systèmes éducatifs

Exemples d’indicateurs d’efficacité

interne et externe
• Efficacité interne
– Indicateurs de nature quantitative
• Le taux d’obtention d’un diplôme de l’enseignement tertiaire
• Le taux d’abandon, le taux de survie dans l’enseignement tertiaire
– Indicateurs de nature qualitative
• Comparaison des profils de compétences avant et après la
formation
• Efficacité externe
– Rapport entre le nombre de diplômés en emploi et le nombre
total de diplômés X moi après la fin des études
– Rapport entre les compétences mises en œuvre dans la vie
professionnelle ou sociale et les compétences développées
pendant les études
 742201 – Efficience et équité des systèmes éducatifs

Exemples d’indicateurs d’équité

• La participation à l’enseignement tertiaire
• La participation à la formation tout au long
de la vie selon le statut socio-professionnel
• La participation à la formation tertiaire selon
le background socio-économique de la
famille
 742201 – Efficience et équité des systèmes éducatifs

Dépenses au titre des établissements de l’enseignement

supérieur en pourcentage du PIB (2003)
Dépenses publiques Dépenses privées
% du PIB

2
1.8
1.6
1.4
1.2
1
0.8
0.6
0.4
0.2
0
Autriche

Rép. tchèque

Italie
Rép. slov.
Finlande

Suisse

Belgique

Turquie

Hongrie

Allemagne

Royaume-Uni

moy. OCDE
moy. UE19
Danemark
Suède

Norvège

Grèce

Islande
Irlande

Pologne
Espagne
Pays-Bas

Portugal
France

Source: OCDE, 2006, p. 221

 742201 – Efficience et équité des systèmes éducatifs

Subventions publiques au titre de l’éducation dans

l’enseignement supérieur (2003)
% des dépenses publiques totales Prêts d’études
d’éducation
Transferts et paiements à d’autres entités privées
Bourses et autres allocations versées aux ménages
45
40
35
30
25
20
15
10
5
0

Royau.-
Rép. slov
Finlande

Irlande
Allemagne

Turquie
Islande
Autriche

Italie
Belgique
Norvège
Hongrie

Rép. tchè

Pologne
Danemark

Pays-Bas
Suède

Espagne

Japon

Suisse
Grèce
Corée

Portugal
France

Source: OCDE, 2006, p. 261

 742201 – Efficience et équité des systèmes éducatifs
Revenus relatifs au travail
Selon le niveau de formation et le sexe de la population agée de 25 à 64 ans
(deuxième cycle du secondaire et post-secondaire non tertiaire = 100)
200

180

160

140

120

100

80

60

Royaume Uni
Allemagne
Belgique

Finlande

France

Hongrie

Irelande

Italie

Norvège

Espagne

Suède

Suisse
Danemark

Hommes, inférieur au IIème cycle du secondaire Femmes, inférieur au IIème cycle du secondaire
Hommes, tertiaire B Femmes, tertiaire B
Hommes, tertiaire A Femmes, tertiaire A
Source: OCDE, 2006, p. 129
 742201 – Efficience et équité des systèmes éducatifs

Taux de survie dans l’enseignement de niveau universitaire (2004)

Pourcentage de titulaires d’un diplôme supérieur de type A par rapport
au nombre de nouveaux inscrits dans l’année typique d’entrée du
programme de type supérieur de type A

100
90
80
70
60
2000
50
40 2004
30
20
10
0

Autriche
Australie

Rép. tchèque
Turquie

Allemagne

Finlande

Hongrie
Royaume-Uni

Belgique (Fl)
Irlande

Grèce

Espagne

Pologne

Suède
Pays-Bas

Portugal

Source: OCDE, 2006, p. 62

 742201 – Efficience et équité des systèmes éducatifs

Références
Crié, D. (2003). De l’extraction des connaissances
au Knowledge Management, Revue française de
gestion, 29 (146), 59-79.
Hislop, D. (2005). Knowledge Management in
Organizations: A Critical Introduction. Oxford:
Oxford University Press.
Westerheijden, D. F. (2007). States and Europe
and Quality of Higher Education dans
Westerheijden, Stensaker & Joao Rosa, Quality
Assurance In Higher Education. Trends in
Regulation, Translation and Transformation,.
Springer, pp.73-99