Académique Documents
Professionnel Documents
Culture Documents
politiques
publiques
EQuIP Formation
Evaluation et Qualité des Institutions Publiques
Sommaire
1. Le processus de conception de
politique publique
2. L’analyse de politiques publiques :
réflexion autour d’un cas : les ZFU
3. Les concepts de l’évaluation: les
questions évaluatives
4. Evaluation et complexité
5. Les outils
6. La proposition d’évaluation
7. Questionnements sur les concepts,
les outils et les méthodes
8. Travail de groupe
Y-a-t-il un processus de
conception de politique
publique?
EQuIP Formation
Evaluation et Qualité des Institutions Publiques
Politique publique? De quoi parle-t-on?
Dispositifs / Recrutement
Externalisation Manœuvres
SMP interalliées
Mesure
Echelle territoriale
Supranationale ou…. Municipale
Echelle unique, ou multiscalaire (ex.: transport)
Domaine
Technique
Régalien
Fonctions support
Transversale
Porteur
Unique
Partenariale
Institution
porteuse
Processus
et moyens Finalités
Politique
Objectifs publique
Champ
et
théma-
résultats
tiques
attendus
Parties
Territoire prenantes
Choix
Principes, • Volet technique : réglementation, organisation, systèmes
Valeurs d’information, etc.…
politiques, Processus de • Volet politique et social : consultation, concertation,
éthiques, conception
• Expérimentation
• Information, explication
• Mise en œuvre
Mise en place • Mise au point
C’est-à-dire
L’analyse de politiques
publiques
Réflexion autour d’un
cas : les ZFU
EQuIP Formation
Evaluation et Qualité des Institutions Publiques
Un exemple concret : l’évaluation des Zones Franches Urbaines
Historique
1996 : Pacte de relance pour la Ville, crée les ZFU et les ZRU (ZUS).
Objectif : maintien et création d’activités et d’emploi dans ces zones
urbaines
2000 : Loi SRU : réduction de l’effet d’aubaine et amélioration du
dispositif d’emploi des résidents
2002 : Loi de finances instituant un caractère dégressif des exonérations
(pour les entreprises déjà implantée) et nouveau régime pour les
entreprises implantées en ZRU
Régime
Exonérations d’impots et de charges sociales, différentes selon les zones
(ZRU, ZFU). Quasiment équivalents pour les exonérations fiscales, plus
intéressantes en ZFU pour les exonérations de cotisations sociales.
Organisation
Des COS (Comités d’Orientation et de Surveillance) des ZFU
Un lien entre rénovation urbaine et ZFU
Les objectifs de qui? Quels sont les partenaires dans cette « politique
publique »?
L’Etat
Les collectivités territoriales…
Quels objectifs, explicites ou implicites?
maintenir et créer des activités et des emplois dans ces zones urbaines
Comment mesurer « objectivement » que les objectifs sont ou non atteints?
Le taux chômage dans les zones considérées doit avoir baissé de X% d’ici Y années…..
Transfert Limiter
d’acrivités les transferts
d’activité
Déductions Favoriser
fiscales l’implantation Redynamiser
D’entreprises les quartiers
Boîtes à lettres
Contrainte d’activité défavorisés
effective dans la zone
Quels sont les coûts de la politique? Pour qui? Comment les évaluer?
Réductions de charges sociales et fiscales, nettes d’économies éventuellement réalisées
(embauche de demandeurs d’emploi)
Coûts de « gestion » de la politique
A quoi rapporter les « coûts » de la politique? A quelle(s) référence(s)
comparer les résultats obtenus?
Ex.: coût par emploi : s’agit-il de véritables créations d’emploi? A quoi le comparer?
Concepts de l’évaluation
et questions évaluatives
EQuIP Formation
Evaluation et Qualité des Institutions Publiques
Les différents concepts et mesures à évaluer
Society Impacts
Needs
Economy
problems
Environ-
ment issues
Outcomes/
Results
Programme
Objectives Inputs Outputs
Evaluation
Relevance Efficiency
Effectiveness
Utility
Sustainability
Société Impacts
Besoins sociaux
Economie
Enjeux politiques
Environne
ment Problèmes
Resultats
Politique
Objectifs Ressources Produits
Programme
Evaluation
Pertinence Efficience
Efficacité
Utilité Durabilité
Pertinence (relevance):
Mesure de l’adéquation entre les objectifs de l’intervention et les
besoins auxquels il faut répondre.
Efficacité (effectiveness):
Mesure dans laquelle les résultats attendus ont été obtenus.
Mesure dans laquelle les objectifs spécifiques et généraux sont
atteints.
Efficience (efficiency):
Mesure dans laquelle les résultats et les impacts ont été obtenus
à un coût raisonnable.
Durabilité (sustainability)
Mesure de la persistance des effets à moyen ou long terme.
Utilité (utility)
Mesure de la correspondance entre les impacts de
l’intervention et les besoins de la société et les problèmes à
résoudre.
Cohérence (coherence)
Interne: correspondance entre les différents objectifs de la
même intervention
Externe: correspondance entre les objectifs d’une intervention et
d’autres interventions publiques
Exemples :
Quel est l’impact réel des ZFU en termes d’emplois pérennes créés?
Quel est la part de transferts d’activités depuis des zones proches de la ZFU?
Quel est le degré de notoriété du dispositif ZFU auprès des entreprises?
Quel est le degré de satisfaction des résidents de la ZFU, des commerçants de la ZFU?
Quel est le coût moyen par emploi créé en ZFU sur la période 19XX-20YY?
Quelle est la part d’emplois créés occupés par des résidents de la ZFU?
Collecte / Outils de
Questions
évaluatives
Indicateurs Traitement
d’information
collecte et
de traitement
K€
Politiques publiques
Evaluation et complexité
EQuIP Formation
Evaluation et Qualité des Institutions Publiques
Modèle de Zimmerman : 2 dimensions
Certitude ou
Quasi Incertitude
certitude
Consensus /
Nombreux
Peu de
conflits
conflits
Forte
conflictualité
Consensus
Consensus
Peu de conflits
Certitude Incertitude
Détermination Déterminisme élevée
élevée
Forte
conflictualité
Exemple : politique de
Consensus
vaccination
Simple
Consensus (planification
Peu de conflits Pilotage)
Certitude Incertitude
Détermination Déterminisme élevée
élevée
Forte
conflictualité
Exemple : politique et
programmes spatiaux
Consensus
Consensus
Peu de conflits
Certitude Incertitude
Détermination Déterminisme élevée
élevée
Forte
conflictualité
Exemple : politique en
faveur de droits de
minorités
Consensus
Consensus
Peu de conflits
Certitude Incertitude
Détermination Déterminisme élevée
élevée
Forte
conflictualité
Consensus
Simple
Consensus (planification
Peu de conflits Pilotage)
Certitude Incertitude
Détermination Déterminisme élevée
élevée
Forte
conflictualité
Consensus
Simple
Consensus (planification
Peu de conflits Pilotage)
Certitude Incertitude
Détermination Déterminisme élevée
élevée
Les outils
EQuIP Formation
Evaluation et Qualité des Institutions Publiques
Les outils de l’évaluation
Source
Objectif Partenaire Critère Indicateur
Mode de calcul
Ce schéma d’intervention logique peut servir dans le cadre d’une évaluation ex ante à décrire
les effets attendus d’une politique au regard des objectifs fixés a priori,pour évaluer la
cohérence de l’ensemble des actions et la pertinence des impacts au regard des attentes
préalables.
Dans le cadre d’une évaluation in itinere ou ex post, ce sont les actions mises en œuvre et les
impacts observés qui sont pris en compte pour évaluer la cohérence du programme, ses
impacts réel et donc son efficacité.
Marchés
Abandon des
agricoles
terres agricoles
Reboisement stabilisés
des terres agricoles:
- Reboisement
Production
- Entretien
agricole contrôlée
Utilisation alternative
des terres agricoles
Niveau de vie
plus élevé
Coûts de plantation
et d’entretien compensés
-Paiement
-pour compenser
-les pertes de revenus Diversification
des activités
Précision 1% 2% 3% 4% 5% 6% 7% 8% 9% 10%
N90 6807 1702 757 426 273 190 139 107 85 69
N95 9605 2402 1068 601 385 267 197 151 119 97
N99 16385 4097 1821 1025 656 456 335 257 203 164
exploitées
Des données de contexte (socio
économiques, etc..) liées à la
politique publique considérée
Des données de gestion traduisant la
mise en œuvre de la politique
(dépenses, actions engagées, etc.)
Libellé politique dominante(Requête 8 avec Espgest) (Tous)
8000000
rarement « cohérentes » avec les 6000000
La proposition
d’évaluation
EQuIP Formation
Evaluation et Qualité des Institutions Publiques
Questionnement préalable
Identifier les
données à collecter
Choix des méthodes
de collecte
Estimer le budget et
le délai
Rédiger
OK? la proposition
EQuIP Formation
Evaluation et Qualité des Institutions Publiques
Questions sur les concepts
La position de l’évaluateur?
Comment assurer l’indépendance de l’évaluateur
(et de l’évaluation)? Un fonctionnaire territorial
est-il indépendant vis à vis de ses élus? Le
prestataire est il libre vis à vis du client?
L’évaluation doit-elle être libre, transparente,
diffusée, etc..(voir charte de la SFE?)?
La participation des acteurs concernés
Faut-il, et comment, et à quel stade, associer des
acteurs –notamment, des collectivités de
plusieurs échelles territoriales- à une évaluation
de politique publique territoriale, sachant que les
objectifs des différents niveaux diffèrent?
Faut-il, et comment, et à quel stade, associer la
«société civile », les professionnels, les
associations, le public, à l’évaluation?
Plus généralement, l’évaluation peut-elle (doit-
elle) être un outil de démocratie participative, un
prétexte ou un moment de « débat public »?
Travail de groupe
EQuIP Formation
Evaluation et Qualité des Institutions Publiques
Description du travail attendu