Vous êtes sur la page 1sur 387

Ecole doctorale n432 "Sciences des mtiers de l'ingnieur"

N attribu par la bibliothque


|__|__|__|__|__|__|__|__|__|__|


T H E S E

pour obtenir le grade de
Docteur de lEcole des Mines de Paris
Spcialit Energtique

prsente et soutenue publiquement par
Jean-Sbastien BROC

le 8 dcembre 2006

L'EVALUATION EX-POST DES OPERATIONS LOCALES
DE MAITRISE DE LA DEMANDE EN ENERGIE
Etat de l'art, mthodes bottom-up, exemples appliqus et approche du dveloppe-
ment d'une culture pratique de l'valuation

ANNEXES

Directeur de thse : Bernard BOURGES
Co-encadrant : Jrme ADNOT

Jury :

M. Alain TROMBES, Professeur, INSA de Toulouse......................................... Rapporteur
M. Mathieu DETCHESSAHAR, Professeur, Universit de Nantes Rapporteur et Prsident
M. Eric PLOTTU, Docteur, ADEME .............................................................Examinateur
M. Paul BAUDRY, Docteur, EDF .................................................................Examinateur
M. Bernard BOURGES, Professeur, Ecole des Mines de Nantes .......................Examinateur
M. Jrme ADNOT, Professeur, Ecole des Mines de Paris ................................Examinateur




1
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Table des matires des annexes

Sommaire gnral des annexes

Annexes A au Chapitre I .................................................................................... 6
Annexes A.1 sur les expriences aux Etats-Unis................................................................ 9
Annexe A.1.1 DSM, IRP et ESCo............................................................................................................... 10
Annexe A.1.2 La Californie, un exemple de mise en place de dispositif d'valuation................................ 17
Annexes A.2 sur les expriences europennes ................................................................. 25
Annexe A.2.1 Contextes et approches des activits de MDE en Europe..................................................... 26
Annexe A.2.2 Les principales tudes l'chelle de l'Union Europenne .................................................... 33
Annexe A.2.3 LExemple du Danemark ..................................................................................................... 47
Annexe A.2.4 Perspectives pour les dispositifs et approches d'valuation.................................................. 57
Annexes A.3 Complments aux conclusions sur les expriences dvaluation des
activits de MDE................................................................................................................. 64
Annexe A.3.1 Les travaux sur l'valuation du programme DSM de l'Agence Internationale de l'Energie . 65
Annexe A.3.2 Les apports des cinq guides de rfrence sur les problmatiques cls de l'valuation des
actions sur la demande en nergie ............................................................................................................... 68
Annexes B au Chapitre II ................................................................................. 87
Annexes B.1 Complments l'analyse du contexte des activits de MDE au niveau
local ...................................................................................................................................... 91
Annexe B.1.1 Les principales caractristiques du contexte national franais ............................................. 92
Annexe B.1.2 Bilan de 30 ans d'activits de MDE en France ................................................................... 106
Annexe B.1.3 Quel rle de l'chelon local dans les politiques nergtiques ? .......................................... 118
Annexe B.1.4 Les principaux acteurs des oprations locales de MDE et leur rapport l'valuation........ 128
Annexe B.1.5 Les principaux cadres oprationnels et leur rapport l'valuation ..................................... 140
Annexe B.1.6 Exemples de cadres de dveloppement de politiques nergtiques locales........................ 148
Annexes B.2 Complments l'tude des oprations locales de MDE en France ....... 151
Annexe B.2.1 Mthodes et rsultats de l'inventaire des oprations locales de MDE en France................ 152
Annexe B.2.2 Exemples de typologies utilises pour les activits de MDE.............................................. 159
Annexe B.2.3 Principaux rsultats des analyses de linventaire................................................................ 172
Annexes B.3 Complments l'tude des pratiques d'valuation au niveau local ...... 177
Annexe B.3.1 Approches franaises de l'valuation des activits de MDE au niveau national................. 178
Annexe B.3.2 Prsentation des oprations ayant fait l'objet d'tudes de cas ............................................. 196
Annexe B.3.3 Exemple d'tude de cas : opration de MDE rurale du canton de Lanmeur ....................... 200
Annexe B.3.4 Analyse de campagnes de mesure des consommations d'nergie : apports et rapports avec
l'valuation ................................................................................................................................................ 217
Annexe B.3.5 Autres exemples marquants de MDE locale en France ...................................................... 222
Annexe B.3.6 Exemples de MDE locale en Europe.................................................................................. 234
Annexe B.3.7 Synthse sur la thse de Franck Trouslot [1995]................................................................ 236
Annexes C au Chapitre III ............................................................................. 244
Annexes C.1 Complments la prsentation de la mthodologie................................ 245
Annexe C.1.1 L'importance de la recherche pralable d'informations ...................................................... 246
Annexe C.1.2 Description des diffrents outils constituant la mthode et de leur utilisation.................... 249
Table des matires des annexes
2
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Annexes C.2 Complments sur les mthodes pour l'analyse de la logique
d'intervention.................................................................................................................... 254
Annexe C.2.1 La prparation de l'aide pour les utilisateurs ...................................................................... 254
Annexes C.3 Complments sur les mthodes de calcul................................................. 256
Annexe C.3.1 Calcul des autres rsultats................................................................................................... 256
Annexes D au Chapitre IV.............................................................................. 262
Annexes D.1 Complments pour la mthode d'valuation pour les oprations de
promotion de LBC............................................................................................................ 266
Annexe D.1.1 Prsentation du Plan Eco Energie....................................................................................... 267
Annexe D.1.2 Prparation de la mthode .................................................................................................. 270
Annexe D.1.3 Contexte des oprations locales de promotion de LBC...................................................... 275
Annexe D.1.4 Fiche de synthse de l'opration de promotion de LBC PACA 2004................................. 280
Annexe D.1.5 Indicateurs proposs pour l'analyse de la logique d'intervention pour les oprations de
promotion des LBC................................................................................................................................... 300
Annexe D.1.6 Dfinition des valeurs ex-ante des paramtres de calcul pour les oprations de promotion de
LBC........................................................................................................................................................... 303
Annexe D.1.7 Comparaison avec les certificats d'conomies d'nergie .................................................... 311
Annexe D.1.8 Influence des plages de variation par paramtre pour les rsultats d'conomies d'nergie et
d'impacts sur la charge pour les oprations de promotion de LBC............................................................ 314
Annexe D.1.9 Rsum de l'opration de promotion de LBC PACA 2004................................................ 316
Annexe D.1.10 Organisation de la grande distribution et rapport avec les oprations de promotion de LBC
et leur valuation ....................................................................................................................................... 317
Annexe D.1.11 Enseignements sur la logique d'intervention .................................................................... 322
Annexe D.1.12 Valeurs utilises pour les calculs des rsultats de l'opration de promotion de LBC PACA
2004........................................................................................................................................................... 326
Annexe D.1.13 Etude des incertitudes pour les rsultats de l'opration de promotion de LBC de PACA
2004........................................................................................................................................................... 329
Annexe D.1.14 Comparaison de l'opration de promotion des LBC PACA 2004 avec d'autres retours
d'exprience............................................................................................................................................... 333
Annexes D.2 sur les oprations de substitution des halognes ..................................... 340
Annexe D.2.1 Synthse bibliographique sur les oprations de substitution des halognes ....................... 341
Annexe D.2.2 Exemple d'valuation d'une opration de substitution d'halogne...................................... 347
Annexes D.3 sur les oprations de sensibilisation cible dans le tertiaire................... 349
Annexe D.3.1 Indicateurs proposs pour l'analyse de la logique d'intervention pour les oprations de
sensibilisation dans le tertiaire................................................................................................................... 350
Annexe D.3.2 Calculs des volutions de consommations d'nergie pour l'opration pilote de sensibilisation
dans les btiments de bureaux d'EDF en PACA........................................................................................ 352


Tableaux

Tableau 18 - chronologie de la mise en place des dispositifs pour les programmes d'efficacit
nergtique et leur valuation en Californie .................................................................... 23
Tableau 19 - exemple d'une matrice type d'analyse cots/bnfices ....................................... 37
Tableau 20 - systmes d'obligation pour l'efficacit nergtique dans les pays europens en
avril 2005.......................................................................................................................... 60
Tableau 21 - liste des organismes impliqus dans la proposition de projet europen EMEEES
.......................................................................................................................................... 63
Tableau 22 - critres principaux utiliss par les cinq guides de rfrence............................... 69
Tableau 23 - les approches de la logique d'intervention dans les cinq guides de rfrence..... 71
Table des matires des annexes
3
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Tableau 24 - responsabilit de l'valuation et choix de l'valuateur selon les cinq guides de
rfrence........................................................................................................................... 72
Tableau 25 - les objectifs et utilits de l'valuation selon les cinq guides de rfrence........... 73
Tableau 26 - les champs d'valuation abords par les cinq guides de rfrence...................... 74
Tableau 27 - les approches de planification de l'valuation des cinq guides de rfrence ...... 74
Tableau 28 - les principales donnes considres par les cinq guides de rfrence ................ 75
Tableau 29 - mthodes de collecte de donnes proposes par les cinq guides de rfrence.... 76
Tableau 30 - mthodes de calcul des impacts bruts selon les cinq guides de rfrence .......... 77
Tableau 31 - approches du rfrentiel des cinq guides de rfrence........................................ 79
Tableau 32 - facteurs d'ajustement et correctifs pris en compte par les cinq guides de rfrence
.......................................................................................................................................... 80
Tableau 33 - traitement des erreurs et incertitudes dans les cinq guides de rfrence............. 81
Tableau 34 - approche des cots d'valuation dans les cinq guides de rfrence .................... 83
Tableau 35 - approche de l'analyse conomique dans les cinq guides de rfrence ................ 83
Tableau 36 - autres effets abords par les cinq guides de rfrence ........................................ 84
Tableau 37 - conseils des guides de rfrence pour la prsentation des valuations ............... 85
Tableau 38 - approches de l'exploitation des valuations des cinq guides de rfrence.......... 86
Tableau 39 - rpartition du budget pour le programme 188 de recherche dans le domaine de
l'nergie .......................................................................................................................... 116
Tableau 40 - arborescence sectorielle dans DEEP................................................................. 160
Tableau 41 - arborescence des usages finals dans DEEP....................................................... 161
Tableau 42 - format de prsentation des programmes dans DEEP........................................ 161
Tableau 43 - analyse croise des critres de segmentation.................................................... 173
Tableau 44 - rpartition des oprations rpertories selon les cadres de financement .......... 173
Tableau 45 - rpartition des oprations rpertories selon le niveau d'implication locale..... 174
Tableau 46 - rpartition des oprations rpertories selon les rles des collectivits............ 175
Tableau 47 - tudes annuelles sur les tendances d'efficacit nergtique en France ............. 188
Tableau 48 - tudes annuelles sur les consommations unitaires d'nergie en France............ 189
Tableau 49 - comparaison de donnes moyennes de consommation par usage en France.... 219
Tableau 50 - rsultats des recherches d'information sur les oprations de promotion de LBC
dans le secteur rsidentiel............................................................................................... 271
Tableau 51 - march des ampoules en France........................................................................ 278
Tableau 52 - synthse des facteurs de succs identifis......................................................... 297
Tableau 53 - valeurs ex-ante de rfrence pour les oprations de promotion de LBC.......... 303
Tableau 54 - effet d'aubaine pour les REx disponibles d'oprations de promotion de LBC.. 304
Tableau 55 - dures moyennes d'utilisation des lampes par type de pice ............................ 305
Tableau 56 - rpartition des LBC installes par type de pice pour les REx disponibles...... 305
Tableau 57 - valeurs ex-ante pour la rpartition des LBC installes par type de pice ......... 306
Tableau 58 - rpartition des ventes de LBC en fonction de leur puissance ........................... 307
Tableau 59 - puissance moyenne "thorique" des incandescentes substitues ...................... 307
Tableau 60 - valuation de l'effet rebond par type de pice................................................... 309
Tableau 61 - variations induites pour les conomies d'nergie annuelles nettes ................... 314
Tableau 62 - variations induites pour les conomies d'nergie totales nettes ........................ 315
Tableau 63 - variations induites pour les rductions nettes de pointe de charge ................... 315
Tableau 64 - principaux rsultats de l'opration de promotion de LBC PACA 2004............ 316
Tableau 65 - valeurs utilises pour les calculs des rsultats de l'opration PACA 2004....... 326
Tableau 66 - rpartition des LBC par pice pour l'opration PACA 2004 ............................ 328
Tableau 67 - variations induites pour les conomies d'nergie annuelles brutes (cas de
rfrence et PACA 2004) ............................................................................................... 329
Table des matires des annexes
4
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Tableau 68 - variations induites pour les conomies d'nergie annuelles nettes (cas de
rfrence et PACA 2004) ............................................................................................... 330
Tableau 69 - variations induites pour les missions vites annuelles brutes (cas de rfrence
et PACA 2004) ............................................................................................................... 331
Tableau 70 - variations induites pour les rductions nettes de pointe de charge (cas de
rfrence et PACA 2004) ............................................................................................... 332
Tableau 71 - comparaison gnrale avec d'autres oprations ................................................ 333
Tableau 72 - comparaison des indicateurs de participation ................................................... 334
Tableau 73 - comparaison des indicateurs d'efficacit........................................................... 335
Tableau 74 - comparaison des acteurs impliqus................................................................... 336
Tableau 75 - comparaison des actions entreprises ................................................................. 337
Tableau 76 - comparaison des indicateurs qualitatifs ............................................................ 338
Tableau 77 - estimations de la rpartition de ventes de torchres aux USA en 1999 ............ 344
Tableau 78 - scnarios testes pour les calculs des consommations corriges pour le site 1 356
Tableau 79 - volutions des consommations et droulement de l'opration.......................... 361


Figures

Figure 14 - dispositif actuel pour la mise en oeuvre et l'valuation des programmes d'efficacit
nergtique en Californie ................................................................................................. 24
Figure 15 - mthodologie d'analyse cots/bnfices................................................................ 36
Figure 16 - facteurs de succs d'un programme ....................................................................... 41
Figure 17 - tapes pour le dveloppement d'une stratgie d'valuation................................... 42
Figure 18 - cycle thorique idale d'une politique ................................................................... 45
Figure 19 - structure du march danois de l'lectricit avant et aprs libralisation................ 48
Figure 20 - cadre rglementaire pour les actions d'EE-DSM au Danemark ............................ 50
Figure 21 - structure pour l'valuation propose dans le nouveau guide de l'AIE................... 67
Figure 22 - rorganisation du march de l'lectricit en France .............................................. 95
Figure 23 - budget de l'ADEME : volutions et rpartitions ................................................... 97
Figure 24 - rgulation de la demande par la tarification marginaliste ................................... 104
Figure 25 - intensit nergtique primaire de la France (1970-2000).................................... 111
Figure 26 - cadre suppos pour le dveloppement de politiques nergtiques rgionales en
suivant le processus d'laboration du SSCE................................................................... 149
Figure 27 - schma de fonctionnement suppos des OPATB................................................ 150
Figure 28 - fonctionnement thorique des certificats d'conomies d'nergie ........................ 192
Figure 29 - volution parallle des prix et des ventes d'halognes aux USA......................... 344
Figure 30 - exemple de carte de sondage utilise pour valuer les turn-in events ............. 348
Figure 31 - rgression sur les consommations 2002-2004 avec tous les points des priodes de
chauffe............................................................................................................................ 353
Figure 32 - rgression sur les consommations 2002-2004 avec tous les points de la priode de
chauffe sauf octobre 2003 .............................................................................................. 353
Figure 33 - rgression sur les consommations 2005 avec tous les points de la priode de
chauffe............................................................................................................................ 354
Figure 34 - signature nergtique du site pour les annes 2002 2005................................. 359
Figure 35 - rgression linaire sur les consommations en fonction des DJU pour le site 2 pour
les priodes de chauffe de 2002 2004.......................................................................... 365
Figure 36 - rgression linaire sur les consommations en fonction des DJU pour le site 2 pour
la priode de chauffe de 2005 ........................................................................................ 365
Figure 37 - signature nergtique du site 2 ............................................................................ 366
Table des matires des annexes
5
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Figure 38 - comparaison des volutions relatives de consommations entre les sites............. 367


Encadrs

Encadr 7 - contenu principal de la Directive relative l'efficacit nergtique.................... 58
Encadr 8 - principaux points de l'Annexe IV (cadre gnral pour la mesure et la vrification
des conomies d'nergie) de la Directive relative l'efficacit nergtique.................... 60
Encadr 9 tapes et sources principales pour la recherche d'information........................... 248



6
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006










Annexes A au Chapitre I



7
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Les Annexes A viennent complter les synthses prsentes au Chapitre I. Pour faciliter le
lien entre les deux, les Annexes A suivent la structure du Chapitre I : dtails des expriences
amricaines, puis europennes, et enfin complments sur la synthse finale sur l'valuation
ex-post des activits de MDE.

L'approche amricaine s'est d'abord construite autour des concepts de DSM (Matrise de la
Demande, section A.1.1.1), d'IRP (Planification Intgre des Ressources, section A.1.1.2) et
d'ESCo (Compagnies de Services Energtiques, section A.1.1.3). Cette premire vague d'ac-
tions directes (visant des impacts court terme) a pris fin avec la libralisation des marchs
au dbut des annes 1990. Cette restructuration a orient les actions sur la transformation de
march et le plus long terme (section A.1.1.4). Mais suite aux crises de ces nouveaux syst-
mes la fin des annes 1990, la tendance est aujourd'hui trouver un meilleur quilibre
entre actions de court et de long terme.

Le dveloppement des activits de MDE aux Etats-Unis a t accompagn par celui de leur
valuation. Les approches d'valuation ont connu les mmes tapes que les vagues d'action :
concentration sur l'analyse cots / bnfices, puis sur les effets sur le march par le biais
d'indicateurs intermdiaires, avant de s'orienter vers une approche plus systmatique recher-
chant coupler les deux prcdentes. Ces efforts ont permis d'une part de dfinir des guides
d'valuation de rfrence, et d'autre part de constituer une communaut importante d'ex-
perts dans le domaine. La Californie est un Etat exemplaire dans ce domaine (Annexe A.1.2).

En Europe, malgr le cadre communautaire (section A.2.1.1), les diffrences de contexte
national ont conduit des approches diverses dactivits de MDE, mais qui peuvent tre re-
groupes en trois grandes logiques (section A.2.1.5) : logiques d'engagement de moyens,
d'obligation de moyens, et d'obligation de rsultats. Le choix de logique s'avre prescripteur
pour l'approche d'valuation adopte, oriente soit sur la justification des moyens engags,
soit sur la vrification des rsultats obtenus.

En parallle, les aides proposes par la Commission (par ex. programmes SAVE) ont permis
de soutenir des travaux de recherche dans le but d'aboutir un cadre europen pour les politi-
ques d'action sur la demande (Annexe A.2.2), pendant celui dfini pour l'ouverture des
marchs de l'lectricit et du gaz. Une nouvelle Directive a ainsi t adopte dbut 2006.
Son application devrait notamment reposer sur l'utilisation de mthodes d'valuation qui se-
ront dfinir en faisant la synthse des travaux faits jusqu'ici (Annexe A.2.4), et combinant
les deux approches principales top-down et bottom-up. Nous dtaillons par ailleurs le cas du
Danemark, qui prsente un dispositif d'valuation exemplaire en Europe (Annexe A.2.3).

Enfin, en complment de la synthse finale du Chapitre I, nous prsentons les principaux
rsultats sur l'valuation des activits de MDE dvelopps dans le cadre des programmes de
recherche de l'AIE (Agence Internationale de l'Energie) (Annexe A.3.1). Et nous dtaillons le
contenu des ouvrages de rfrence sur l'valuation des activits de MDE (Annexe A.3.2), en
reprenant la grille de lecture dfinie dans la sous-partie I.3.1 du Chapitre I.


8
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Annexes A.1 sur les expriences aux Etats-Unis.................................................................... 9
Annexe A.1.1 DSM, IRP et ESCo..................................................................................... 10
A.1.1.1 Le DSM ou la structuration des activits de MDE................................................................... 10
A.1.1.2 L'IRP, une nouvelle approche de la planification nergtique et un cadre pour l'analyse
cots/bnfices ...................................................................................................................................... 11
A.1.1.3 Les ESCo, de la vente de kWh aux services nergtiques avec contractualisation des
conomies d'nergie .............................................................................................................................. 13
A.1.1.4 La nouvelle donne lie l'ouverture des marchs .................................................................... 15
Annexe A.1.2 La Californie, un exemple de mise en place de dispositif d'valuation ..... 17
A.1.2.1 L're Pr-Protocole (1970-1994) .............................................................................................. 17
A.1.2.2 L're du Protocole (1994-1997)................................................................................................ 18
A.1.2.3 L're de Restructuration (1998-2000)....................................................................................... 19
A.1.2.4 L're actuelle de transition (depuis 2000)................................................................................. 20
Annexes A.2 sur les expriences europennes ..................................................................... 25
Annexe A.2.1 Contextes et approches des activits de MDE en Europe .......................... 26
A.2.1.1 Un cadre communautaire qui encourage l'efficacit nergtique, mais qui vise surtout
l'ouverture des marchs de l'nergie la concurrence........................................................................... 26
A.2.1.2 Des programmes pour aider la mise en uvre de ces politiques ........................................... 28
A.2.1.3 Des contextes nationaux qui restent spcifiques, et qui sont dterminants pour l'efficacit des
actions entreprises et pour l'existence de relles valuations ................................................................ 28
A.2.1.4 L'ouverture des marchs change les perspectives des activits de MDE.................................. 29
A.2.1.5 Logique de moyens et/ou rsultats, et liens avec l'valuation .................................................. 30
Annexe A.2.2 Les principales tudes l'chelle de l'Union Europenne.......................... 33
A.2.2.1 Trois approches principales : le cas par cas, le suivi top-down et le bottom-up global ............ 33
A.2.2.2 Les dbuts d'une approche globale europenne de l'valuation bottom-up des activits de MDE
............................................................................................................................................................... 35
A.2.2.3 Une approche dvaluation pragmatique par type de programme, partir des pratiques
existantes............................................................................................................................................... 38
A.2.2.4 Un exemple d'approche cas par cas avec une mthodologie structure.................................... 40
A.2.2.5 Un guide de rfrence pour l'organisation et la planification d'valuations ............................. 41
A.2.2.6 Une nouvelle vague de projets pour accompagner la Directive relative l'efficacit nergtique
............................................................................................................................................................... 44
Annexe A.2.3 LExemple du Danemark ........................................................................... 47
A.2.3.1 Contexte global du secteur de llectricit du Danemark ......................................................... 47
A.2.3.2 La mise en place du dispositif de suivi et d'valuation............................................................. 51
A.2.3.3 Leons et conclusions............................................................................................................... 55
Annexe A.2.4 Perspectives pour les dispositifs et approches d'valuation ....................... 57
A.2.4.1 La nouvelle Directive europenne relative l'efficacit nergtique ....................................... 57
A.2.4.2 Une tendance forte : passage d'obligations de moyens obligations de rsultats, et validation
d'conomies d'nergie prsumes.......................................................................................................... 60
A.2.4.3 La situation actuelle : vers une harmonisation encadre par la nouvelle Directive .................. 62
Annexes A.3 Complments aux conclusions sur les expriences dvaluation des activits
de MDE.................................................................................................................................... 64
Annexe A.3.1 Les travaux sur l'valuation du programme DSM de l'Agence
Internationale de l'Energie................................................................................................. 65
A.3.1.1 L'AIE et son programme sur la MDE....................................................................................... 65
A.3.1.2 Des synthses sur l'valuation des programmes de MDE......................................................... 65
Annexe A.3.2 Les apports des cinq guides de rfrence sur les problmatiques cls de
l'valuation des actions sur la demande en nergie ........................................................... 68
A.3.2.1 Description gnrale de l'opration value ............................................................................. 69
A.3.2.2 Elaboration de l'valuation ....................................................................................................... 71
A.3.2.3 Ralisation de l'valuation........................................................................................................ 75
A.3.2.4 Rsultats et exploitation de l'valuation ................................................................................... 84

9
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006

Annexes A.1 sur les expriences aux Etats-Unis


Dans un premier temps (Annexe A.1.1), nous prsentons l'approche amricaine construite
autour des trois concepts cls de Demand-Side Management (DSM), d'Integrated Resource
Planning (IRP) et des ESCo. Au-del des aspects historiques et des bilans abondamment
fournis par la littrature sur la priode 1980-1995 (voir notamment [Boyle 1996, Eto 1996,
Nadel 1996, Gellings 1996]), nous fournissons une analyse de ce qu'a impliqu la mise en
uvre de ces concepts en termes de besoins d'valuation et des diffrentes approches adop-
tes.

Puis dans l'Annexe A.1.2, nous avons souhait faire ressortir l'exemple fourni par Vine [Vine
2006] du processus qui a permis l'Etat de la Californie de construire un dispositif efficace
d'valuation des programmes de MDE, et de constituer une importante communaut d'ex-
perts. Ces deux garanties ont permis aux programmes de MDE de perdurer, voire de crotre,
malgr la crise nergtique traverse par la Californie en 2001.

Pour les aspects historiques, nous nous sommes dabord inspirs des synthses de Kaehler
[1993 pp.59-69] et dOrphelin [1999 pp.5-33] pour une priode allant de la raction aux chocs
ptroliers de 1973 et 1979 au milieu des annes 1990. Nous les avons compltes sous un
nouvel angle en nous intressant plus particulirement aux questions lies lvaluation,
avec dune part de nouveaux clairages sur cette priode, et dautre part des lments sur les
volutions de ces dix dernires annes.




10
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Annexe A.1.1 DSM, IRP et ESCo


A.1.1.1 Le DSM ou la structuration des activits de MDE


Face la forte hausse des cots de l'nergie suite aux chocs ptroliers de 1973 et 1979, la plu-
part des gouvernements ragissent sous des formes diverses pour encourager les consomma-
teurs, professionnels et particuliers, mieux rpartir et/ou rduire leurs consommations
d'nergie.

Les premires activits sur la demande dlectricit sont caractrises par le journal de l'EPRI
(Electric Power Research Institute
99
) en 1977 comme des actions sur la courbe de charge
("load management"). Le but principal est alors de rduire les pics d'appel de puissance, afin
de minimiser les besoins en capacit de production qui ne sont utiliss que sur de courtes du-
res pendant les priodes de pointe.

Les annes 1970 sont aussi la priode de la "chasse aux gaspi" en France. Aux Etats-Unis,
cela se traduit par des actions d'"energy conservation", i.e. d'conomies d'nergie, mais avec
une connotation dfensive voire restrictive
100
. Le terme sera peu peu remplac par celui
d'"energy savings", plus positif, qui traduit des conomies, mais dans le sens d'pargne et non
plus de restriction.

L'ensemble des activits sur la demande est regroup en 1984 par Gellings sous le terme g-
nrique de Demand-Side Management (DSM) [EPRI 1984]. Voici la dfinition de Gellings
traduite par Kaehler [Kaehler 1993 p.66] :

La matrise de la demande d'nergie ou DSM dsigne les actions conduites par les pouvoirs
publics et par les producteurs et/ou distributeurs d'nergie, destines inciter et parfois
obliger les usagers d'un secteur d'activits changer leur manire d'utiliser ou de consom-
mer l'nergie. Dans ce cas on va notamment chercher modifier les appels de puissance des
nergies non stockables et qui doivent tre distribues par rseau directement aux points de
consommation. On englobe dans ce mode de gestion les actions :
- de gestion de la courbe de charge (load management)
- de stockage dcentralis (thermal storage)
- d'conomies d'nergie (strategic conservation)
- d'usages rationnels de l'lectrothermie (electrification)
- de production dcentralise d'nergie (customer generation)
- d'offres alternatives de commercialisation (alternative marketing strategies)
- et les nouvelles technologies et/ou les usages conomiques (new uses)

Pour chacune de ces catgories, plusieurs approches techniques sont possibles (voir par
exemple la prsentation concrte de la typologie technique de l'EPRI des actions sur la courbe
de charge adapte par Orphelin [1999 p.19]). Nous revenons sur les questions de typologie
des oprations de MDE dans la sous-partie II.2.2.


99
Centre public de recherche fond en 1973, c'est un organisme majeur dans le domaine de la recherche sur
toutes les questions lies l'lectricit (cf. www.epri.com)
100
Le terme de "conservation" est ainsi aussi employ pour parler de "dfense" de l'environnement
Annexe A.1.1 DSM, IRP et ESCo
11
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Pour Gellings [1996 pp.285-286], le concept de DSM est une nouvelle approche des activits
sur la demande, utilisant une stratgie marketing adapte. Pour lui, la premire vague
d'"energy conservation" a eu un succs limit du fait qu'elle se basait sur les technologies dis-
ponibles et ne prenait pas en considration les attentes des clients. La dmarche se limitait
alors tester les technologies performantes, puis fournir l'information suffisante aux
consommateurs qui devaient l'adopter par un processus de dcision rationnelle.

Gellings proposait alors au travers du concept de DSM une vue globale, qui intgre la fois
les solutions technologiques disponibles, mais aussi les attentes des clients et les contraintes
des utilits
101
. Cette vision s'oppose ce qu'il appelle les "what if ? studies" qui simulent des
scnarios de pntration de nouvelles technologies sans prendre en compte les attentes relles
des consommateurs.

La premire dfinition du DSM par Gellings se veut trs large. Elle inclut par exemple les
possibilits de production dcentralise. Mais il reconnat lui-mme qu'au final le champ du
DSM a t restreint par l'appropriation du terme par les acteurs concerns (par ex. utilits,
rgulateurs). Il considre ainsi que, dans la pratique, le DSM n'englobe que les actions visant
augmenter l'efficacit des usages finals de l'nergie, les actions sur la courbe de charge, et
les actions de rduction des consommations d'nergie.

La Matrise de la Demande d'Electricit (MDEc), traduction franaise du DSM faite au
dbut des annes 1990, correspond cette dfinition restreinte.


A.1.1.2 L'IRP, une nouvelle approche de la planification nergtique et un cadre pour
l'analyse cots/bnfices


Jusqu'aux annes 1970, l'approche classique de planification nergtique considrait que la
demande en nergie tait une variable externe non matrise. Cette donne d'entre tait fixe
par des scnarios prospectifs bass sur l'analyse de l'volution historique de la demande, et sur
laquelle il fallait ajuster les besoins en capacit de production d'nergie [Kaehler 1993 p.65].

Les chocs ptroliers changent la donne et font qu'merge aux Etats-Unis la fin des annes
1970 le concept de Least Cost Planning (LCP). Celui-ci vise minimiser les cots de produc-
tion de l'lectricit en tenant compte qu'un programme de MDE peut tre plus rentable que
l'augmentation des capacits de production, dont les investissements sont alors vits ou diff-
rs. La demande en nergie devient donc une variable sur laquelle il est possible d'agir.
Le cadre du DSM a t structur pour convaincre les planificateurs inconditionnels des ac-
tions sur l'offre que la demande ne devait pas tre considre comme fixe [Gellings 1996
p.285].

La dmarche de Planification Intgre des Ressources (IRP), officialise dans le courant des
annes 1980, introduit en plus par rapport au LCP une prise en compte globale des cots et
bnfices des diffrentes alternatives envisages. L'objectif n'est plus seulement de rduire les
cots de l'lectricit, mais aussi de tenir compte des autres aspects conomiques, et des im-

101
Nous utilisons utilits pour traduire le terme anglais utilities, qui correspond aux entreprises charges des
services de rseaux (lectricit, gaz, eau, tlcommunication, rail). Aux Etats-Unis, elles peuvent tre publiques
(Public Utilities) ou prives (Investor-Owned Utilities, IOU). Dans cette thse, par utilits nous entendons les
entreprises charges du service de l'lectricit et/ou du gaz.
Annexe A.1.1 DSM, IRP et ESCo
12
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
pacts environnementaux et sociaux lis aux actions sur l'offre et la demande en lectricit.

L'IRP s'impose aux Etats-Unis de manire rglementaire par le biais des PUC (Public Utilities
Commissions), commissions de rgulation au niveau des tats fdraux qui fixent les profits
maximums des fournisseurs et distributeurs d'nergie. L'application de l'IRP s'est ainsi faite
par le contrle ralis par les PUC sur les dcisions d'investissement des utilits, en vrifiant
notamment que la comparaison des diffrentes alternatives possibles incluait bien les possibi-
lits dactivits de MDE, et pas seulement les investissements en capacit de production.

Par ailleurs, l'application de lIRP rend ncessaire l'valuation des activits de MDE. En
effet, pour comparer les alternatives sur l'offre avec celles sur la demande, il faut tre capable
de connatre leurs cots et impacts.

Les utilits disposent d'une grande exprience et d'une bonne connaissance des cots et im-
pacts des moyens de production. En revanche, les activits de MDE reprsentaient un do-
maine nouveau, pour lequel les connaissances et le savoir-faire taient construire.

Eto [1990], insiste d'ailleurs sur le fait que les incertitudes sur l'valuation des bnfices
des actions est le frein majeur au dveloppement du DSM aux Etats-Unis. [Orphelin 1999
p.25]

L'IRP a alors fourni un premier cadre d'valuation des activits de MDE bas sur l'ana-
lyse cots / bnfices. L'EPRI a ainsi repris les cinq tests dfinis dans l'Etat de la Californie
(cf. Annexe A.1.2 ci-aprs), correspondant chacun un point de vue dacteur diffrent, pour
dfinir les cots et bnfices prendre en compte [Anon 1987].

Nom du test (et point
de vue correspondant)
Cots Bnfices
Utility Cost (utilits) Cot total des actions Cot de fourniture d'lec-
tricit vit
Participant Cost (partici-
pants aux actions)
Surcot de la technologie Rduction facture lectrici-
t + aides touches
Rate Impact Measure
(non-participants)
Perte de revenus des utili-
ts
Cot de fourniture vit
Total Resource Cost
(clients des utilits)
Surcot de la technologie
+ cot total des actions -
incitation
Cot de fourniture vit
Social Cost (collectivit) Surcot de la technologie
+ cot total des actions -
incitation
Cot de fourniture vit +
bnfices environnemen-
taux
Source : [Kaehler 1993 p.23]
Tableau 1 - tests pour lvaluation des impacts d'un programme de DSM

Aux Etats-Unis, ces tests sont utiliss par les rgulateurs pour dcider de la mise en uvre
des actions. Le RIM permet de dterminer l'volution des tarifs imputables l'action tudie.
Le TRC compare les cots totaux de la mesure aux gains en nergie et en puissance. On peut
ainsi rpondre la question : le cot de la ressource Ngawatt
102
est-il infrieur celui de la

102
Le terme ngawatt est attribu Amory Lovins [Jones april 2004, Lovins 1989]. Il reprsente une mesure
abstraite de l'efficacit nergtique, faisant une quivalence entre capacit de production (en watts) et potentiel
d'efficacit nergtique (en ngawatts).
Annexe A.1.1 DSM, IRP et ESCo
13
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
ressource Mgawatt ? () Le rsultat du test pour la socit [Social Cost], qui devrait tre
prpondrant, dpend en fait principalement du mode de montarisation des externalits
103

[Kaehler 1993 p.24].

Un des points essentiels de ces tests est qu'ils fixent les objectifs principaux de l'valuation
des activits de MDE :
- quantifier les conomies d'nergie et les impacts sur la charge et estimer les cots de
fourniture vits (aussi bien en terme de cots de production que de cots de transport et
distribution)
- faire un bilan des diffrents cots associs aux actions, qu'ils soient directs (par ex. bud-
get de communication de l'action), ou indirects (par ex. pertes de revenus pour les fournis-
seurs d'lectricit)

De plus, le test global (Social Cost) ouvre les champs de l'valuation d'autres domaines :
- identifier et quantifier les impacts environnementaux associs (missions de CO2 et autres
polluants, etc.)
- identifier et quantifier les autres impacts conomiques que ceux sur les ventes d'nergie
(par ex. diffrentiel d'emplois entre ceux perdus dans le secteur de la production et ceux
gagns pour les activits de MDE ou rciproquement)

Les travaux sur les mthodes d'valuation pour raliser les tests cots/bnfices ont donn lieu
de nombreux publications et guides (voir notamment [CPUC 1998, DOE 2001, TecMarket
Works 2004, Vine 1999a, Schlegel 1997a, Sebold 2001]).


A.1.1.3 Les ESCo, de la vente de kWh aux services nergtiques avec contractualisation des
conomies d'nergie


La mise en pratique du concept de DSM a peu peu modifi la manire de la satisfaire les
besoins en nergie de consommateurs devenus clients. Cela a men passer d'une vision o le
produit final tait l'nergie finale et se mesurait en kWh, une vision o le produit final de-
vient le service rendu, appel aussi service nergtique (par ex. optimisation d'un systme
de chauffage ou d'air comprim).

Ce concept fait merger un nouveau secteur d'activit en Amrique du Nord, celui des ES-
Co
104
. Les ESCo sont des compagnies qui s'engagent dvelopper, installer et financer des
projets complets bass sur la performance, en gnral d'une dure de 5 10 ans, et centrs
sur l'amlioration de l'efficacit nergtique et de la dure de la charge des quipements (ou
installations) de leurs clients [Vine 1999]. Un contrat entre l'ESCo et son client fixe les r-
gles de rmunration de l'ESCo, le plus souvent sur la base des conomies d'nergie ralises.

L'essor des ESCo est renforc par l'Energy Policy Act de 1992 qui vise stimuler la concur-
rence la fois entre les producteurs d'nergie, mais aussi entre les producteurs d'nergie et les
ESCo, grce des appels d'offre ("competitive bidding" ou "demand-side bidding") arbitrs
par les PUC.

103
Les externalits correspondent ici aux impacts, positifs ou ngatifs, de la production d'nergie ou des activits
de MDE (par ex. le dmantlement des centrales en fin de vie, etc.). Dans le cas du test global (Social Cost), ces
impacts sont montariss (cots des externalits) afin de les prendre en compte dans l'analyse.
104
ESCo : Energy Services Company, ou compagnies de services nergtiques
Annexe A.1.1 DSM, IRP et ESCo
14
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006

Pour fixer les rgles de leur rmunration, les ESCo ont besoin de contractualiser les cono-
mies d'nergie qu'elles prvoient de faire raliser leurs clients. Pour ce faire, elles doivent
utiliser des rgles bien dfinies et acceptes par leurs clients pour comptabiliser ces cono-
mies.

Le DOE a appuy et coordonn les travaux dans ce domaine qui ont abouti en 1996 l'labo-
ration du NEMVP (North American Energy Measurement and Verification Protocol) auquel
ont particip la plupart des experts du domaine en Amrique du Nord. Puis s'y sont rajouts
des experts d'une trentaine de pays, pour aboutir une nouvelle version en 1997 dsormais
appele IPMVP (International Performance Measurement and Verification Protocol)
105
. La
version rvise actuelle de ce guide de rfrence date de mars 2002 [DOE 2001].

L'IPMVP propose 4 options pour mesurer les conomies d'nergie (cf. tableau 1 de [Vine
2003]) :
- option A : mesures partielles.
Cette option se concentre sur une inspection de l'quipement concern pour dterminer si
son installation et utilisation sont conformes au cahier des charges. Les facteurs de per-
formance sont soit estims ex-ante (valeur standard ou donnes fabricant) soit mesurs.
Les paramtres cls sont mesurs sur une courte priode et les conditions d'utilisation sont
estimes partir d'historiques ou de mesures sur des courtes priodes.
Exemple : valuation d'une opration d'clairage performant dans une entreprise. Les
puissances substitues sont releves et les dures d'utilisation sont estimes.

- catgorie B : mesures compltes
Cette option est adapte pour des actions ciblant sparment un ou plusieurs usages ayant
un profil de charge variable. Pour cette option, les facteurs de performance et les condi-
tions d'utilisation sont mesurs au niveau des quipements considrs, et ce de manire
continues pendant la dure du contrat.
Exemple : valuation d'une substitution de systme de pompes. Un compteur est plac sur
les pompes concernes.

- option C : suivi des consommations globales
Cette option est adapte pour des actions globales (avec de possibles interactions) sur l'en-
semble d'un btiment. La mthode consiste en une comparaison avant / aprs des
consommations globales du site concern, avec ou sans rgression et/ou corrections (cli-
matiques ou autres).

- catgorie D : utilisation d'un modle de simulation
Cette option est plutt destine au cas de btiments neufs ou de travaux de rnovation im-
portants. Elle consiste en l'utilisation d'un modle simulant les consommations globales
d'un btiment partir de paramtres ex-ante prdfinis et de donnes d'entre ex-post pro-
pres au btiment tudi. Ce modle doit tre calibr partir de donnes mesures ou rele-
ves (par ex. relevs de consommations pendant une priode donne).

(pour plus de dtails sur le contenu de l'IPMVP, se reporter l'Annexe A.3.1)



105
cf. <http://www.ipmvp.org>
Annexe A.1.1 DSM, IRP et ESCo
15
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
A.1.1.4 La nouvelle donne lie l'ouverture des marchs


Une synthse sur l'influence de la restructuration du march de l'lectricit aux Etats-Unis sur
les programmes de MDE est fournie par Blumstein et al. [2005], dont nous prsentons ici un
rsum.

La restructuration du march a t amorce par l'Energy Policy Act vot en 1992 par le
Congrs amricain. Mme si celui-ci maintenait l'obligation d'IRP pour les utilits avec un
contrle par les PUC, son but tait surtout d'augmenter la concurrence au niveau de la
production d'lectricit avec la cration d'une nouvelle catgorie de producteurs (producteurs
en gros) qui ne sont pas rguls par les PUC.

Dans la pratique, la concurrence a rendu difficile l'application de l'IRP, laquelle se sont
substitues les lois du march. Mais le march connat des imperfections et n'intgrait pas
certaines externalits (par ex. environnementales), ce qui justifiait le maintien de programmes
d'efficacit nergtique.

Cependant, l'approche des programmes volue. Avec l'IRP, les actions taient orientes sur
des programmes dits de "resource acquisition", i.e. des actions amenant des investissements
qui permettaient de satisfaire un service nergtique (clairage, confort thermique, etc.) un
cot infrieur que celui d'une nouvelle capacit de production d'nergie.

Avec l'ouverture la concurrence, l'objet n'est plus de comparer les alternatives sur l'offre
avec celles sur la demande, mais de corriger les dfauts du march et de stimuler une de-
mande en services nergtiques. Les actions sont alors orientes sur une approche dite de
transformation de march.

Concrtement, l'objectif n'est plus de matriser la demande directement et court terme, mais
de rechercher des effets durables sur le plus long terme (par exemple en menant des ac-
tions auprs des fabricants et des distributeurs).

La restructuration du secteur de l'lectricit a aussi modifi les modes de financement des
programmes de MDE. Les nouveaux modes de rgulation pour l'offre et la demande ont par-
fois connu des crises importantes comme en Californie en 2000-2001 (voir le numro spcial
(526) de la Revue de lEnergie en mai 2001). Ce qui a amen un retour des actions plus
court terme. Mais les systmes de rgulation, de financement des activits de MDE et la r-
partition des rles entre les acteurs varient d'un tat l'autre, selon le contexte local
106
. Ces
diffrences de contexte et de systme de rgulation influencent aussi les dispositifs d'valua-
tion.

Blumstein et al. [2005] indiquent que 23 tats (sur 50) proposent aujourd'hui des programmes
d'efficacit nergtique financs indirectement par les contribuables. Ils font tat de la diversi-
t des organisations utilises pour administrer ces programmes, et prsentent plus en dtails
les systmes de quatre tats (Californie, New York, Vermont, Connecticut) et d'une zone (le
Pacifique Nord-Ouest, qui regroupe quatre tats : Oregon, Washington, Montana et Idaho) qui
reprsentent eux seuls environ 50% des dpenses totales lies aux programmes d'efficacit

106
L'article de Blumstein et al. [2005] fournit sur ces points un clairage trs intressant, notamment en listant
les diffrentes responsabilits induites par la gestion de programmes d'efficacit nergtique et en proposant des
critres pour choisir comment rpartir ces responsabilits entre les acteurs.
Annexe A.1.1 DSM, IRP et ESCo
16
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
nergtique aux Etats-Unis.

Il en ressort qu'aucun des systmes existants n'est rellement suprieur aux autres, et qu'en
pratique l'organisation mettre en place dpend du contexte de chaque tat : l'environ-
nement politique et les choix de restructuration du march, la rgulation et la structure du sec-
teur lectrique, les objectifs fixs et l'quilibre trouv entre actions de court et de long terme.

Dans la section suivante, nous prsentons le processus de mise en place du dispositif d'valua-
tion des programmes d'efficacit nergtique en Californie. Cet exemple permet d'illustrer les
points prsents ci-dessus au travers de l'historique d'un Etat qui a souvent t le moteur des
volutions dans ce domaine aux Etats-Unis. C'est en Californie qu'a t publi le premier
guide d'valuation en 1983, qui dfinissait notamment les tests pour l'analyse cots/bnfices
ensuite repris par l'EPRI (cf. Tableau 1). C'est galement le premier tat se doter en 1993
d'une commission consultative pour assurer la mise en place d'un dispositif rigoureux d'va-
luation des programmes. En 1994, parmi les trois personnes l'initiative du projet qui allait
faire natre l'IPMVP, figure Steve Kromer du LBNL (Lawrence Berkeley National Laborato-
ry
107
). Ce n'est pas un hasard non plus si les experts californiens taient fortement impliqus
dans l'laboration de l'IPMVP, l'un d'entre eux
108
tant charg de la coordination technique de
ce vaste projet. Et la liste d'exemples de ce type serait longue.



107
Le LBNL est un des plus anciens instituts publics de recherche de l'Universit de Californie. Son dpartement
Environmental Energy Technologies Division est l'un des plus rputs aux Etats-Unis dans le domaine de
l'efficacit nergtique (<http://eetd.lbl.gov/>)
108
Satish Kumar, galement du Lawrence Berkeley National Laboratory

17
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Annexe A.1.2 La Californie, un exemple de mise en place de dispositif d'valua-
tion


Nous reprenons ici l'tude de cas prsente par Vine dans [Vine 2006 pp.1101-1108] et
[TecMarket Works 2004 pp.38-42], en insistant sur les points qui nous sont apparus essen-
tiels. Vine prsente la mise en place du dispositif d'valuation des programmes d'efficacit
nergtique en Californie sous forme chronologique, en distinguant quatre priodes : l're Pr-
Protocole (1970-1994), l're du Protocole (1994-1997), l're de Restructuration (1998-2000)
et l're actuelle de transition (depuis 2000). Nous avons gard ce choix de prsentation parce
quil fait bien ressortir lvolution des questionnements et des pratiques.


A.1.2.1 L're Pr-Protocole (1970-1994)


Depuis les annes 1970, la CPUC (California Public Utilities Commission
109
) a autoris l'uti-
lisation de fonds fiscaux pour des programmes d'efficacit nergtique valids et raliss par
les entreprises sous sa juridiction. Ces programmes taient reconnus rentables par rapport
des investissements de production d'nergie, mme si la priorit restait aux actions sur l'offre,
considres comme plus fiables que celles sur la demande.

De la fin des annes 1980 2002, la CPUC permettait aux utilits de rcuprer auprs des
contribuables les cots des programmes raliss, selon des modalits variables et fixes au cas
par cas d'une entreprise l'autre et d'une anne l'autre. Les sommes rclames taient vri-
fies par des procdures spares aux dlais courts.

La rentabilit des programmes tait d'abord estime par une approche de Least-Cost Planning
(cf. section A.1.1.2). Le Standard Practice Manual, premier guide mthodologique dans ce
domaine, a t publi par la CPUC et la CEC (California Energy Commission
110
) en 1983 et
fournissait des conseils pour standardiser les analyses cots/bnfices des programmes. Ce
manuel a notamment instaur les cinq tests standard prsents dans le Tableau 1.

Le besoin de dfinir cinq tests diffrents est motiv par le fait que, d'une part tous les pro-
grammes ne peuvent pas tre valus de la mme manire, et d'autre part que les objec-
tifs et l'utilisation de l'valuation varient selon le point de vue adopt. Ces deux points
sont fondamentaux.

Des ateliers de travail furent organiss pour former les acteurs et discuter avec eux de l'appli-
cation du manuel, ce qui a permis d'en diter une nouvelle version amliore en 1987 [CPUC

109
La CPUC, commission de tutelle, rgule les entreprises de tlcommunication, d'lectricit, de gaz naturel,
d'eau, de transport ferroviaire et de passagers. Elle a la responsabilit d'assurer que les clients disposent de
services srs et fiables des cots raisonnables, de les protger contre la fraude, et de promouvoir la bonne
sant de l'conomie californienne. (<http://www.cpuc.ca.gov/f pp.tatic/aboutcpuc/pucmission.htm>)
110
La CEC est l'agence californienne charge de la planification et de la politique nergtique de la Californie.
Ces cinq missions principales sont :
- la prvision des futures besoins nergtiques et la tenue d'un historique des donnes nergtiques
- le contrle des centrales thermiques de plus de 50 MW
- la promotion de l'efficacit nergtique par des normes sur les appareils et les btiments
- le dveloppement de nouvelles technologies et des nergies renouvelables
- la planification et la gestion des situations d'urgence lies l'nergie
(<http://www.energy.ca.gov/commission/index.html>)
Annexe A.1.2 La Californie, un exemple de mise en place de dispositif d'valuation
18
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
1987]. Cette dmarche participative d'implication des acteurs concerns dans le processus
de mise en place d'un dispositif d'valuation est un point cl de sa russite. Elle a permis en
outre de dpasser les divergences historiques entre les diffrents acteurs (utilits, CPUC,
CEC, etc.).

La CPUC a ensuite dcid en juin 1990 d'augmenter les fonds disponibles pour les program-
mes d'efficacit nergtique tout en tablissant un dispositif plus rigoureux d'valuation (qui
offrait les garanties ncessaires pour cette dcision). Ces dispositions incluaient notamment la
possibilit donne la DRA (Division of Ratepayer Advocates
111
) de recevoir une partie de
ces fonds pour engager des consultants indpendants pour contrler les programmes.
Cette mesure est aussi un point cl du processus, puisqu'elle a permis l'mergence d'une
communaut d'experts.

Pendant cette priode, les rsultats obtenus sont calculs partir de mthodes de modlisation
physique thorique ("engineering methods") aussi appeles estimations ex-ante (les diffrents
types de modles de calculs sont prsents dans la section III.3.1.1). Afin d'amliorer ces
mthodes, la CPUC organise des ateliers de travail durant l't 1992. Ce qui aboutit au
printemps 1993 l'adoption d'un cahier des charges complet et prcis, tablissant notamment
que l'valuation des programmes devait se baser sur la mesure ex-post des performances
effectives des actions entreprises.

Il est galement fix un protocole dfinissant le plan de travail pour la ralisation des valua-
tions et le recouvrement des fonds engags. Cette mme dcision instaure aussi le CADMAC
(California DSM Measurement Advisory Committee
112
), pour assurer la continuit du dve-
loppement de ce protocole.

Suite cela et l'ensemble du processus initi ds la fin des annes 1970 par la CPUC et la
CEC, la Californie dispose d'un dispositif exemplaire d'valuation.


A.1.2.2 L're du Protocole (1994-1997)


Les protocoles adopts par la CPUC en 1993 [CPUC 1998] fixaient les rgles d'valuation
pour dterminer les conomies d'nergie ralises pour lesquelles les fonds taient reverss.
Il tait notamment exig une planification des valuations :
- une valuation la fin de la 1
re
anne, base notamment sur des analyses de rgression et
l'utilisation de donnes de facturation
- des valuations dites "persistence and retention studies" lors des 4
me
et 9
me
annes pour
mesurer la dgradation ventuelle des rsultats au cours du temps (cf. section III.3.2.1)


111
La DRA, aujourd'hui ORA pour Office of Ratepayer Advocates, est un organe indpendant l'intrieur de la
CPUC mandat pour reprsenter les intrts des contribuables sous la juridiction de la CPUC.
(<http://www.dra.ca.gov/about+us/index.htm>)
112
Le CADMAC avait pour mission de fournir un forum pour les prsentations, discussions et l'examen des
valuations de programmes de DSM en cours ou finies, de coordonner le dveloppement et la ralisation des
valuations communes toutes les utilits, et de faciliter le dveloppement de protocoles de pointe et efficaces
pour mesurer et valuer les impacts des programmes de DSM. Les membres statutaires du comit sont les qua-
tre principales utilits, de la DRA, de la CEC, de la CPUC. Mais y participent aussi des instituts de recherche
comme le Lawrence Berkeley National Laboratory ou d'autres organismes ayant des comptences dans le do-
maine de l'efficacit nergtique.
(<http://www.calmac.org/cadmac.asp>)
Annexe A.1.2 La Californie, un exemple de mise en place de dispositif d'valuation
19
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Les programmes ligibles taient pr-valids. Leur rentabilit prvue devait tre prouve par
le biais des deux tests UC et TRC (cf. Tableau 1), sauf pour les programmes d'information /
sensibilisation dont les impacts sont jugs trop difficiles valuer.

Une volution importante du contexte intervient alors sous la forme d'une restructuration du
secteur de l'nergie concrtise en 1996 par l'AB1890 (Assembly Bill 1890, loi vote par
l'Assemble californienne) qui dfinit notamment les charges de service public. Ces PGC
(Public Goods Charge
113
) servent financer quatre types de programmes d'intrt public :
- programmes d'efficacit nergtique (rassembles sous l'intitul EEPPP (Energy Efficien-
cy Public Purpose Program))
- programmes de dveloppement des nergies renouvelables
- programmes d'aide aux personnes aux faibles revenus
- programmes de recherche et dveloppement

Vine insiste sur le fait que, mme si le niveau des fonds des PGC a t fix sur une rfrence
assez basse par rapport aux priodes antrieures, leur existence a t un point cl du maintien
d'une activit forte dans le domaine de l'efficacit nergtique en Californie.


A.1.2.3 L're de Restructuration (1998-2000)


L'AB1890 applique partir de 1998 a cre une rupture dans la manire dont la CPUC va-
luait et finanait les programmes d'efficacit nergtique. L'EEPPP a codifi les mcanismes
de collecte et rpartition des fonds, avec pour effet de rorienter la conception et la ralisation
des programmes. Dans le secteur industriel et tertiaire, les systmes classiques de subven-
tions/remises ont t remplacs par des contrats de performance. Et d'une manire gnrale,
les efforts ont t dirigs vers la transformation amont des marchs
114
.

Au niveau de l'valuation, cela eut pour effet une hausse consquente des dpenses d'valua-
tions cibles sur la quantification des impacts sur les marchs et des bnfices indirects
attribuables aux programmes de transformation amont des marchs, alors que les dpenses
totales d'valuation ont t rduites.

L'objectif de ces nouvelles orientations est d'intervenir sur le march pour causer des chan-
gements bnfiques et durables dans la structure ou la fonction du march et/ou pour changer
les pratiques afin d'augmenter l'adoption de produits, services ou pratiques performants, et ce
de manire durable, i.e. que les changements durent au-del de la rvision ou de la disconti-
nuit des interventions. ([Schlegel 1997a], cit par [Vine 2006 p.1106]) Le but est aussi
d'encourager des organismes privs fournir des services d'efficacit nergtique pour com-
penser les rductions de financements publics.

Un nouvel organe a t cre par la CPUC en avril 1997 pour rpondre ces nouvelles exigen-
ces. La CBEE (California Board for Energy Efficiency
115
), en contact avec les acteurs cls

113
Taxe applique sur les factures d'lectricit et de gaz hauteur respectivement de 1% de la facture pour l'lec-
tricit et de 0,7% pour le gaz. Cela reprsente environ 540 millions de dollars, dont 220 sont consacrs aux pro-
grammes d'efficacit nergtique (cf. <http://www.cpuc.ca.gov>)
114
Par exemple, les efforts sont cibls sur les dveloppeurs ou fournisseurs de produits (par ex. aides au dve-
loppement et la mise en rayon de nouveaux produits performants ) plutt que sur le client final (par ex. cou-
pons de rduction pour les consommateurs).
115
Le CBEE est une commission consultative indpendante charge par la CPUC de dvelopper une organisa-
tion et un processus pour superviser le dveloppement et la ralisation d'une nouvelle gnration de programmes
Annexe A.1.2 La Californie, un exemple de mise en place de dispositif d'valuation
20
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
dont la CEC, conseillait la CPUC sur les types de programmes financer et sur les exigences
requises pour valuer les programmes de transformation de march. En parallle, le CAD-
MAC devient le CALMAC (California Measurement Advisory Council
116
).

De fait les rsultats des programmes taient mesurs aussi bien en termes de nombre d'actions
ralises/installes (en units de march) qu'en termes d'conomies d'nergie effectives. Mais
les efforts d'valuation taient concentrs sur la vrification du nombre d'actions rappor-
tes par les utilits. La mesure des conomies d'nergie a t dlaisse par rapport aux prati-
ques antrieures.

De mme, le CBEE a recommand un nouveau test d'analyse cots/bnfices : le PPT (Public
Purpose Test), bas sur le Social Cost Test qui prend en compte les bnfices non-
nergtiques (par ex. emplois) et les externalits positives/ngatives. Le PPT largit les l-
ments pris en compte et ne s'applique plus au niveau de chaque programme mais des en-
sembles de programmes dits portefeuilles.

Ainsi la rentabilit n'est plus exige pour chaque programme mais au niveau des portefeuilles.
Le but est d'encourager les interventions qui ne produisent pas directement de rsultats mesu-
rables ds le dbut, mais qui sont rentables dans la dure comme facteurs de transformation de
march.

En avril 1999, la CPUC a adopt la PPT ainsi que des valeurs standard pour un certain nom-
bre de paramtres ncessaires aux calculs du PPT :
- cots vits de production d'lectricit
- cots vits de transport et distribution d'lectricit
- cots vits de consommation de gaz par les usagers finals
- externalits environnementales lies l'lectricit et au gaz
- ratios d'effet d'aubaine (brut/net, cf. section I.3.1.3)
- taux d'actualisation appliquer

Le CBEE a ensuite command une quipe d'experts une dernire tude pour discuter des
justifications, de la logique implicite et des techniques ncessaires pour valuer la rentabilit
des interventions de transformation de march ([Sebold 2001] cit par [Vine 2006 p.1106]).
Malgr les bons rsultats obtenus, ces travaux n'ont jamais t utiliss dans les protocoles et
guides d'valuation, principalement cause du contexte instable pour la planification et rgu-
lation du secteur de l'nergie cette poque en Californie.


A.1.2.4 L're actuelle de transition (depuis 2000)


Le contexte tait instable en raison d'incertitudes sur le niveau des fonds disponibles et d'int-
rt pour les programmes d'efficacit nergtique, l'administration et la ralisation de ces pro-
grammes, et les exigences en termes d'valuation. Ces incertitudes n'taient pas nouvelles,
mais elles taient accrues par la situation d'urgence lie la crise nergtique de 2000-2001.


d'efficacit nergtique conus pour transformer les marchs de l'nergie et aider crer des marchs autoentre-
tenus pour les fournisseurs de produits et services performants.
(<http://cpuc.ee.support.net/about.html>)
116
Statutairement le CALMAC est identique au CALMAC, seul le nom change pour prendre en compte la nou-
velle nature des programmes valus (transformation de march au lieu de DSM) (<http://www.calmac.org>).
Annexe A.1.2 La Californie, un exemple de mise en place de dispositif d'valuation
21
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
En rponse cette crise, la CPUC et la CEC dcidrent une augmentation considrable des
moyens consacrs l'efficacit nergtique. En tout en 2001, plus de 1,3 milliards de dollars
(soit une hausse de 250% par rapport l'anne prcdente) ont t accords pour financer des
activits de MDE. Un tel engagement financier tait historique puisqu'il reprsentait lui seul
peu prs la somme de toutes les dpenses d'efficacit nergtique de tous les autres Etats
amricains. Et il faut noter que la majeure partie des fonds fut utilise pour des actions
court terme dite de "resource acquisition", et non pas dans des actions de transformation qui
visent le moyen ou long terme.

Pour mettre en uvre cette politique de crise, la CPUC adopta en novembre 2001 une dci-
sion permettant d'autres organismes de concurrencer les utilits pour certains financements
d'efficacit nergtique. Cette disposition instituait aussi l'Energy Efficiency Policy Manual
qui fixait un systme de notation des programmes sur une base pondre de sept critres
(sans en expliciter clairement les justifications) ([CPUC 2001] cit par [Vine 2006 p.1107]) :
- conomies annuelles d'nergie (lectricit ou gaz) sur le long terme (25 points)
- rentabilit (20 poins)
- solutions apports aux barrires ou dfauts du march (17 points)
- considrations d'quit (15 points)
- rduction du pic de charge pour l'lectricit (10 points)
- innovation (8 points)
- synergies et coordination avec les programmes mens par d'autres organismes (5 points)

Ce manuel a t rvis en 2002. Il contient un cahier des charges pour les analyses de rentabi-
lit et adopte l'IPMVP (cf. section A.1.1.3) pour la vrification des rsultats. Les autres re-
commandations portent sur l'analyse de la logique d'intervention (cf. section I.3.1.1) et sur des
indicateurs d'efficacit. Les objectifs poursuivis sont alors dune part un quilibre entre rali-
ser des conomies d'nergie effectives et de long terme, et dautre part atteindre les cibles
difficiles (par ex. les mnages bas revenus).

La priorit donne l'efficacit nergtique dans les politiques nergtiques californiennes a
t confirme par la dcision de la CPUC d'octobre 2002, suite la loi AB57 de septembre
2002. La CPUC, la CEC, et la CPA (California Power Authority
117
) ont alors prpar ensem-
ble un Energy Action Plan ([CPUC 2003] cit par [Vine 2006 p.1107]). Ce plan reprsente un
effort sans prcdent pour dfinir une politique nergtique unique avec une priorit donne
l'efficacit nergtique et aux nergies renouvelables. Il donne notamment des bases pour une
visibilit de moyen terme sur les moyens engags (700 millions de dollars sur cinq ans, en
plus des fonds PGC). Dans le mme temps, l'approche incitative, avec la perspective de r-
compenses/primes pour les bons lves, laisse place un systme de pnalits si les objectifs
fixs ne sont pas atteints.

En parallle, la CPUC avait command en novembre 2001 une tude pour dfinir un nouveau
cadre de planification et de conduite des valuations des programmes d'efficacit nergtique
et de "resource acquisition". L'un des thmes de travail tait d'tablir une approche d'valua-
tion qui fournisse une information fiable pour aider la scurisation nergtique de la Cali-
fornie, tout en permettant une amlioration continue des programmes et en aidant les gestion-
naires de programmes satisfaire leurs besoins en donnes.

117
La CPA est une nouvelle autorit de l'Etat californien cre en aot 2001 suite la crise nergtique de 2000-
2001. Elle est charge d'assurer la scurit d'approvisionnement en lectricit de la Californie afin d'viter de
nouvelles coupures d'lectricit et des hausses trop fortes des prix. Elle est constitue de cinq membres nomms
par le Gouverneur et le Trsorier de l'Etat, et dispose d'un budget de 5 milliards de dollars pour choisir les meil-
leures options pour assurer sa mission. (cf. <http://www.capowerauthority.ca.gov>)
Annexe A.1.2 La Californie, un exemple de mise en place de dispositif d'valuation
22
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006

La California Evaluation Framework publie en mars 2004 [TecMarket Works 2004] pr-
sente une approche systmatique pour la planification, la conduite et le financement des
valuations, remplaant les approches traditionnelles spcifiques un secteur ou un type de
programme. Ce guide fournit un processus de dcision o la prise en compte de la qualit et
de la fiabilit de l'valuation influence sa conception notamment par rapport au choix de ses
diffrents lments (mesures et suivi des efforts raliss et rsultats obtenus, analyse de la
logique d'intervention, tude des impacts de transformation de march, recherche des impacts
non-nergtiques, et valuation des programmes d'information / sensibilisation).

En outre, ds 1996, le CADMAC (puis le CALMAC) a mis en place une base de donnes (la
DEER, Database for Energy Efficient Resources
118
) qui regroupe des estimations de rfrence
par type d'actions pour des valeurs d'conomies d'nergie et d'impacts sur la charge, de cots
et de dure de vie effective des actions et de ratios brut/net standard. Cet outil est un lment
cl du processus de capitalisation d'exprience. Aliment par les valuations ralises et
l'exprience acquise au fur et mesure, il permet aux professionnels de pouvoir mieux conce-
voir de futurs programmes et d'en prvoir les impacts, et d'identifier les potentiels existants
d'efficacit nergtique.

De mme, le CALMAC a aussi constitu une base de donnes des rapports de recherche (de-
puis 1990) et d'valuations ralises (depuis 1994)
119
. Les rapports peuvent tre recherchs
par titre, auteurs (valuateurs), sujet, catgorie d'valuation, ou secteur.

Ci-dessous le Tableau 18 rcapitule la chronologie de la mise en place des dispositifs pour les
programmes d'efficacit nergtique et leur valuation en Californie, et un schma (cf. Figure
14) donne une vue d'ensemble du dispositif actuel.

Date Evnement / dcision / parution
1970's - La CPUC autorise le recouvrement des cots de programmes valids de DSM.
1983 - Premire dition du Standard Practice Manual, premier guide mthodologi-
que d'valuation (dfinition des tests pour l'analyse cots/bnfices)
1987 - Nouvelle version du manuel, aprs concertation avec les acteurs
1990 - Dcision de la CPUC d'augmenter les fonds pour les programmes d'efficacit
nergtique et fonds ddis la DRA pour des valuations indpendantes
1992 - Ateliers de travail pour prparer des protocoles d'valuation
1993 - Adoption par la CPUC des Protocoles d'valuation bass sur les tests UC et
TRC [CPUC 1998]
- Cration du CADMAC
1994 - plus de 500 millions engags en 1994 pour des programmes d'efficacit ner-
gtique (moyenne d'environ 200 millions/an sur la priode 1980-1995)
1996 - loi AB1890, restructuration du secteur de l'nergie et tablissement des PGC
($220 millions/an pour les programmes d'efficacit nergtique)
- le CADMAC devient le CALMAC
- mise en place de la base de donnes DEER
1997 - cration du CBEE et nouvelle orientation pour la transformation de march
1998 - application de l'AB1890 et mise en uvre de nouvelles procdures (EEPPP)
1999 - la CPUC adopte le test du CBEE, le PPT + dfinition de valeurs standard
2000 - dernire tude commande par le CBEE (mais jamais utilise)

118
Cf. <http://www.energy.ca.gov/deer/> et <http://eega.cpuc.ca.gov/deer/>
119
Cf. <http://www.calmac.org/f pp.earch.asp>
Annexe A.1.2 La Californie, un exemple de mise en place de dispositif d'valuation
23
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
2000-01 - crise nergtique en Californie
2001 - la CPUC et la CEC octroient un budget de 1,3 milliards de dollars pour des
programmes d'efficacit nergtique pour faire face la crise
- cration de la CPA pour viter de nouvelles crises nergtiques
- la CPUC adopte l'Energy Efficiency Policy Manual (notation sur 7 critres
pondrs) [CPUC 2001]
2002 - rvision du manuel et adoption de l'IPMVP pour l'valuation des programmes
de type resource acquisition
- nouvelle orientation avec la recherche d'un quilibre entre court (resource
acquisition) et long (transformation de march) terme
- la CPUC, la CEC et la CPA dfinissent l'Energy Action Plan, avec 700 mil-
lions de dollars sur 5 ans (soit 140/an) en plus des PGC pour l'efficacit nerg-
tique
2004 - premire version de la California Evaluation Framework [TecMarket Works
2004]
Tableau 18 - chronologie de la mise en place des dispositifs pour les programmes
d'efficacit nergtique et leur valuation en Californie

(voir aussi les schmas sur l'organisation gnrale du secteur de l'lectricit avant et aprs
restructuration dans [Mikdashi 2002 pp.9-10])

Annexe A.1.2 La Californie, un exemple de mise en place de dispositif d'valuation
24
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006

Figure 14 - dispositif actuel pour la mise en oeuvre et l'valuation des programmes d'efficacit nergtique en Californie
programmes d'efficacit
nergtique
CPUC
(1912)
CEC
(1974)
CALMAC
(1993)
DRA/ORA
(1986/96)
UTILITES
Protocoles
d'valuation
DEER
Base de donnes
des rapports
d'valuation
CPA
(2001)
Energy Action
Plan
Experts
indpendants
ESCo et autres
organismes
privs
LBNL et autres
organismes de
recherche
Ralisent et
valuent
Recouvrent les dpenses
engages et/ou attribuent
des primes
Reversent
les PGC
Dfinissent
Contrle /
valide
Evaluent
Finance
Alimentent
et utilisent
Engage
Conseillent et
participent
Dfinit et
maintient
Finance
actions
Alimentent
et utilisent
UTILITES
acteur
(date de cration)
rsultat
Constituent
Flux financier
Action
Membre de
Alimentent
Lgende :

25
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Annexes A.2 sur les expriences europennes


Comme le signale Orphelin [1999 p.15], au sein de l'Union Europenne, les motivations
ayant engendr les actions MDE nationales sont varies : conscience des enjeux environne-
mentaux (Allemagne, Pays-Bas, Danemark), manque de moyens de pointe (Irlande), alterna-
tives au nuclaire ou problmes de transport et distribution (Autriche, Italie).

De mme, dans leur rapport d'analyse des programmes de DSM dans les pays de l'Union Eu-
ropenne, Irrek et Thomas mettent en garde le lecteur que les approches choisies ne peuvent
pas tre comprises et interprtes correctement sans comprendre le cadre politique spcifi-
que chacun des pays [Irrek 2002 p.7]. C'est pourquoi il serait fastidieux de prsenter chro-
nologiquement les approches europennes dactivits de MDE.

Nous analysons donc dabord les lments de contexte au niveau europen (Annexe A.2.1),
pour en dgager les principales logiques dactivits de MDE, et leur lien avec les pratiques
dvaluation.

Puis au travers de lanalyse des tudes europennes les plus marquantes, nous dcrivons la
construction des principales approches dvaluation, et en particulier de lapproche bot-
tom-up (Annexe A.2.2).

Nous dtaillons ensuite lexemple du Danemark, qui, limage de la Californie aux Etats-
Unis, a souvent t un pays prcurseur en ce qui concerne les dispositifs dvaluation des ac-
tivits de MDE (Annexe A.2.3).

Enfin, une synthse sur les principales conclusions des expriences europennes permet de
faire ressortir les tendances et besoins actuels, fortement lis ladoption dune nouvelle Di-
rective europenne relative l'efficacit nergtique (Directive EESE
120
, [Parlement et
Conseil Europen 2006]) (cf. Annexe A.2.4).





120
Directive 2006/32/CE relative l'Efficacit Energtique dans les utilisations finales et aux Services Energti-
ques

26
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Annexe A.2.1 Contextes et approches des activits de MDE en Europe


A.2.1.1 Un cadre communautaire qui encourage l'efficacit nergtique, mais qui vise surtout
l'ouverture des marchs de l'nergie la concurrence


Les principaux textes communautaires pour l'efficacit
nergtique

La Communaut puis l'Union Europenne s'est toujours montre trs active dans le domaine
de l'nergie. Le nom de son anctre, la Communaut Europenne du Charbon et de l'Acier
(1951), en tmoigne. Dans ce secteur, comme dans celui de l'environnement auquel il est de
plus en plus li, de nombreux textes structurent les orientations politiques europennes,
notamment concernant
121
:

- la scurit d'approvisionnement nergtique : le Livre vert de la Commission vers une
stratgie europenne de scurit d'approvisionnement (COM(2000)-769, puis
COM(2002)-321) fait tat de la situation nergtique de l'Union et propose une stratgie
de long terme dont le premier axe est de rquilibrer la politique de l'offre par des ac-
tions claires en faveur de la demande pour mieux contrler la croissance de la demande
nergtique.

- la constitution d'un march europen de l'nergie : l'Union Europenne a engag dans
le courant des annes 1990 un processus pour constituer un march europen intrieur de
l'nergie. Diffrentes Directives (en particulier 96/92/CE puis 2003/54/CE pour l'lectrici-
t, et 98/30/CE puis 2003/55/CE pour le gaz) ont tabli les rgles communes pour ce
march, avec plusieurs tapes pour arriver une ouverture totale la concurrence pour
l'ensemble des consommateurs de l'Union en 2007.

- le cadre gnral des politiques d'efficacit nergtique : depuis le dbut des annes
1990, l'Union Europenne a men de nombreuses actions dans ce domaine. Afin de les
structurer et de les soutenir, la Commission a propos des orientations au travers de com-
munications, Vers une stratgie d'utilisation rationnelle de l'nergie (COM(1998)-246)
et plan d'action (COM(2000)-247), et dernirement d'un Livre vert, l'efficacit nergti-
que ou comment consommer mieux avec moins (COM(2005)-265). Ces propositions d-
gagent des possibilits d'actions par secteur (transport, industrie, btiments) et ont servi
de base pour dfinir des Directives spcifiques et fixer les priorits pour les financements
engags.

- la Directive relative l'efficacit nergtique dans les utilisations finales et aux services
nergtiques (Directive EESE 2006/32/CE) fixe un objectif d'une rduction annuelle et
additionnelle de 1% par an des consommations finales d'nergie. Cet objectif est indica-
tif, mais les pays membres devront soumettre des plans d'action nationaux l'approba-
tion de la Commission (processus quivalent une obligation de moyens).


121
Des notes de synthse sur les textes de l'Union Europenne dans le domaine de l'nergie peuvent tre consul-
tes sur <http://europa.eu.int/f pp.cadplus/leg/fr/f pp.14000.htm> . Pour les actualits sur les textes concernant
plus spcifiquement l'efficacit nergtique, se reporter
<http://www.euractiv.com/Article ?tcmuri=tcm :29-143199-16&type=LinksDossier>
Annexe A.2.1 Contextes et approches des activits de MDE en Europe
27
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
- l'efficacit nergtique des produits : la Directive 92/75/CEE a mis en place une lgisla-
tion sur l'indication des consommations d'nergie des appareils lectromnagers. Son
application s'est d'abord faite pour les rfrigrateurs et conglateurs (Directives 94/2/CE
puis 2003/66/CE), puis pour les machines laver (95/12/CE), les sche-linge (95/13/CE),
les lavantes-schantes (96/60/CE), les lave-vaisselle (97/17/CE puis 1999/9/CE), les lam-
pes (98/11/CE), les climatiseurs domestiques (2002/31/CE), et les fours lectriques
(2002/40/CE). De mme, la Communaut europenne a pass un accord de coordination
avec les Etats-Unis sur l'tiquetage relatif aux quipements de bureau pour la mise en u-
vre du programme Energy Star (dcision 2001/469/CE du Conseil). Cette dmarche a
permis d'aboutir la Directive 2005/32/CE qui met en place un cadre pour la fixation
d'exigences d'coconception applicables aux produits consommateurs d'nergie. Cette
Directive pose les principes qui seront ensuite appliquer pour dfinir des exigences
contraignantes pour chaque type de produits.

- la performance nergtique des btiments : une dmarche similaire celle pour les
produits est conduite pour les btiments. Ainsi la Directive 2002/91/CE sur la perfor-
mance nergtique des btiments dfinit une mthodologie commune de calcul de ces
performances, afin d'en permettre la certification et l'affichage, et de fixer des normes
minimales pour les btiments neufs et les travaux de rnovation importants. La Directive
instaure de plus un contrle rgulier des chaudires et systmes centraux de climatisation.


Une volont politique qui s'affirme surtout pour ouvrir
les marchs la concurrence

Il est important de noter qu'alors que la Commission s'est dote d'une Directive portant sur le
march de l'offre d'lectricit ds 1996 (Directive 96/92/CE), il a fallu attendre 2006 pour
qu'aboutisse une Directive fixe des orientations (qui restent en outre pour la plupart indicati-
ves) pour un march des activits de MDE. Alors mme qu'un projet de Directive IRP
122

cherchait ds 1994 imposer une systmatisation des pratiques d'arbitrage entre options
d'offre et de demande [Finon 1996 p.608]. Finon [Finon 1996 p.608] fournit une explication
pour l'chec de cette proposition de Directive : l'hostilit des entreprises europennes re-
groupes dans Eurelectric qui dfende une autre conception de la MDEc, selon laquelle un
mandat rglementaire ne serait pas justifi.

Ainsi, contrairement aux Etats-Unis, o les actions de DSM se sont dveloppes sous l'ac-
tion des autorits de rglementation qui ont mandat les entreprises lectriques pour agir sur
la demande en s'appuyant sur une obligation de programmation intgre des options d'offre
et de demande (IRP), en Europe, cette diffusion s'est effectue sur un mode plus informel
de volontariat ngoci, sous la pression des gouvernements engags dans des politiques d'en-
vironnement global. Ainsi les utilits europennes argumentaient que la MDEc s'intgrerait
spontanment dans les nouvelles stratgies rsultant des mutations de l'environnement des
entreprises. L'intrt des monopoles lectriques publics ou privs, qui est la croissance et la
recherche d'un taux de rentabilit minimum, convergerait spontanment avec l'intrt des
consommateurs, et plus gnralement, l'intrt de la collectivit.

Ainsi Finon distinguait alors le modle rglementaire des Etats-Unis celui coopratif
(ou auto rglement) de certains pays europens (dont la France). Mais il dcrivait aussi un

122
Proposition de Directive concernant l'introduction de techniques de planification rationnelle dans les secteurs
de la distribution du gaz et de l'lectricit du 20 septembre 1995 (COM/369/4)
Annexe A.2.1 Contextes et approches des activits de MDE en Europe
28
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
autre modle, dit concurrentiel, vers lequel convergeait alors la Grande-Bretagne et la Ca-
lifornie, et qui semble s'imposer aujourd'hui, notamment en raison de l'ouverture des marchs.


A.2.1.2 Des programmes pour aider la mise en uvre de ces politiques


En parallle la structuration difficile d'un cadre politique pour l'efficacit nergtique,
l'Union Europenne a mis en place des aides aussi bien pour la recherche que pour la ralisa-
tion de programmes d'efficacit nergtique, notamment le programme PACE (Programme
d'Action Communautaire visant amliorer l'Efficacit de l'utilisation de l'lectricit), dbut
en 1989 (dcision 89/364/CEE) puis les programmes SAVE (Specific Actions for Vigorous
Energy Efficiency) avec SAVE I de 1992 1996 (dcision 91/565/CEE), puis SAVE II de
1998 2002 (dcisions 96/737/CEE puis 647/2000/CE), puis SAVE III de 2002 2006 dans
le cadre du programme global IEE (Intelligent Energy-Europe) (dcision 1230/2003/CE).

Ces programmes ont permis de financer de nombreux travaux de recherche et oprations ex-
primentales visant mettre en uvre les orientations et priorits fixes par la Commission.
Ces projets ont t un des moteurs essentiels l'essor d'activits d'efficacit nergtique, par
la recherche et la dissmination de solutions nergtiques performantes, par des tudes sur les
instruments d'intervention, sur la planification nergtique, etc. De plus, ces programmes
europens d'aides offraient un cadre pour des projets transversaux, et en particulier pour des
travaux sur l'valuation.

Une base de donnes, IntellEBase
123
, permet d'avoir accs la description, et le cas chant
aux ressources associes (rapports, site Web, etc.), de 276 projets qui ont t financ dans le
cadre des programmes SAVE depuis 1996.


A.2.1.3 Des contextes nationaux qui restent spcifiques, et qui sont dterminants pour
l'efficacit des actions entreprises et pour l'existence de relles valuations


Si la Commission Europenne propose des orientations de politiques nergtiques et dfinit
par des Directives un certain nombre de rgles communes, les Etats-membres restent libres
quant aux choix de stratgies nergtiques et la manire de mettre en uvre les Directives.
De fait les contextes nationaux restent trs varis, par exemple dans la manire d'appliquer les
Directives concernant l'laboration d'un march intrieur de l'nergie.

Dans leur rapport sur les programmes de DSM dans les pays de l'Union Europenne, Irrek et
Thomas montrent que les diffrences de contexte national expliquent dans une large mesure
les diffrences de niveau, pass ou prsent, avec lequel les programmes de EE-DSM
124
ont t
raliss [Irrek 2002 p.17]. Ils soulignent aussi que leurs recherches d'informations n'ont pas
pu tre exhaustives malgr les contacts pris dans les diffrents pays, notamment parce que
dans la plupart des Etats-membres, il n'y a pas de collecte centrale des donnes de

123
cf. <http://europa.eu.int/comm/energy/iebase/index.cfm>
124
Dans ce rapport, Irrek et Thomas utilisent le concept de EE-DSM (Energy Efficiency Demand-Side Manage-
ment), qu'ils dfinissent ainsi : activits de DSM, menes par les compagnies d'nergie ou les ESCo, qui rdui-
sent les cots totaux de vritables services nergtiques, et rduisent les consommations d'nergie primaire afin
d'amliorer l'environnement [Irrek 2002 pp.15]
Annexe A.2.1 Contextes et approches des activits de MDE en Europe
29
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
DSM[Irrek 2002 p.13].

Quant l'valuation des programmes de EE-DSM, ils constatent que la documentation et
l'valuation des rsultats n'est pas trs bien dveloppe dans tous les Etats-membres et pour
tous les programmes d'un Etat [Irrek 2002 p.9].

Malgr tout, ils font apparatre deux types d'approches dactivits de MDE qui se sont rv-
les efficaces [Irrek 2002 pp.17-18] :

- l'approche dite charges de service public + fonds EE-DSM, o un mcanisme permet
de constituer un fonds partir de prlvements sur les ventes finales d'nergies. Ces fi-
nancements sont ensuite redistribus aux organismes qui ralisent des programmes d'EE-
DSM. Ce systme est voisin de ceux grs par les PUC aux Etats-Unis, et a t appliqu
par exemple au Danemark depuis 1996, au Royaume-Uni de 1994 2002 avec le pro-
gramme EESoP (Energy Efficiency Standard of Performance), et en Belgique jusqu'en
2002.

- l'approche sous forme d'obligations, o certaines catgories d'acteurs, dits obligs, ont
l'obligation de raliser ou faire raliser des actions d'EE-DSM aux consommateurs finals
sous peine de pnalits. En contrepartie, une rgulation permet gnralement que les ac-
teurs obligs puissent augmenter leurs tarifs pour compenser les dpenses engages et/ou
les pertes de revenus (exemples : systme de l'EEC (Energy Efficiency Commitment) de-
puis 2002 au Royaume-Uni; systme d'obligation dans les Flandres depuis 2002; et syst-
mes de certificats blancs ou d'conomies d'nergie en Italie depuis 2005 et en France de-
puis 2006)

Les autres approches correspondent le plus souvent des accords ngocis d'engagements (cf.
tableau 1, page 18 de [Irrek 2002]), comme c'tait par exemple le cas en France avec les ac-
cords ADEME-EDF. L'efficacit et les rsultats des programmes raliss dans ce cadre sont
beaucoup plus alatoires que ceux constats pour les deux autres types d'approche identifis
par les auteurs.


A.2.1.4 L'ouverture des marchs change les perspectives des activits de MDE


Il est intressant de noter qu'Irrek et Thomas ne mentionnent pas explicitement l'approche IRP
ou LCP (cf. section A.1.1.2 de l'Annexe A.1.1). La seule rfrence faite l'IRP du rapport
concerne l'exprience ralise Hanovre qui fait figure de cas d'cole pour l'Europe. Cela
tend montrer que malgr l'effervescence autour de l'IRP dans les annes 1990, cette dmar-
che ne s'est finalement pas impose
125
.

Un prcdent projet SAVE avait parmi ses objectifs d'tudier les perspectives pour le DSM et
l'IRP dans un march de l'nergie ouvert la concurrence [Thomas 2000]. Ses conclusions
font ressortir que la libralisation du march rend difficile l'application de l'IRP, notamment

125
Une proposition de Directive europenne sur l'IRP avait t soumise par la Commission en novembre 1995
(Proposal for a Council Directive to introduce rational planning techniques in the electricity and gas distribution
sectors, COM(95) 369) mais n'a jamais t concrtise. En 1997 plus de 400 programmes apparents LCP sont
conduits en Allemagne par une centaine d'utilits plus ou moins grande, mais la plupart sont petite chelle et
porte l'intitul de projet pilote [Hennicke 1997 pp.1].
Annexe A.2.1 Contextes et approches des activits de MDE en Europe
30
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
car il devient encore plus difficile de prvoir la demande pour un fournisseur d'nergie quand
sa clientle n'est plus captive, et car il n'est plus possible pour un fournisseur de recouvrer les
dpenses de DSM dans les tarifs de l'nergie en raison de la concurrence sur les prix [Thomas
1999 p.2]. En revanche, les perspectives pour les actions d'EE-DSM sont plus favorables,
notamment si un mcanisme d'incitation ou d'obligation est mis en place [Thomas 1999 p.6].

Parmi les possibilits envisages pour l'IRP dans un march concurrentiel [Thomas 1999
pp.7-8], les seules qui apparaissent plausibles aujourd'hui seraient l'application de l'IRP un
niveau local dans un contexte spcifique
126
, ou un niveau national sous l'gide d'un Etat qui
adopterait un systme du type des Public Good Charges en Californie (cf. section A.1.2.2 de
l'Annexe A.1.2).

Ainsi, tout comme aux Etats-Unis, le processus d'ouverture des marchs a rorient les appro-
ches des activits de MDE.


A.2.1.5 Logique de moyens et/ou rsultats, et liens avec l'valuation


En synthse sur les diffrentes approches des activits de MDE, nous proposons la classifica-
tion suivante :
- logique d'engagement de moyens
- logique d'obligation de moyens
- logique d'obligation de rsultats

L'avantage de cette classification est qu'elle permet de faire directement le lien avec les diff-
rentes approches d'valuation identifies.


Logique d'engagement de moyens

Dans une logique d'engagement de moyens, les dcideurs (gouvernement, utilits, agences
publiques charges des questions d'efficacit nergtique) s'engagent sur une enveloppe fi-
nancire utilise pour raliser ou faire raliser des programmes d'efficacit nergtique, soit
directement, soit par appels d'offre.

Cette logique tait largement rpandue dans de nombreux pays europens dont la France
(exemple des accords ADEME-EDF ou ADEME-Rgions). Dans ce cas, l'valuation est
d'abord utilise pour justifier les dpenses engages, et les rapports d'valuation font sur-
tout ressortir les moyens mis en uvre, et les rsultats restent parfois exprims en termes de
nombre de personnes touches ou de travaux engags. Les impacts en termes d'conomies
d'nergie ou de rduction de la charge, quand ils sont estims, le sont le plus souvent ex-ante,
et les valuations ex-post restent trs rares. D'o le constat voqu ci-dessus d'Irrek et Stefan
sur la difficult de trouver des informations documentes sur les rsultats rellement
obtenus.



126
Soit pour viter des cots de transport et/ou distribution (zones en bout de rseau ou zones rurales) et/ou de
production (zones isoles), soit dans le cas d'une entreprise locale (par ex. municipale) qui serait la fois distri-
buteur et fournisseur.
Annexe A.2.1 Contextes et approches des activits de MDE en Europe
31
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Logique d'obligation de moyens

Deux cas de figure sont distinguer pour la logique d'obligation de moyens. Soit l'obligation
est directe (cas du Royaume-Uni de 1994 2002), i.e. le gouvernement ou le rgulateur
contraint des acteurs dits obligs, le plus souvent les fournisseurs et/ou distributeurs d'nergie,
utiliser une partie de leurs revenus (le plus souvent proportionnelle leurs ventes) pour r-
aliser ou faire raliser des actions d'efficacit nergtique. Soit l'obligation est indirecte (cas
du Danemark), i.e. le gouvernement ou le rgulateur instaure un prlvement obligatoire sur
les ventes d'nergie (le plus souvent par une taxe) qui alimente un fonds qui finance des pro-
grammes d'efficacit nergtique qui peuvent tre raliss par divers organismes.

Dans ce cas, l'valuation doit rpondre deux objectifs :
- d'une part, que l'organisme en charge de faire appliquer l'obligation puisse justifier de la
lgitimit de cette obligation, i.e. des rsultats obtenus
- d'autre part, que les organismes ralisant les programmes rendent compte de comment ils
ont utilis les moyens mis en uvre

Le travail d'valuation est donc ici rparti entre ces deux catgories d'acteurs. De plus, le sys-
tme d'obligation implique la mise en place d'un dispositif pour enregistrer les actions rali-
ses. Ainsi ces expriences sont plus largement documentes et il est plus facile d'valuer
leur efficacit.

Les valuations peuvent prendre diverses formes avec par exemple une combinaison de va-
leurs forfaitaires ex-ante des conomies d'nergie unitaires et de contrle ex-post de la bonne
ralisation des actions, ou un audit nergtique pour identifier un potentiel ensuite valid ou
non par enqute selon que les recommandations ont t mises en uvre ou pas.

Le constat important est que, pour que la logique d'obligation de moyens soit applique effi-
cacement, il faut qu'elle soit accompagne d'un dispositif d'enregistrement systmatique
des actions avec au moins un contrle ex-post minimum (par ex. sous la forme de pices
justificatives joindre).

Ce qui permet d'une part de palier au manque de centralisation des donnes regrett par
Irrek et Thomas, et d'autre part, de disposer d'une premire base partir de laquelle peuvent
tre ralises des valuations plus pousses, lorsque les acteurs en ressentent le besoin (par ex.
pour vrifier la pertinence de valeurs dfinies ex-ante).


Logique d'obligation de rsultats

La logique d'obligation de rsultats est proche de celle d'obligation de moyens. Mais au lieu
que la contrainte porte sur les moyens mis en uvre, elle dfinit des objectifs atteindre.
L'avantage est que les obligs ont plus de liberts pour raliser ou faire raliser les actions, et
qu'ils peuvent rechercher les manires les plus rentables et/ou stratgiques de remplir leurs
obligations. L'inconvnient est que ce type d'obligation est plus difficile mettre en uvre
car il ncessite d'une part de dfinir des rgles claires et acceptes par tous les acteurs concer-
ns pour quantifier puis valider ou certifier les rsultats des actions ralises, et d'autre part de
trouver un juste niveau d'obligations : ni trop bas (contrainte insuffisante qui mne moins
d'actions ralises que dans une logique de moyens), ni trop haut (contrainte trop forte que les
obligs refusent tous de remplir, et qui rend difficile l'application des pnalits prvues).
Annexe A.2.1 Contextes et approches des activits de MDE en Europe
32
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006

Pour tre efficace, ce systme doit donc tre dfini en concertation avec les acteurs concerns.
Ce qui est aussi un moyen d'impliquer plus fortement les obligs (et les autres acteurs qui
peuvent faire valider des actions) dans les processus d'valuation. En effet, chacun cherche
alors dfendre ses intrts, et doit donc dvelopper un argumentaire fond.

C'est pourquoi les systmes d'obligation de rsultats ont pu tre mis en place plus facilement
dans des pays ayant dj acquis une exprience par un prcdent systme d'obligation de
moyens (exemple du Royaume-Uni o le niveau d'obligation de rsultats pour l'EEC a pu tre
dfini partir de l'exprience de l'obligation de moyens d'EESoP, qui avait en outre permis de
constituer un dispositif d'enregistrement et de dbuter la concertation avec les acteurs).

En ce qui concerne l'valuation, le dispositif global de validation et/ou certification des rsul-
tats est proche de celui d'une obligation de moyens, avec les mmes formes d'valuation
(combinaison ex-ante/ex-post, etc.). Mais la composante ex-post est souvent plus importante,
et surtout, le systme incite de fait les obligs raliser leurs propres valuations avec
pour objectif de rechercher la meilleure rentabilit, aussi bien en termes de type d'action
choisir, que de manire de la raliser.

De plus, un tel systme implique la transparence des mthodes utilises pour quantifier les
rsultats, et leur assure ainsi une visibilit. Ce qui permet d'obtenir un consensus entre les
acteurs concerns sur les rsultats obtenus, ce qui en renforce la validit auprs des
consommateurs finals (particuliers, entreprises, collectivits locales) qui supportent a priori
le cot du systme du fait du probable ajustement des tarifs par les obligs en fonction des
dpenses qu'ils auront engages.


33
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Annexe A.2.2 Les principales tudes l'chelle de l'Union Europenne


Nous proposons ici un aperu des principales tudes ralises l'chelle de l'Union Euro-
penne sur les questions d'valuation des activits de MDE. Compte tenu du nombre de pro-
jets raliss ayant un lien avec l'valuation
127
, nous ne pouvons en donner une analyse exhaus-
tive. Toutefois nous avons recherch faire ressortir les principales approches ainsi que les
travaux de recherche les plus importants.

Par ailleurs, nous n'abordons ici que les travaux visant valuer les rsultats obtenus (ex-
post). Nous ne considrons pas ceux cherchant identifier et/ou estimer des potentiels d'effi-
cacit nergtique (ex-ante) qui sortent du champ d'tude de notre thse.

Les sources d'informations les plus intressantes utilises pour cette partie sont la base de
donnes IntelEBase
128
(pour les rapports des programmes SAVE) et les actes des confrences
ECEEE Summer Study, o se runissent la majorit des experts dans le domaine, et qui per-
mettent notamment de disposer de l'analyse des tudes directement par ceux qui les ont rali-
ses.

Nous identifions d'abord trois approches principales qui ressortent des informations trouves.
Puis nous analysons les principales tudes pour lesquelles nous avons pu rcupres suffi-
samment de dtails. Nous avons choisi de le faire de manire chronologique, comme pour
l'approche amricaine, pour mieux faire ressortir la progression des problmatiques et des
rflexions sur l'valuation des activits de MDE.


A.2.2.1 Trois approches principales : le cas par cas, le suivi top-down et le bottom-up global


Au travers des informations trouves se dgagent trois approches principales : le cas par cas,
le suivi top-down et le bottom-up global.


Le cas par cas

Le cas par cas correspond aux projets qui concernent une cible particulire (soit un usage de
l'nergie, soit un secteur), et dans lesquels l'valuation est aborde mais n'est pas forcment
une composante centrale. Ce sont les projets les plus nombreux. Nous ne pouvons les dtailler
tous ici. De plus ces approches sont en gnral trop spcifiques. Nous ne citons donc ci-
dessous qu'un exemple (valuation des programmes de promotion des chaudires condensa-
tion), qui est le plus intressant par rapport notre problmatique. Toutefois, ces tudes res-
tent une source d'expriences trs utile pour une recherche d'informations plus cible sur
l'valuation d'un type d'opration donn.


Le suivi top-down

127
110 rsultats sont trouvs par IntellEBase parmi les programmes SAVE depuis 1996 correspondant au type
Assessment and studies, et de nombreux autres programmes non enregistrs dans cette catgorie avaient ga-
lement une composante valuation.
128
cf. <http://europa.eu.int/comm/energy/iebase/index.cfm>
Annexe A.2.2 Les principales tudes l'chelle de l'Union Europenne
34
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006

Le top-down correspond l'approche dveloppe dans le cadre du programme ODYSSEE
129
,
associ depuis 2001 au programme MURE
130
. Nous citons ici cette approche car elle est un
courant important de l'valuation de l'efficacit nergtique en Europe. Mais nous ne la
dtaillons pas car elle est hors du champ de notre thse qui se concentre sur l'valuation bot-
tom-up des actions, qui est l'autre courant dominant.

ODYSSEE a permis le dveloppement d'indicateurs d'efficacit nergtique
131
(indicateurs
ODEX) aliments par une base de donnes de dterminants des consommations d'nergie d-
taills par usages finals et sous-secteurs. MURE est une base de donnes des programmes
d'URE (Utilisation Rationnelle de l'Energie) laquelle s'est ajout un outil de simulation ex-
ante pour estimer des potentiels d'conomies d'nergie.

L'approche top-down consiste combiner ces deux outils :
- d'une part les indicateurs ODEX permettent de suivre les volutions des consommations
spcifiques d'nergie (en prenant en compte les effets de structure et d'activit)
- d'autre part une modlisation des actions d'efficacit nergtique cherche faire le lien
entre les volutions observes et les actions ralises

C'est donc bien une approche descendante, puisqu'elle part d'abord de l'observation des volu-
tions un niveau agrg, avant de rechercher les explications des niveaux plus dsagr-
gs
132
.

L'avantage de l'approche top-down est qu'elle permet de rendre compte des volutions globa-
les des consommations d'nergie, en tenant compte des effets de structure (par ex. transfert
d'activit de l'industrie vers le tertiaire) et d'activits (par ex. croissance conomique).

Son inconvnient principal est qu'elle n'est pas explicative. Elle permet de suivre les volu-
tions de consommation, mais sans pouvoir faire le lien avec les politiques menes. Un projet
est en cours
133
pour tudier comment combiner le dernier rsultat de cette approche (l'indica-
teur d'efficacit nergtique ODEX [Bosseboeuf 2005]) avec une amlioration de la base de
donnes MURE (pour y inclure les rsultats ex-post des programmes). Le but de ce projet est
d'amliorer cette approche en ce qui concerne l'explication des volutions observes, notam-
ment pour valuer les programmes engags.

Un autre de ces inconvnients est que pour passer du suivi des consommations la dtermina-
tion d'conomies d'nergie, elle doit avoir recours la dfinition d'un scnario de rfrence
qui par dfinition reste hypothtique.

129
projet amorc en 1993, coordonn par Didier Bosseboeuf de l'ADEME et Bruno Lapillonne d'Enerdata, cf.
<http://www.ODYSSEE-indicators.org/>
130
projet MURE (Mesures dUtilisation Rationnelle de lEnergie) coordonn par Wolfgang Eichhammer, du
FhG-ISI (Fraunhofer Institute for Systems and Innovation Research de Karlsruhe),
cf. <http://www.isis-it.com/mure/> et <http://www.mure2.com>
131
Les tenants de cette approche les qualifient d'indicateurs "bottom-up agrgs" dans le sens o ils sont cons-
truits en agrgeant des donnes dtailles au niveau de sous-secteurs ou d'usages finales. La mthode est donc
ascendante (bottom-up) pour le calcul des indicateurs. Mais elle est descendante (top-down) quant l'analyse et
l'valuation finale, puisqu'elle caractrise d'abord une volution globale (top), puis en cherche les explications
parmi les mesures et programmes mis en uvre (down). C'est donc cette terminologie que nous gardons ici.
132
L'annexe IV (sur la mesure et la vrification des conomies d'nergie) de la Directive EESE fait aussi rf-
rence ODYSSEE comme une approche descendante.
133
Le projet "Evaluation and Monitoring of Energy Efficiency in the New EU Member Countries and the EU-
25", cf. http://ec.europa.eu/energy/intelligent/projects/doc/factsheets/eee_nmc.pdf
Annexe A.2.2 Les principales tudes l'chelle de l'Union Europenne
35
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006



Le bottom-up global

La dernire approche que nous avons identifie, "bottom-up global", correspond aux travaux
pour dfinir une mthodologie d'valuation globale (pour l'ensemble des programmes de
MDE) et commune tous les Etats-membres. Ces travaux sont pour la plupart lis aux tu-
des qui ont accompagn l'laboration de la proposition de Directive (en 2003) puis la Direc-
tive EESE. Les principaux travaux de recherche rentrant dans cette catgorie sont :
- European B/C Analysis methodology a guidebook for B/C evaluation of DSM and
Energy Efficiency Services Programmes coordonn par la firme danoise de consultants
SRCI (Synergic Resource Corporation International A/S) de 1994 1996 [Johansen 1995]
- Enhanced and stimulated evaluation of energy efficiency projects
134
coordonn par
l'agence finlandais Motiva de 1996 1999
- A European Ex-post Evaluation Guidebook for DSM and EE-Services coordonn par
SRCI de 1997 2001 [SRCI 2001]
- AID-EE (Active Implementation of the proposed Directive on Energy Efficiency) coor-
donn par la firme nerlandaise de consultants Ecofys de 2005 2007 [Joosen 2005b]
D'autres projets sont galement en cours ou viennent d'tre proposs la Commission et sont
abords dans la section A.2.2.6.

Enfin, l'tude Eureco
135
n'entre pas dans les trois catgories dfinies ci-dessus mais est aussi
signaler. Ce fut une campagne de mesures ralise dans 400 logements de 5 pays, chaque lo-
gement tant suivi pendant un mois [ENERTECH 2002b]. Elle avait pour objectif d'estimer
ex-ante des potentiels d'conomies d'nergie. Mais ce type de campagne de mesures est aussi
ncessaire pour disposer de donnes de terrain sur les consommations d'nergie, qui peuvent
servir dans le cadre d'valuations ex-post.


A.2.2.2 Les dbuts d'une approche globale europenne de l'valuation bottom-up des activits
de MDE


European B/C Analysis methodology a guidebook for B/C evaluation of DSM and Energy
Efficiency Services Programmes coordonn par SRCI de 1994 1996 est la premire tude
vocation europenne dans l'optique de dfinir une mthodologie globale d'valuation de
programmes (approche bottom-up).


Adaptation de l'exprience amricaine de l'analyse
cots/bnfices

Elle part de l'analyse des expriences amricaines, et notamment du manuel californien
[CPUC 1987]. Cette premire approche est donc oriente sur l'analyse cots/bnfices des
programmes. Le premier constat des auteurs est alors qu'il n'est pas possible de dfinir une
mthodologie unique d'analyse cots/bnfices qui puisse tre applique dans les Etats-
membres, en raison des diffrences importantes de contexte national du secteur de l'nergie

134
cf. <http://europa.eu.int/comm/energy/iebase/moreinformations.cfm ?id=1910&freetext=>
135
coordonn par Olivier Sidler du cabinet franais de consultants ENERTECH de 1998 2001
Annexe A.2.2 Les principales tudes l'chelle de l'Union Europenne
36
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
[Johansen 1995 p.1]. De fait, les mthodes amricaines ne peuvent donc pas tre directe-
ment transcrites pour l'Europe. De plus, les auteurs soulignent que ces diffrences sont d'au-
tant plus prpondrantes que s'amorce alors en Europe le processus d'ouverture des marchs
de l'nergie, et qu' cette priode des incertitudes fortes demeurent sur les changements qui
allaient intervenir dans les structures des marchs.

Ainsi la premire phase de l'tude a t consacre l'analyse du contexte dans lequel sont
raliss les programmes d'EE-DSM. Elle fait ressortir quatre points cls dont la caractrisa-
tion (tape 1 de la mthodologie propose) permet ensuite d'identifier et de spcifier les im-
pacts (cots et bnfices) valuer (tape 2). Les auteurs soulignent de plus que l'valuation
doit se concentrer sur les impacts additionnels (i.e. qui n'auraient pas eu lieu sans le pro-
gramme).


Caractriser le contexte et spcifier les impacts pour
mieux les valuer

La seconde phase a consist dfinir les mthodes de calculs appliquer pour concrtiser
l'valuation (tape 3). Cette mthodologie en trois tapes est rsume par le schma suivant :


Source : d'aprs [Johansen 1995 p.4]
Figure 15 - mthodologie d'analyse cots/bnfices

Cette mthodologie contient aussi deux outils intressants (glossaire d'impacts et matrice
d'valuation) rajouts ce schma dans [SRCI 2001, annexe B].

Le glossaire liste par famille les impacts qui peuvent intervenir, et dtaillent pour chacun
d'eux sa dfinition, sa mtrique (qualitatif, quantitatif en unit spcifique ou montaris), les
moyens de mesure envisags, comment il doit tre inclus dans l'analyse cots/bnfices fi-
1) caractriser le
contexte
O ?
Structures des utilits,
du march et de sa
rgulation
Qui ?
Rle du gouverne-
ment, des utilits, et
des tierces parties
Pourquoi ?
Objectifs, motivations
Comment ?
Mthode de ralisation
2) spcifier les
impacts valuer
Impacts groups
en 5 familles :
A) impacts pour
les clients finals
B) impacts pour
les utilits
C) cots associs
au programme
D) impacts macro
(conomiques et envi-
ronnementaux)
E) autres impacts
3) valuer (analyse
cots/bnfices)
Indicateur global :

(cots)
) (bnfices

Autres indicateurs
(qualitatifs)
P
e
r
s
p
e
c
t
i
v
e
s






e
t


S
i
t
u
a
t
i
o
n
s

M

t
r
i
q
u
e
s


e
t


M
o
y
e
n
s

d
e

m
e
s
u
r
e

glossaire
d'impacts
matrice
d'valuation
Annexe A.2.2 Les principales tudes l'chelle de l'Union Europenne
37
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
nale, les possibilits d'interactions avec d'autres impacts, et des conseils sur l'interprtation
des rsultats. De plus, la mthodologie dfinit pour quelles perspectives (i.e. point de vue
d'acteur) la prise en compte de l'impact est pertinente ( l'image des diffrents tests amri-
cains, cf. Tableau 1).

La matrice consiste en un tableau pour croiser les diffrentes familles d'impacts avec les diff-
rentes perspectives possibles :

Perspective Cots Bnfices Ratio B/C Autres impacts
Clients finals
GRD
136

Fournisseurs
Gouvernement
Socit
Source : [SRCI 2001, annexe B, p.B-48]
Tableau 19 - exemple d'une matrice type d'analyse cots/bnfices
L'valuation consiste alors fournir pour chaque case les impacts valuer, puis les informa-
tions correspondantes collecter, et enfin les rsultats obtenus.


Une mise en uvre lourde et des rsultats compliqus
analyser

Un exemple d'valuation ralise en suivant cette mthodologie est prsent dans [Johansen
1995 pp.7-15]. Il en ressort que cette mthodologie est assez lourde appliquer si toutes les
perspectives possibles sont traites. Les analyses et les interprtations finales des rsultats
s'avrent complexes. Et la fiabilit de ces analyses repose de fait sur la qualit des donnes
rcupres et sur la pertinence des hypothses faites, deux points pour lesquels la mtho-
dologie n'apporte pas de relle solution.

L'exemple donn montre de plus les limites du ratio B/C qui ne permet pas lui seul de ren-
dre compte de la rentabilit ou de l'utilit d'un programme. Le contexte et les objectifs doi-
vent tre bien compris et dfinis avant d'essayer de spcifier quels sont les calculs rali-
ser. Sans cela, l'analyse B/C peut facilement ne plus tre pertinente, tre coteuse en res-
sources, et donner des rsultats d'une valeur limite [Johansen 1995 p.15].

Au final, l'approche systmatique propose correspond dfinir une quation globale dans
laquelle figurent tous les impacts valuer, puis dtailler le calcul ou la qualification de
chaque impact. Elle rpond certes un souci d'exhaustivit, mais se rvle complexe met-
tre en uvre. Le dcoupage pose par exemple le problme des interactions possibles entre les
diffrents impacts. De plus l'valuateur se retrouve alors avec une quantit importante d'in-
formations analyser. Et la solution de tous les compiler sous la forme d'un ratio B/C se mon-
tre insatisfaisante. L'application de cette mthodologie est donc rserve des experts dispo-
sants de moyens suffisants.


Principaux enseignements

136
GRD : Gestionnaire de Rseau de Distribution
Annexe A.2.2 Les principales tudes l'chelle de l'Union Europenne
38
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006

Les principales conclusions retenir de cette tude sont :
- l'importance de l'analyse du contexte et des objectifs du programme valu
- la ncessit de bien dfinir les perspectives et les objectifs de l'valuation pour choisir
les impacts les plus pertinents valuer
- mieux vaut consacrer plus de moyens valuer une liste limite d'impacts bien choi-
sis, plutt que de chercher tout valuer
- la prise en compte des impacts qualitatifs peut se rvler dterminante selon la
perspective adopte, et notamment pour les dcideurs


A.2.2.3 Une approche dvaluation pragmatique par type de programme, partir des
pratiques existantes


Les travaux regroups au sein du projet Enhanced and stimulated evaluation of energy effi-
ciency projects (1996-1999) se sont drouls en trois phases : (1) tat de l'art, (2) dfinition
de trois mthodes d'valuation adapts trois grands types de programmes (transformation de
march, efficacit nergtique dans lindustrie et sensibilisation), et (3) test de ces mtho-
des
137
.


Evaluer les transformations de march : mieux
comprendre les volutions observes

La partie sur les programmes de transformation de march a t traite par NUTEK et
l'Universit de Lund
138
. Le choix d'tudier ce type de programme est motiv par le constat tir
de la littrature qu'il ncessite de nouvelles mthodes d'valuation [Neij 1999 p.2]. La m-
thode propose structure l'valuation autour de trois points :
- l'analyse de la causalit entre les actions menes et les effets observs
- le suivi de donnes repres pour contrler les changements en termes de niveau de per-
formance des produits ou services sur le march
- la mesure de la pntration du produit ou service sur le march

L'analyse de la causalit ncessite la ralisation de deux enqutes (avant et aprs) pour tester
les trois hypothses de corrlation suivantes [Suvilehto 1997 p.2] :
1) les actions menes augmentent la connaissance des clients finals sur le produit promu
2) cette meilleure connaissance rend positive l'attitude des clients finals envers ce produit
3) cette attitude positive induit une dcision d'achat en faveur du nouveau produit

Cette analyse permet d'obtenir des informations la fois quantitatives (mesure des change-
ments) et qualitatives (raisons de ces changements) qui sont trs utiles pour amliorer les
programmes. Elle permet en particulier d'tudier les raisons "non conomiquement ra-

137
Il n'a malheureusement pas t possible de rcuprer les rapports de ce projet, mais certains de ces rsultats
ont t prsents aux ECEEE Summer Study de 1997 et 1999, et les principales conclusions sont dcrites dans
IntelEBase, cf. <http://europa.eu.int/comm/energy/iebase/moreinformations.cfm ?id=1910&freetext=>
138
NUTEK est le Conseil Sudois pour le Dveloppement Technique et Industriel. Il comprend un Dpartement
de l'Efficacit Energtique, quivalent sudois de l'ADEME. NUTEK s'est associ pour cette tude au Dparte-
ment des Etudes des Systmes Energtiques et Environnementaux de l'Universit de Lund
(cf. <http://www.miljo.lth.se/engelska/eng_index.asp>)
Annexe A.2.2 Les principales tudes l'chelle de l'Union Europenne
39
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
tionnelles" (par ex. souvent l'nergie n'est pas le facteur de dcision principal), qui sont oc-
cultes dans les mthodes classiques de type LCP. Mais la ralisation des enqutes est trs
coteuse.

L'analyse de la logique des actions menes doit permettre d'identifier les principaux effets
attendus, et de dfinir les indicateurs repres suivre. Le but est ici d'utiliser des donnes
qui peuvent tre facilement rcupres auprs des partenaires et/ou participants du programme
pour contrler la progression du niveau de performance des produits au niveau de leur
dveloppement, puis de leur distribution et enfin de leur vente [Suvilehto 1997 p.4].

Enfin la mesure de la pntration des produits sur le march est ralise par une tude de s-
ries temporelles principalement de donnes de vente. La pertinence de cette tude dpend de
la bonne segmentation des donnes utilises (par catgorie de produit, de revendeur et de
client). Les auteurs signalent de plus la difficult de rcuprer les donnes souhaites, et le
besoin d'entretenir des relations durables avec les producteurs et/ou revendeurs. Cette partie
de l'valuation se rapproche de mthodes de marketing [Suvilehto 1997 p.6].


Evaluer les actions dans l'industrie : tenir compte des
spcificits des entreprises

La partie sur l'efficacit nergtique dans l'industrie a t traite par AKF
139
. La mthode
dveloppe est base sur une amlioration des modles conomtriques utiliss dans la littra-
ture. L'analyse des modles existants fait ressortir le fort risque de biais, notamment quand
les modles se concentrent sur l'analyse d'un indicateur de consommation spcifique (par ex.
kWh/unit de valeur ajout ou kWh/tonne produite). Les auteurs proposent d'une part d'utili-
ser des donnes suffisamment dsagrges (par sous-secteur industriel), et d'autre part d'in-
clure dans les modles des variables permettant de tenir compte des spcificits des entre-
prises [Bjorner 1999 p.3].

L'tude de cas ralise sur un panel d'entreprises danoises pour valuer un programme d'ac-
cords volontaires montre que cette mthode ncessite de disposer d'une quantit importante
de donnes dont la fiabilit est dterminante pour assurer celle des rsultats de l'valuation.
La validit des modles dpend aussi de la longueur des sries temporelles disponibles. Les
modles proposs ne peuvent donc tre utiliss que si des systmes consquents de collecte
pour les donnes ncessaires existaient avant la ralisation du programme valu.


Evaluer les actions de sensibilisation : difficile mettre
en pratique

La partie sur les programmes de sensibilisation a t traite par Motiva. L'approche dve-
loppe est une matrice qui croise les diffrents types de programme de sensibilisation avec les
diffrentes mthodes d'valuation possibles. Pour chaque type de programme ont t discutes
quelles sont les mthodes applicables, avec quelle fiabilit, quelles sources d'erreur et quelles
techniques d'chantillonnage. Il ne semble pas que cette mthodologie ait pu tre teste lors
de la phase 3 de l'tude, et il n'a malheureusement pas t possible d'obtenir plus d'informa-

139
AKF est un institut de recherche indpendant danois financ par des fonds publics. Ses recherches portent sur
des sujets en lien avec le secteur et les politiques publiques, en particulier au niveau local.
cf. <http://www.akf.dk>
Annexe A.2.2 Les principales tudes l'chelle de l'Union Europenne
40
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
tions sur cette partie.


Aller vers des valuations plus "lgres"

Le rapport final soulve la question des moyens disponibles pour lvaluation. Dans leurs
conclusions, les auteurs identifient le manque de moyens comme une des principales barrires
l'valuation, avec le manque de connaissances mthodologiques. Cest pourquoi ils sugg-
rent pour de futures tudes de dvelopper des mthodes dvaluation plus simples, lgres,
qui permettent de dgager les facteurs de succs dun programme sans avoir recours des
tudes dtailles, trop longues et coteuses. Ils indiquent enfin que des travaux sont ncessai-
res pour savoir comment le type de donnes et les hypothses utiliss peuvent influencer les
rsultats obtenus, et pour dfinir des guides pour assurer la fiabilit des valuations lg-
res .


A.2.2.4 Un exemple d'approche cas par cas avec une mthodologie structure


L'valuation des programmes de promotion des chaudires condensation (ralis de
1996 1998) prsente une mthodologie intressante car structure en trois points princi-
paux [Haug 1998 p.9] :
1) "market evaluation" : valuation des effets des programmes sur le march (i.e. des rsul-
tats intermdiaires attendus)
2) "impact evaluation" : valuation des impacts sur la demande en nergie et sur les mis-
sions associes (i.e. des rsultats finals attendus)
3) "process evaluation" : analyse de la logique d'intervention (i.e. comment serait-il possi-
ble d'amliorer les programmes ?)

Par ailleurs, les auteurs constatent que les programmes ont rarement des objectifs quantita-
tifs, et donc qu'il est difficile d'en juger l'efficacit par une comparaison objectifs ini-
tiaux/rsultats finals. Leur solution est alors de dfinir trois indicateurs de succs pour com-
parer les programmes entre eux : taux de participation, effet d'aubaine et cots du kWh ou de
la tCO2 vits.

Pour renseigner ces indicateurs, des moyens d'valuation consquents ont t mis en uvre,
avec selon les pays :
- des enqutes auprs des participants et des non-participants aux programmes
- des entretiens avec les experts du domaine et avec des responsables des utilits concernes
- des modles conomtriques

Des mthodes de calculs permettaient ensuite de compiler les donnes obtenues pour calculer
les impacts en termes d'conomies d'nergie et d'missions vites.

Par ailleurs, un aspect important de cette tude est l'analyse pralable des facteurs pouvant
influencer le succs des programmes valus, que les auteurs regroupent en deux catgo-
ries : les facteurs contextuels et les facteurs lis la conception du programme.
Annexe A.2.2 Les principales tudes l'chelle de l'Union Europenne
41
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006

Source : [Fig.2-1 de Haug 1998 p.4]
Figure 16 - facteurs de succs d'un programme

Au final, cette tude reprsente un travail d'valuation trs complet, qui a mis en applica-
tion les principes mthodologiques disponibles l'poque. De fait ses rsultats sont cons-
quents, et outre une valuation trs dtaille des programmes tudis, le rapport propose aussi
en annexe des conseils cls pour assurer l'efficacit de la conception et de la ralisation pour
de futures programmes (aboutissement de la dimension formative de l'valuation).


A.2.2.5 Un guide de rfrence pour l'organisation et la planification d'valuations


Le rapport A European Ex-post Evaluation Guidebook for DSM and EE-Services est
l'aboutissement de travaux coordonns par SRCI et organiss en deux phases. De 1997
1999, une mthodologie globale bottom-up d'valuation ex-post a t dfinie partir de
l'tude des pratiques existantes. Puis de 1999 2001, cette mthodologie a t teste par neuf
organismes (reprsentant huit pays europens) sur leurs propres programmes.

Le rsultat est un guide de rfrence reconnu internationalement
140
, en quatre documents :
- le rapport principal qui dcrit la mthodologie propose [SRCI 2001]
- l'annexe A qui prsente les neuf tudes de cas ralises
- l'annexe B qui fournit une bibliographie dtaille avec les sources de rfrence sur Inter-

140
Ce guide est par exemple cit dans l'annexe IV de la Directive EESE, dans la liste des ouvrages de rfrence
du guide utilis en Californie [TecMarket Works 2004 pp.28] et du rcent guide de l'AIE [Vreuls 2005a pp.21].
Il a aussi t appliqu en Australie [Banks 2002 pp.7-9].

Succs du
programme
Facteurs lis
la conception
du programme
f
a
c
i
l
i
t


d
e

p
a
r
t
i
c
i
p
a
t
i
o
n

p
o
u
r

l
e

p
u
b
l
i
c

v
i
s


marketing
hauteur de
la remise
Facteurs
contextuels
image
technologie
performance
implication
des acteurs
march
de l'nergie
prix
et cots
Annexe A.2.2 Les principales tudes l'chelle de l'Union Europenne
42
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
net, les confrences cls, et un rsum des documents incontournables de la littrature
- l'annexe C qui dcrit le format standard dfini pour rapporter les valuations ralises

L'tude part d'un double constat : un manque d'valuation des programmes d'EE-DSM (pour-
tant nombreux), alors que les besoins en valuation dans ce domaine sont croissants (quanti-
fier les rductions d'missions, comparer la rentabilit des actions, etc.). L'objectif est donc de
proposer un cadre mthodologique de base pour que les valuations augmentent en nombre
et en qualit, afin de mieux justifier (actions passes) et dfinir (actions futures) les program-
mes d'EE-DSM.

Les auteurs reconnaissent qu'valuer a un cot, mais ils argumentent pour le justifier en
confrontant les risques de ne pas valuer (gaspillage de moyens, inefficacit, polmiques sur
les rsultats, etc.) et les avantages d'valuer (moyens adapts, rsultats quantifis, etc.).


L'importance de la planification de l'valuation

Le guide dcrit ensuite un processus pour bien prparer et assurer l'efficacit de l'valua-
tion.

Tout d'abord, il s'agit de bien dfinir les champs et les objectifs de l'valuation. La section
2.4 propose une liste de questions d'valuation en trois catgories (questions sur les impacts,
sur la ralisation et sur le cahier des charges du programme). La section 2.5 rappelle qu'il ne
faut pas seulement quantifier les rsultats mais qu'il faut aussi analyser comment ils ont t
obtenu.

Le chapitre trois prsente une analyse par tapes pour prciser les besoins en valuation,
et ainsi guider le choix des mthodes appropries afin de pouvoir ensuite planifier l'valua-
tion :


Source : [Birr-Pedersen 2001 p.117]
Figure 17 - tapes pour le dveloppement d'une stratgie d'valuation

Aprs ces analyses pour clarifier le cadre d'valuation, il est alors possible de suivre le pro-
cessus de planification dcrit dans la section 3.2 :
- dsigner un responsable de ltude au sein de l'organisme commanditaire de l'valuation
- dfinir les buts de l'valuation, les questions poses, et l'utilisation attendue
- rechercher les retours d'exprience pour des cas similaires
- organiser l'valuation (choix des valuateurs, concertation avec les acteurs concerns,
choix des mthodes employer, cahier des charges)
- dfinir le niveau de dtail souhait
Objectifs principaux du
programme (section 3.3)
Points cls d'incertitudes
(section 3.4)
Maturit du programme
(section 3.5)
Niveau d'effort d'va-
luation (section 3.6)
Utilisations de l'va-
luation (section 3.7)
Cibles et budget de l'valua-
tion (section 3.8 et 3.9)
Annexe A.2.2 Les principales tudes l'chelle de l'Union Europenne
43
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
- raliser ltude, prsenter et utiliser les rsultats

Les auteurs soulignent l'importance de bien choisir les moyens mettre en uvre en fonction
des besoins en valuation afin d'optimiser les cots d'valuation [SRCI 2001 pp.18 et 38].
La principale recommandation ce sujet est de prvoir l'valuation au moment de la
conception du programme. S'il parat vident, ce conseil est peu mis en uvre et permet
pourtant d'assurer le succs de l'valuation en en minimisant les cots (notamment pour la
collecte de donnes).


Techniques et points cls de l'valuation

Le chapitre 4 fournit ensuite les lments pour dfinir la stratgie d'valuation des impacts
du programme. La section 4.1 aborde les moyens de collecte et les sources de donnes, en
distinguant les donnes primaires (propres au programme valu) et secondaires (prexis-
tantes et venant d'autres organismes). La section 4.2 dcrit succinctement les principales op-
tions pour dfinir la situation de rfrence (baseline), constituer l'chantillon d'tude, et les
trois catgories principales de modles de calculs (modles physiques ou engineering models,
modles statistiques ou conomtriques, et modles hybrides).

Le chapitre cinq fournit les lments pour se familiariser avec les concepts cls de l'valua-
tion des impacts :
- distinction entre rsultats bruts et nets (section 5.1)
- principaux facteurs d'ajustement (section 5.2) :
- effet d'aubaine (free-rider)
- effet d'entranement (spill-over)
- effet rebond
- effet de persistance

Pour ce qui est de l'valuation conomique des programmes, les auteurs renvoient [Johansen
1995].

Le guide se veut aussi concret. Outre les tudes de cas de l'annexe A, le chapitre 6 donne des
exemples de stratgie d'valuation pour six types de programmes identifis comme les plus
courants. Le type de programme correspond ici une combinaison de ses objectifs et/ou de
l'instrument principal d'intervention utilis.

Le chapitre 7 est le pendant du 4 pour l'analyse de la logique d'intervention et des effets sur
le march : techniques d'enqute, conception des questionnaires, interprtation des rsultats.

Enfin, le chapitre 8 ouvre les rflexions sur la prsentation et l'utilisation des rsultats.


Conclusions

Au final le guide est une rfrence trs utile, aussi bien pour les valuateurs que pour les
commanditaires d'valuations, pour rpondre la question : comment prparer une valua-
tion ? C'est aussi un document pdagogique qui permet de se forger une bonne culture
d'valuation au travers de l'explication des concepts mthodologiques illustrs par des exem-
ples concrets. Mais pour ce qui est de la ralisation de l'valuation en tant que telle, les l-
Annexe A.2.2 Les principales tudes l'chelle de l'Union Europenne
44
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
ments fournis restent succincts et les auteurs renvoient de fait aux comptences et l'expertise
des valuateurs. Enfin si les thmes des incertitudes, des cots d'valuation et de l'utilisation
des rsultats sont abords, ils n'ont pas pu tre approfondies dans le cadre de cette tude et des
questions demeurent.

Pour plus de dtails sur les rponses du guide aux problmatiques cls de l'valuation, se re-
porter l'Annexe A.3.1.


A.2.2.6 Une nouvelle vague de projets pour accompagner la Directive relative l'efficacit
nergtique


Depuis 2005, le programme IEE (Intelligent Energy-Europe) a ouvert une nouvelle catgorie
de projets dits transversaux
141
, dont ceux sur l'valuation. On y retrouve les deux grandes ap-
proches globales :
- le bottom-up (par ex. projets AID-EE et EuroWhiteCert) qui s'appuie sur l'valuation des
programmes pour valuer la politique globale d'efficacit nergtique partir des choix
d'intervention qui ont t faits
- le top-down (par ex. projets ODYSSEE-MURE et EEE-NMC) qui part du suivi d'indica-
teurs globaux
142
pour suivre les tendances des consommations d'nergie et les comparer
entre les pays, en cherchant a posteriori les explications des volutions observes en es-
sayant de distinguer les effets de structure, les effets d'activits et les effets des program-
mes engags

Ce sont les projets de l'approche bottom-up qui nous intressent dans le cadre de cette thse.
Leurs rsultats ne sont pas encore disponibles, puisqu'ils sont en cours. Mais un premier
rapport du projet AID-EE
143
a t publi sur l'valuation ex-post des instruments d'inter-
vention.


Systmatiser l'analyse de la logique d'intervention

Le projet AID-EE vise clairement fournir un support la mise en uvre de la nouvelle Di-
rective relative l'efficacit nergtique. Il est construit autour de deux objectifs principaux :
- identifier et expliquer les facteurs de succs/checs des politiques d'efficacit nergtique
- dissminer les connaissances acquises en termes d'application, suivi et valuation d'ins-
truments d'intervention aux acteurs cls (dcideurs, agences de l'nergie, compagnies
d'nergie)

Le premier rapport disponible a pour but de dfinir un guide afin d'assurer la cohrence des
travaux raliss par les diffrents participants au projet.


141
cf. <http://europa.eu.int/comm/energy/intelligent/projects/horizontal_en.htm>
142
Les tenants de cette approche les qualifient d'indicateurs "bottom-up agrgs" dans le sens o ils sont cons-
truits en agrgeant des donnes dtailles au niveau de sous-secteurs ou d'usages finales. La mthode est donc
ascendante (bottom-up) pour le calcul des indicateurs. Mais elle est descendante (top-down) quant l'analyse et
l'valuation finale, puisqu'elle caractrise d'abord une volution globale (top), puis en cherche les explications
parmi les mesures et programmes mis en uvre (down). C'est donc cette terminologie que nous gardons ici.
143
coordonn par Ecofys sur la priode 2005-2007
Annexe A.2.2 Les principales tudes l'chelle de l'Union Europenne
45
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Les auteurs rappellent d'abord le rle de la logique d'intervention et de l'valuation dans un
cycle thorique idal de mise en uvre de politiques :

Source : [Joosen 2005a p.3]
Figure 18 - cycle thorique idale d'une politique

Ils situent ensuite leur mthodologie par rapport aux enjeux de l'valuation. Elle se concentre
sur l'valuation du choix et de la mise en uvre des instruments d'intervention (par ex. obliga-
tion, incitation, sensibilisation; cf. sous-partie II.2.2). Le but est de palier au manque constat
de connaissances sur les facteurs de succs/checs
144
.

La mthodologie propose est base sur l'approche d'analyse de la logique d'intervention
(theory-based evaluation) (cf. Encadr 4 p.48), i.e. l'tude de comment les actions ralises
sont censes mener aux rsultats attendus. Cette approche n'est pas nouvelle, mais est pour
l'instant peu applique pour l'valuation de programmes d'EE-DSM [Joosen 2005a p.5].

Cette analyse consiste dcouper le processus du programme valu en tapes lmentaires
pour mieux faire ressortir les points cls et ce qui a bien fonctionn ou pas. Pour ce faire, les
auteurs proposent de suivre les tapes suivantes (section 3.2 du rapport) :
1) caractrisation de l'instrument d'intervention (objectifs, cibles, moyens utiliss, etc.)
2) retranscription de la logique d'intervention (explicite ou implicite) pour identifier les
relations causeimpact attendues
3) dfinition d'indicateurs pour suivre chaque relation causeimpact, pour valuer si les
changements observs sont bien lis aux actions ralises (causalit) et pour faire ressortir
les facteurs de succs/checs
4) construction d'un diagramme pour reprsenter graphiquement les liens entre les rela-
tions causeimpact, les indicateurs suivis, et les facteurs de succs/checs identifis
5) ralisation d'entretiens avec les acteurs concerns pour vrifier les hypothses utilises
6) collecte des informations pour renseigner les indicateurs, analyses des rsultats obtenus
et formulation des recommandations

Les auteurs soulignent en outre le problme pos par les interactions possibles entre diffrents
instruments d'intervention. Leur position pour viter les doubles comptes est d'attribuer les
conomies d'nergie l'instrument dit dcisif, i.e. celui dont rsultent directement les co-

144
<cf. http://www.aid-ee.org/aid_ee.htm>
Formulation de la
politique
Application de la
politique
Politique en prati-
que
Logique d'interven-
tion (explicite)
Modle oprationnel
(indicateurs)
Suivi/valuation
Possible reformula-
tion/rorganisation
des politiques
Annexe A.2.2 Les principales tudes l'chelle de l'Union Europenne
46
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
nomies d'nergie.

La mthodologie a dj t applique l'valuation des programmes dans le secteur du bti-
ment aux Pays-Bas [Harmelink 2005]. Cet exemple montre l'intrt d'une telle approche, qui
permet de mieux comprendre pourquoi et comment les rsultats observs ont t obtenus, la
fois pour identifier les facteurs de succs et pour mieux dtermine la part nette des rsultats.
Mais il en montre aussi les limites, puisque certaines analyses n'ont pas pu tre menes faute
de disposer des informations ncessaires. Les principaux inconvnients de cette mthodologie
sont donc qu'elle ncessite un effort important d'valuation, et qu'elle ne peut pas tre appli-
que a posteriori lorsque tout ou partie des informations ncessaires ne peuvent plus tre r-
cupres.



47
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Annexe A.2.3 LExemple du Danemark


Quatre exemples avaient t envisags : le Danemark, l'Allemagne, les Flandres, et le
Royaume-Uni. Ils correspondent des expriences de rfrence concernant la mise en place
de dispositifs dvaluation [Geller 2005 p.34, Irrek 2002 pp.66-71, Thomas 2005a pp.8-9].

Nous avons au final retenu le Danemark car c'est un exemple peu repris dans la littrature
(surtout en France), alors qu'il prsente les enseignements les plus intressants aux vues des
informations disponibles pour les quatre exemples envisags.

Pour des lments sur les trois autres exemples, nous conseillons de se reporter aux sources
suivantes :
- le rapport sur les programmes dEE-DSM dans les Etats de lUnion Europenne [Irrek
2002], qui fournit notamment de bonnes synthses sur les contextes nationaux (acteurs et
structure rglementaire), et prsentent certains des outils dvelopps au Danemark, en Al-
lemagne et au Royaume-Uni pour assurer le suivi et lvaluation des programmes dEE-
DSM
- le volume 2 du guide ralis pour lAIE sur lvaluation des programmes dEE-DSM
[Vreuls 2005b] qui prsente des fiches dtailles sur les dispositifs pour les programmes
dEE-DSM et leur valuation dans les huit pays participants ltude
- les actes des ECEEE Summer Study
145
, confrences qui constituent un lieu privilgi
pour les changes dexpriences dans ce domaine


A.2.3.1 Contexte global du secteur de llectricit du Danemark


Nous n'abordons ici que le contexte du secteur de l'lectricit, car c'est celui pour lequel les
dispositifs dactivits de MDE existent depuis le plus longtemps. Les sources utilises ici sont
principalement [Nybroe 2001] et [Vreuls 2005b pp.62-66], ainsi que le site de la DEA (Da-
nish Energy Authority, cf. <http://www.ens.dk>)

Deux lments sont dterminants pour comprendre le contexte des activits de MDE au Da-
nemark :
- les compagnies de distribution sont les acteurs du secteur ayant un contact privilgi
avec les consommateurs finals (elles assurent notamment la facturation), et pour cette rai-
son elles ont reu la charge des principales obligations en termes d'actions d'information
et de conseil des consommateurs finals
- ces compagnies ont t et sont toujours soumis un systme "ni profit, ni perte" pour la
rgulation de leurs tarifs, qui limite les conflits d'intrts entre vendre et faire conomi-
ser de l'nergie

Le schma ci-dessous prsente la structure du march de l'lectricit avant et aprs la loi sur
l'ouverture du march en 1999
146
:


145
cf.<http://www.eceee.org/library_links/proceedings/proceedings.lasso>
146
loi vot par le Parlement danois le 2 juin 1999 (Electriciy Supply Act)
Annexe A.2.3 LExemple du Danemark
48
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006

Source : partir de <http://www.ens.dk/sp.w23517.asp> et de [Nybroe 2001]
Figure 19 - structure du march danois de l'lectricit avant et aprs libralisation


Les acteurs

Les utilits ou compagnies de rseau sont publiques et appartiennent des collectivits loca-
les ou des coopratives de consommateurs. Elles sont plus de 80, et adhrent une structure
commune (ELFOR). Ce sont des entreprises non commerciales rgies par un systme de r-
gulation "ni profit, ni perte".

Les compagnies de production d'lectricit appartiennent pour la plupart aux compagnies
de rseau. Elles sont plus d'une dizaine. Celles de l'Est du Danemark sont regroupes au sein
d'ELKRAFT, celles de l'Ouest au sein d'ELSAM. Depuis 1999, leur activit est commerciale
et soumise concurrence.

Depuis 1999, l'activit de vente d'lectricit aux clients finals a t dissocie de celle de la
distribution. Elle est dsormais ouverte la concurrence et assure par des compagnies
commerciales (par ex. ngociants ou "trading companies")

L'ensemble du march est supervis par un rgulateur, autorit indpendante. Et les activits
des compagnies publiques sont coordonnes et contrles par la DEA (Danish Energy Autho-
rity), autorit sous la tutelle du gouvernement
147
.

S'ajoute enfin l'EST (Electricity Saving Trust), organisme indpendant cre par la DEA en
1996 pour utiliser les fonds perus par la taxe applique sur la vente d'lectricit
148
(Elspare-
fonden). Son Conseil d'Administration est constitu des principaux acteurs du secteur.


147
depuis 2005, la DEA est sous tutelle du Ministre de l'Energie et du Transport
148
taxe de 0,08 c/kWh sur la vente d'lectricit dans le secteur rsidentiel et le secteur public (soit environ 12
millions d'euros par an) [Vreuls 2005b pp.63]
Compagnies de
production
Utilits Compagnies de
rseau (publiques)
Compagnies de
production
Fournisseurs
production
transport
distribution
facturation
ventes
Tarifs rguls
L
o
i
s

d
u

m
a
r
c
h


Tarifs rguls
a
c
h

t
e
n
t

v
e
n
d
e
n
t

AVANT 1999 APRES 1999
Annexe A.2.3 LExemple du Danemark
49
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006

Le cadre rglementaire

La DEA a pour mission de dfinir les politiques nergtiques, et notamment les politiques
orientes sur la demande. Elle a ainsi la responsabilit des actions rglementaires (normes,
labels, taxes, etc.). Elle peut aussi mener des programmes nationaux d'EE-DSM (par ex. ac-
cords volontaires, subventions, sensibilisation dans les coles, R&D et "technology procure-
ment"
149
).

Pour les utilits ou compagnies de rseau :

- de 1992 2000 : obligation pour les utilits de proposer gratuitement des services d'in-
formation et de conseil leurs clients, tous secteurs confondus
150
.
- de 1995 2000 : dans le cadre de la loi sur l'IRP, les utilits doivent proposer des options
alternatives dactivits de MDE la DEA pour la prparation de plans d'action de long
terme d'optimisation du mix d'actions sur l'offre et sur la demande d'lectricit
- partir de 2000 : obligation maintenue par l'ESA (Energy Saving Act
151
) et prcise :
- les services offerts doivent couvrir trois catgories d'actions standard (informa-
tion gnrale des consommateurs, conseils individualiss aux mnages, et conseils
individualiss aux entreprises)
- structuration des actions en plans triennaux soumis individuellement par les com-
pagnies, mais coordonns en un seul plan global par la DEA
- obligation d'inclure des informations sur les factures (historique des consomma-
tions et comparaison avec la consommation moyenne pour la mme catgorie de
clients)

Les utilits peuvent rcuprer les dpenses engages pour les actions d'EE-DSM sur leurs
tarifs
152
. Dans le cas o elles ne remplissent pas leurs obligations, les utilits se voient adres-
ser un avis dfavorable de la DEA, puis le cas chant des pnalits financires.

Jusqu'en 2000, le contrle des activits d'EE-DSM des utilits tait assur par la DEA seule.
Depuis 2000, la DEA supervise et coordonne l'ensemble des actions des 82 compagnies de
rseau, mais le Rgulateur garde la responsabilit de la validation finale des plans daction et
de la rcupration des dpenses sur les tarifs.


L'EST gre l'utilisation de l'Esparefonden, avec pour mission de faire la promotion (dans les
secteurs rsidentiel et public) :
- de la substitution de l'lectricit par le gaz naturel ou les rseaux de chaleur pour les usa-
ges thermiques
- des appareils lectromnagers et HIFI performants
- de la prise en compte des consommations d'nergie dans les achats du secteur public


149
Le "procurement" correspond des programmes d'offres d'achats groups, le plus souvent l'initiative d'or-
ganismes publics, pour garantir aux fabricants d'quipements un dbouch assur s'ils dveloppent de nouveaux
quipements plus performants. L'objectif est d'encourager la R&D sur ces nouveaux quipements.
150
au moins 10% de leur nombre de clients ou un nombre de clients dont les consommations reprsentent au
moins 10% de leurs ventes totales d'lectricit
151
Ordre excutif n350 du 3 mai 2000
152
Pour exemple en 2002, les dpenses ralises dans le cadre des obligations se montaient 21 millions d'euros,
soit 0,06 c/kWh vendu
Annexe A.2.3 LExemple du Danemark
50
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
L'EST ralise directement ou passe des appels d'offre pour des programmes d'EE-DSM dans
ces domaines. Les dpenses ralises sont contrles par le Rgulateur avec l'aide de la DEA,
qui a par ailleurs la charge de coordonner les actions de l'EST avec ses propres actions et cel-
les des compagnies de rseau.

Enfin, en parallle l'ouverture la concurrence de la vente de l'lectricit, les fournisseurs
ont reu l'obligation de proposer leurs clients des services commerciaux d'EE-DSM
(article 3 de l'ESA). Par commercial, il est entendu que le service correspond un temps de
retour sur investissement considr comme normal dans les conditions du march, et que le
service est pay directement par le client qui en profite (par ex. solutions de tiers financement,
aide la gestion de l'nergie). Toutefois la contrainte sur les fournisseurs est moins prcise
que celle sur les compagnies de rseau, et elle est trs peu traite dans la littrature.

La Figure 20 ci-aprs rcapitule le cadre rglementaire pour les actions d'EE-DSM au Dane-
mark.

Il faut rajouter que l'ESA prvoyait aussi des conseils rgionaux que les collectivits locales
avaient la charge de constituer pour coordonner au niveau local les actions des compagnies de
rseau et des fournisseurs pour l'lectricit, le gaz et les rseaux de chaleur (l'ESA tend en
effet les dispositifs d'obligation aux secteurs du gaz et des rseaux de chaleur). Mais pour
l'instant, aucun retour n'est disponible sur l'activit relle de ces conseils.


Figure 20 - cadre rglementaire pour les actions d'EE-DSM au Danemark

Compagnies
de rseau
DEA
R

g
u
l
a
t
e
u
r


EST
Fournisseurs
Clients finals
Actions
d'incitation
Services
d'EE-DSM
Actions d'informa-
tion et de conseil
(rsidentiels ou
publiques)
Taxe (0,08
c/kWh)

R
e
v
e
r
s
e
n
t

l
a

t
a
x
e

Plans indivi-
duels
Plan global
Autres
actions
Rcupration
sur les tarifs
coordina-
tion
Annexe A.2.3 LExemple du Danemark
51
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006

A.2.3.2 La mise en place du dispositif de suivi et d'valuation


Le dispositif pour valuer les programmes d'EE-DSM s'est mis en place progressivement, au
fur et mesure de l'exprience acquise dans ce domaine. C'est pourquoi nous prsentons ici
les principales tapes qui ont men au dispositif actuel.


De 1990 1995, approche IRP semi qualitative

Les dbuts de la mise en place de l'valuation des programmes d'EE-DSM sont dcrits dans
[Brond 1993].

Dans les annes 1980, les actions menes restaient assez gnrales, taient peu structures, et
taient donc difficiles valuer. A la fin des annes 1980, les programmes ont commenc
tre plus cibls. Leur valuation en a t facilite et est devenue de plus en plus ncessaire du
fait de la volont d'appliquer une approche d'IRP.

Ainsi, l'objectif principal de dpart pour l'valuation tait de pouvoir comparer les alternatives
sur la demande avec celles sur l'offre.

De fait, le premier outil d'valuation prsent par Brond (1993) avait pour but d'aider aux
choix entre diffrentes alternatives d'actions de DSM. Il correspond un processus d'ana-
lyse multicritre. La mthode consiste donc dfinir un nombre limit de paramtres pour
valuer les diffrentes options, et choisir une pondration pour ces paramtres en fonction,
d'une part des priorits stratgiques, et d'autre part de la faisabilit de les valuer.

Chaque programme est ensuite valu en notant sur une chelle semi qualitative (par ex. de 1
5) chaque paramtre. Une note finale est alors calcule en tenant compte de la pondration
des paramtres.

Cette approche a t reprise d'expriences amricaines. Brond souligne qu'elle reste majori-
tairement qualitative, mais qu'elle est facile appliquer et rpond aux besoins d'aide la
dcision. Dans cette mthode, les rsultats sont le plus souvent valus partir d'indicateurs
intermdiaires (par ex. nombre d'appareils performants vendus) et de dires d'experts.


De 1995 1999, analyses cots/bnfices

Les premires obligations appliques ds 1992, puis la mise en uvre rglementaire de l'IRP
partir de 1995 renforcent les exigences en termes d'valuation, notamment concernant la
quantification des rsultats.

La mise en place depuis fin 1990 d'une base de donnes (ENIBASE) pour assurer le suivi des
actions de conseil aux entreprises et organismes publics permet de dj disposer d'une cer-
taine exprience [Sandholt 1995]. De mme, la gestion des programmes d'EE-DSM se pro-
fessionnalise. Selon Sandholt (1995), cette activit a cre en 1994 300 emplois quivalents
temps plein.

Annexe A.2.3 LExemple du Danemark
52
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Les acteurs des programmes d'EE-DSM (DEA, utilits, consultants indpendants, etc.) suivent
donc un processus d'apprentissage dans le but d'une amlioration continue de l'application
de la dmarche de l'IRP. Les plans daction sont rviss priodiquement (1995, 1997, 2000) et
chaque rvision vise profiter de l'exprience acquise pendant la priode prcdente. Concer-
nant les programmes, la dmarche est de dfinir des programmes standard aprs des phases de
test de trois ou quatre ans.

Le suivi et l'valuation des programmes jouent un rle cl dans ce processus. L'valuation en
particulier passe progressivement du semi qualitatif au quantitatif, ce qui permet au dispositif
d'enregistrement des programmes (comme ENIBASE) de collecter des donnes de plus en
plus dtailles et prcises. Ces donnes servent ensuite amliorer les futurs programmes et
les valuations et ainsi de suite.

Dans cette priode, les mthodes utilises taient guides par les expriences amricaines
d'analyses cots/bnfices, avec l'utilisation des diffrents tests prsents dans le Tableau 1.
Cette approche est reprise dans l'tude European B/C Analysis methodology a guidebook
for B/C evaluation of DSM and Energy Efficiency Services Programmes coordonne par
SRCI de 1994 1996 (cf. section A.2.2.2, de l'Annexe A.2.2) qui a fourni une mthodologie
trs dtaille pour la ralisation d'valuations de ce type, tout en en signalant les limites (cots
et dure, complexit de l'analyse des rsultats, fiabilit fonction de la qualit des donnes).

En parallle du dveloppement des mthodes d'valuation, la planification des activits de
MDE est facilite par SAVEx, outil cre en 1997 par ELFOR. L'outil fonctionne sur deux
niveaux d'utilisation :
- un niveau dcentralis, qui permet chaque utilit de prparer sa proposition de plans
daction en rentrant les caractristiques des programmes envisags partir desquels SA-
VEx calcule les cots et ressources humaines ncessaires et d'autres rsultats en utilisant
des donnes de rfrence que l'utilisateur dcentralis peut consulter mais pas modifier
- un niveau central, qui permet ELFOR de prparer le plan commun global en utilisant
les contributions de chaque utilit, et o ELFOR peut mettre jour les donnes de rf-
rence
En outre, SAVEx est aussi un outil privilgi pour favoriser l'change d'expriences entre les
utilits (pour une description plus dtails de SAVEx, se reporter [Irrek 2002 pp.67-70]).

L'exprience danoise de l'IRP est l'exprience nationale la plus aboutie dans ce domaine pour
les pays europens. Elle a t initie dans le cadre d'un programme SAVE, et a constitu un
terrain d'tude privilgi pour servir de base la proposition de Directive sur l'IRP faite en
1995.

Mais, comme le reconnat Sandholt [1995] dans ces conclusions, l'approche IRP fut remise en
cause par les Directives sur l'ouverture des marchs de l'lectricit et du gaz. En effet, l'instau-
ration d'une concurrence pour la production et la vente d'lectricit complique fortement le
processus de planification et de coordination entre les diffrents acteurs.


Depuis 2000, renforcement des exigences et de la
structuration du dispositif d'valuation

Comme le constate Nybroe [2001], l'exprience acquise et le constat positif sur les actions
Annexe A.2.3 LExemple du Danemark
53
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
menes pendant les annes 1990
153
ont permis de maintenir, et mme de renforcer les politi-
ques defficacit nergtique. En parallle, les nouvelles dispositions prises insistent particu-
lirement sur les besoins de mesurer les rsultats obtenus. La ncessit d'valuer la rentabilit
et l'efficacit des actions entreprises est renforce par la libralisation.

Si la dmarche IRP a t abandonne du fait de la concurrence introduite pour la production et
la vente d'lectricit, les obligations de planification des actions pour les compagnies de
rseau ont en revanche t maintenues et prcises. Dans ce cadre, les compagnies de rseau
doivent fournir des prvisions d'volution de la demande pour leurs zones et valuer leurs
activits de MDE. De fait, tous les programmes de MDE sont systmatiquement valus, le
plus souvent par des consultants indpendants [Vreuls 2005b p.66].

De plus, tous les programmes proposs par les compagnies de rseau sont classs dans une
des trois catgories dfinies par rapport aux questions d'valuation : mesurable, difficile
valuer, projet pilote. Dans le premier plan dfini en 2000, 80% des conomies d'nergie
prvues taient lies des programmes mesurables [Nybroe 2001 p.274].

Par ailleurs, dans sa mission de coordination de l'ensemble des actions, la DEA a aussi la mis-
sion de s'assurer que les actions ont t planifies et ralises aussi efficacement que possible.

En 2002, la DEA et SRCI ont dvelopp un manuel pratique d'valuation pour systmatiser
les efforts d'valuation, i.e. rduire les cots et le temps ncessaires aux valuations tout en
augmentant l'utilit et la valeur des rsultats des valuations en rapport avec le niveau d'effort
fourni. En parallle, ELFOR a aussi amlior ses outils de suivi, ENIBASE devenant UNI-
TOOL et SAVEx SaveE (cf. ci-aprs).

Les prcisions sur les obligations de planification ont notamment permis de disposer d'objec-
tifs quantitatifs initiaux clairement explicites. Ce qui rend possible la comparaison objectifs
initiaux / rsultats obtenus d'une part, et cots prvus / cots rels. Cela est important pour
accumuler l'exprience et amliorer la comprhension de comment les activits de MDE
atteignent le mieux les cibles dfinies [Vreuls 2005b p.68]. Les valuations intgrent ainsi
une part ex-post de plus en plus forte, et sont par ailleurs planifies pour suivre les impacts
dans la dure lorsque des objectifs de moyen et long terme ont t dfinis.

Dans son tude du cas danois, Stefan Thomas signale que, majoritairement, la mthode ta-
blie pour mesurer les conomies d'nergie a t tablie lors d'oprations pilotes [Broc 2005d
p.34]. Une fois la mthode dfinie, les compagnies de rseau fournissent une part d'informa-
tions ex-post (par ex. les actions proposes lors des audits et les potentiels associs) qui sont
combines des informations ex-ante issues des oprations pilotes (par ex. taux de ralisa-
tion des actions proposes) pour valuer les impacts des programmes.

Sept exemples concrets d'valuations ralises par des consultants indpendants sont prsen-
ts dans le guide ralis pour l'AIE [Vreuls 2005b pp.74-96]. Ces exemples illustrent bien la
mise en uvre du dispositif d'valuation, en montrant quelles sont les questions traites lors
de ces valuations pilotes et quels sont les moyens employs. Il est toutefois dommage que les

153
Les conomies globales d'lectricit sont estimes 700 GWh/an en moyenne pour la priode 1994-1998
(soit environ 2% de la consommation totale d'lectricit de 32,4 TWh/an) [Irrek 2002 pp.24]. Et si les consom-
mations d'lectricit ont augment de 7,6% sur la priode 1992-1999, elles sont presque restes constantes sur la
priode 1996-1999 (+0,6%). Mme si cela n'tablit pas de causalit entre l'volution des consommations et les
actions menes, cela ne les dsavoue pas.
Annexe A.2.3 LExemple du Danemark
54
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
cots d'valuation ne soient pas donns.


Les outils actuels du dispositif d'valuation


le manuel pratique d'valuation [Dyhr-Mikkelsen 2003] :

Il constitue une dclinaison pratique du guide europen (cf. Annexe A.2.2). Il a trois caract-
ristiques principales.

La premire est de fixer que les valuations doivent couvrir trois champs : la quantification
des impacts, l'analyse de la logique d'intervention et l'analyse de la planification et de la
ralisation des actions prvues. Le premier champ tait le cur de l'approche par analyses
cots/bnfices, alors que les deux autres correspondent des besoins nouveaux dans le cadre
la prcision des obligations en termes de planification des actions.

La seconde est de proposer d'adapter l'effort d'valuation en fonction des besoins formuls
par les commanditaires (notamment en termes de prcision) et du type de programme. Pour
chaque champ d'valuation, la mthode propose trois niveaux d'valuation A,B,C. Le niveau
A correspond une valuation approfondie demandant un effort important de collectes de
donnes, alors que le niveau C est une analyse simplifie base sur les informations directe-
ment disponibles (cf. la matrice 3x3 prsente dans le tableau 1 de [Dyhr-Mikkelsen 2003
p.171]). Un point important de cette approche est de prendre en compte les motivations des
commanditaires pour l'valuation. Ce qui n'tait pas le cas auparavant o les objectifs d'va-
luation taient fixs implicitement de manire quasi rglementaire.

La troisime est de fournir des lments concrets pour les cinq types de programmes identi-
fis comme mesurables et reprsentant 80% des programmes raliss. Le manuel contient
en particulier une bote outils et des exemples pour illustrer comment les utiliser pour
chaque type de programme dfini.

Enfin, un autre point important soulign par les auteurs est que ce guide est un document
vivant, volutif. Le but est notamment d'y ajouter de nouveaux exemples et de profiter des
futurs retours d'expriences.


SaveE et UNITOOL

Les outils SaveE et UNITOOL sont accessibles directement en ligne (www.savee.dk), mais
malheureusement toutes les informations associes sont en danois. Il est toutefois possible
d'en avoir une bonne ide partir de la description faite par Irrek et Thomas [2002 pp.67-70].

SaveE est driv de SAVEx (cf. p.52). Par rapport SAVEx, SaveE fournit des informations
plus compltes et plus faciles utiliser, notamment concernant les donnes de consommations
d'nergie. Ces donnes sont consultables mais non modifiables par les utilisateurs dcentrali-
ss. En revanche, les autres donnes plus complexes utilises pour calculer les scnarios pr-
pars par les compagnies de rseau ne leur sont pas accessibles.

UNITOOL est la version amliore d'ENIBASE. Contrairement SaveE qui sert planifier
Annexe A.2.3 LExemple du Danemark
55
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
les actions a priori (avant leur ralisation), UNITOOL est l'outil d'enregistrement a poste-
riori des actions ralises.

Les outils sont relis de la manire suivante :
- avec laide de SaveE, les compagnies prparent leurs plans daction et ELFOR les met en
commun pour proposer le plan global la DEA et au rgulateur (programmes prvus,
conomies estimes ex-ante)
- chaque opration et ses impacts sont enregistrs ex-post dans UNITOOL
- chaque opration et ses impacts sont ensuite agrgs lchelle du programme et les in-
formations ainsi recueillies transmises SaveE
- enfin, les conomies dnergie ralises par les diffrents programmes peuvent tre com-
pares avec les estimations initiales l'aide de SaveE
En outre, lorsque des valuations ex-post sont ralises, elles permettent de mettre jour les
donnes de rfrence de SaveE.


A.2.3.3 Leons et conclusions


A partir des informations trouves sur l'exprience danoise de mise en place d'un dispositif
efficace d'valuation, nous pouvons dduire les conclusions suivantes :

l'valuation n'est pas une question qui se rgle une fois pour toute, c'est une probl-
matique volutive

Un des points cls du succs du dispositif danois est qu'il s'est mis en place progressivement
en suivant un processus d'amlioration continue grce une bonne capitalisation des ex-
priences. Aprs une premire phase d'apprentissage, des outils comme ENIBASE ou SA-
VEx ont permis d'assurer ce processus. Ces outils ont ensuite t amliors et continueront de
l'tre pour amliorer le rapport valeurs et utilit des rsultats obtenus / cots d'valuation.

les activits de MDE et leur valuation reprsentent un vritable secteur d'activit
professionnelle

Un autre facteur de succs est la professionnalisation des acteurs et l'expertise dveloppe
dans le domaine, d'une part au sein des organismes mettant en uvre les programmes, et d'au-
tre part du ct des consultants indpendants qui ralisent leur valuation.

pour tre efficace, un dispositif d'valuation doit combiner un cadre rglementaire
clair, une bonne coordination des acteurs, des outils communs de mise en uvre, et
tre utile ceux qui l'alimentent

Toutes ces conditions permettent d'aboutir une valuation systmatique des programmes,
avec comme fil rouge un processus itratif de leur amlioration entre les phases de planifi-
cation et d'valuation.

D'autre part, il est essentiel que l'valuation soit adapte aux besoins des acteurs concerns.
Sinon l'valuation reste perue ngativement comme un contrle contraignant, et perd sa di-
mension positive formative.

Annexe A.2.3 LExemple du Danemark
56
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
les mthodes d'valuation doivent chercher comment amliorer la combinaison d'in-
formations ex-ante et ex-post pour optimiser le rapport entre prcision sur les rsul-
tats et cots d'valuation



57
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Annexe A.2.4 Perspectives pour les dispositifs et approches d'valuation


A.2.4.1 La nouvelle Directive europenne relative l'efficacit nergtique


L'laboration puis le processus lgislatif de cette Directive ont t l'occasion de nombreux
dbats, dans un premier temps entre les acteurs concerns (partisans pro-efficacit nergti-
que, compagnies d'nergie, etc.) puis entre le Conseil (qui reprsente les intrts des gouver-
nements des Etats-Membres) et le Parlement europen (plus proche des intrts de la Com-
mission).

Ces dbats ont notamment port sur les points suivants :
- les objectifs fixs dans la Directive : contraignants ou indicatifs; fixes (conomies
d'nergie) ou indexs (intensit nergtique); en nergies finales ou en nergies primai-
res); globaux ou diffrentis (segmentation)
- la nature du suivi et contrle de l'accomplissement de ces objectifs, et les mthodes
d'valuation choisies pour ce faire
- la rpartition des rles (Commission, Etats-Membres, compagnies d'nergie, autres or-
ganismes)
- les objectifs particuliers au secteur public

Au final la Directive est un compromis sur tous ces points de dbats, et fournit un bon tat
des lieux des rflexions actuelles sur les services et programmes d'EE-DSM et leur valua-
tion, en posant des rfrences communes de smantiques et de problmatiques.


Le contenu principal de la Directive est le suivant :

- objectif gnral : assurer le dveloppement de programmes d'EE-DSM et d'un march
de services nergtiques pour tous les clients finals (pour palier aux barrires et dfauts
du march libralis de l'nergie) (article 1)

- un objectif oprationnel indicatif d'conomies d'nergie quivalent une rduction de
9% des consommations finales annuelles d'nergie
154
au bout de 9 ans (soit 1% addition-
nel par an) qui doit tre atteint grce des services ou programmes d'EE-DSM (article 4.1
et annexe I)

- l'obligation pour les Etats-membres de soumettre la Commission tous les 3 ans des
PAEE (Plans daction d'Efficacit Energtique), d'une part pour prsenter les disposi-
tions et efforts prvus pour atteindre l'objectif indicatif dans la prochaine priode, et d'au-
tre part pour rapporter les rsultats obtenus lors de la priode prcdente (articles 4.2 et
14)

- l'accent mis sur le rle d'exemplarit que doit montrer le secteur public, pour lequel en
particulier les Etats-membres devraient adopter au moins deux dispositions parmi celles

154
cf. annexe I de la Directive : l'objectif est fix en prenant pour rfrence une consommation annuelle
moyenne calcule sur 5 ans (2001-2005) sans aucune correction (pour plus de transparence et faciliter l'harmoni-
sation entre les Etats-Membres)
Annexe A.2.4 Perspectives pour les dispositifs et approches d'valuation
58
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
proposes dans l'annexe V (article 5 et annexe V)

- des recommandations, plus ou moins fortes, faites aux Etats-membres quant au cadre
dfinir, aux dispositions prendre et aux moyens mettre en uvre (par ex. instruments
d'intervention conseills) pour atteindre les objectifs fixs (articles 7 13)

- l'tablissement d'un comit d'experts pour dfinir les mthodes d'valuation utiliser
(article 16 et annexe IV)

- une liste de dfinitions (article 3), d'actions ligibles (annexe III)
Encadr 7 - contenu principal de la Directive relative l'efficacit nergtique

La philosophie gnrale est au final une dmarche d'accompagnement des Etats-membres
par la Commission avec un systme d'obligations implicites d'efforts. D'un ct le Commis-
sion fournit un ensemble de recommandations et un dispositif harmonis commun pour le
suivi des objectifs fixs (PAEE et mthodes d'valuation), de l'autre les Etats-membres sont
libres de choisir les dispositions prendre.

Au bout de chaque priode de trois ans, les Etats-membres rapportent leurs actions la Com-
mission, et les justifications fournir sont plus importantes si les recommandations faites dans
la Directive n'ont pas t suivies. La Commission dlivre alors son avis, savoir si elle estime
que les efforts fournis ont t suffisants ou pas, et donc si des efforts supplmentaires sont
ncessaires.

En parallle, la Commission s'engage amliorer le processus d'application de la Directive et
favoriser les changes de bonnes pratiques entre les Etats-membres. Elle doit par ailleurs
rendre compte des progrs de mise en uvre de la Directive au Conseil et au Parlement euro-
pen au plus tard en 2011.

Dans ce processus, la premire priode (2007-2010) apparat comme une phase de lancement
et de rodage, avec les chances suivantes :
- 2008 : la Commission doit fournir aux Etats-membres les mthodes d'valuation utiliser
(aussi bien pour l'valuation bottom-up des programmes que pour la dfinition d'indica-
teurs top-down d'efficacit nergtique) (article 15.2 et 15.4, et annexe IV)
- 2012 : dcision sur la pertinence d'une proposition de Directive "certificats blancs" (article
4.4), et mise jour et nouvelles mthodes d'valuation (article 15.3)

Le but de la Directive est donc d'initier un processus d'amlioration continue, bas sur
l'change d'expriences et l'accompagnement des acteurs.

Le compromis trouv dans cette Directive, quilibre entre obligations et recommandations, est
proche du systme utilis au Danemark depuis 1992 et redfini en 2000. Et il reprend no-
tamment l'ide d'une approche progressive visant prciser les contraintes et/ou recommanda-
tions au fur et mesure de l'exprience acquise et de l'amlioration du dispositif de sui-
vi/valuation.


En ce qui concerne l'valuation, hormis le dispositif des PAEE, les points importants sont
dtaills dans l'annexe IV :
Annexe A.2.4 Perspectives pour les dispositifs et approches d'valuation
59
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006

- dfinition des deux approches globales :

- top-down ou descendante : Dans le cadre d'une mthode de calcul descendante, la
quantit d'nergie conomise est calcule partir des conomies d'nergie ralises
au niveau national ou un niveau sectoriel agrg de manire plus large. Les don-
nes annuelles sont ensuite ajustes afin de tenir compte de facteurs externes tels que
les degrs-jours, les changements structurels, la gamme de produits, etc., pour obte-
nir un rsultat refltant fidlement l'amlioration totale de l'efficacit nergtique.
Cette mthode ne permet pas d'obtenir de mesures exactes et dtailles et ne met pas
non plus en vidence les relations de cause effet entre les mesures prises et les co-
nomies d'nergie qui en dcoulent. Nanmoins, elle est gnralement avantageuse en
termes de simplicit et de cot; elle est souvent appele mthode des indicateurs
d'efficacit nergtique car elle donne une indication de l'volution de la situation

- bottom-up ou ascendante : Dans le cadre d'une mthode de calcul ascendante, les
conomies d'nergie ralises grce la mise en uvre d'une mesure spcifique vi-
sant amliorer l'efficacit nergtique sont mesures en kilowattheures (kWh), en
joules (J) ou en kilogrammes quivalent ptrole (kgep) et ajoutes aux conomies
d'nergie rsultant d'autres mesures spcifiques visant l'amlioration de l'efficacit
nergtique. Les autorits () veilleront ce qu'on vite tout double comptage des
conomies d'nergie rsultant d'une combinaison de mesures (y compris de mcanis-
mes) visant amliorer l'efficacit nergtique.

- priorit donne l'valuation bottom-up, car l'approche top-down ne fournit pas de
mesures exactes un niveau dtaill, et ne montre pas non plus la causalit entre les ac-
tions et les conomies d'nergie observes, mme si elle est habituellement plus simple
et moins coteuse

- le comit d'experts devra donc proposer des mthodes d'valuation bottom-up qui per-
mettent de couvrir l'quivalent de 20 30% des consommations finales annuelles d'ner-
gie, mais il devra aussi proposer des mthodes de calcul d'indicateurs d'efficacit nerg-
tique (en se basant sur la mthodologie ODEX dveloppe dans le cadre du programme
ODYSSEE-MURE)

- les mthodes bottom-up devront s'appuyer sur les expriences existantes et acquises au
dbut de l'application de la Directive, et devront rechercher le meilleur compromis entre
meilleure prcision d'une part, et limitation des cots additionnels (notamment d'admi-
nistration) d'autre part

- concernant les mthodes bottom-up, une distinction est faite entre les mthodes de me-
sures (ex-post), et les mthodes d'estimation (ex-ante), avec pour cette dernire catgo-
rie une autre distinction entre mthodes avec ou sans inspection

En outre l'annexe IV liste les principaux types de mthodes bottom-up envisager en fonc-
tion des donnes de base utilises, les principaux facteurs de correction, et souligne trois
points prendre en compte dans les valuations :
- les incertitudes sur les rsultats, qui seront si possible quantifier sous une forme statis-
tique avec le pourcentage d'incertitude sur le rsultat et l'intervalle de confiance corres-
pondant
Annexe A.2.4 Perspectives pour les dispositifs et approches d'valuation
60
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
- la dfinition de la dure de vie des conomies d'nergie, qui sera a priori fixe en fonc-
tion de la solution performante utilise
- les effets multiplicateurs (pour une action qui a des effets positifs au-del de ses impacts
directs) et les risques de double comptage (lorsque des actions diffrentes couvrent la
mme cible)
Encadr 8 - principaux points de l'Annexe IV (cadre gnral pour la mesure et la vrifi-
cation des conomies d'nergie) de la Directive relative l'efficacit nergtique


A.2.4.2 Une tendance forte : passage d'obligations de moyens obligations de rsultats, et
validation d'conomies d'nergie prsumes


En parallle l'laboration de la Directive relative l'efficacit nergtique, on constate aussi
une tendance des politiques defficacit nergtique passer de systmes d'engagement ou
d'obligations de moyens des obligations de rsultats (par ex. Royaume-Uni et Flandres en
2002, Italie en 2005, France en 2006).

Pays Acteurs obli-
gs
Secteurs
viss
Objectif fix
par
Administration Certificats
blancs ?
Belgique
(Flandres)
distributeurs
d'lectricit
rsidentiels
+ industries
et servi-
ces
155

gouvernement
flamand
gouvernement
flamand
non
Danemark Distributeurs
de gaz, de cha-
leur et d'lec-
tricit
tous sauf
transport
gouvernement agence publique non
France fournisseurs
d'nergie
156

tous, sauf
ceux soumis
aux quotas de
CO
2

gouvernement gouvernement oui
Irlande fournisseurs
d'lectricit
tous sauf
transport
rgulateur rgulateur non
Italie distributeurs de
gaz et d'lectri-
cit
tous gouvernement rgulateur oui
Royaume-
Uni
fournisseurs de
gaz et d'lectri-
cit
rsidentiels gouvernement rgulateur non
Source : www.eceee.org
Tableau 20 - systmes d'obligation pour l'efficacit nergtique dans les pays europens
en avril 2005

Ce passage se fait progressivement, avec une phase de transition courte et des efforts limits
pour les pays ayant dj acquis une bonne exprience dans le suivi des oprations d'EE-DSM

155
sauf les industries et services forte intensit nergtique
156
sauf carburants
Annexe A.2.4 Perspectives pour les dispositifs et approches d'valuation
61
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
du fait de dispositif d'obligations de moyens (par ex. Royaume-Uni et Flandres). Il ncessite
des efforts plus importants pour les pays ne disposant pas d'une telle exprience (par ex. Italie,
cf. intervention de Marcella Pavan relate dans [Lees 2005 p.8]).

Cette tendance correspond l'mergence de dispositifs dits de certificats blancs (cf. Encadr
2, section I.2.4.2).

Pour minimiser les cots d'administration de tels systmes, les organismes de contrle ont
le plus souvent recours des mthodes de calculs dites d'conomies prsumes (deemed
savings). Le principe est de dfinir un forfait standard d'conomies d'nergie par action uni-
taire (par ex. l'acquisition d'une LBC correspond un nombre fixe de kWh conomiss) qui
est ensuite multipli par le nombre d'actions rapportes (par ex. nombre de LBC diffuses
pendant une opration).

Dans ce cas de figure, l'valuation des conomies unitaires est totalement ex-ante. Elle est
base d'une part sur les connaissances et les retours d'exprience disponibles, et d'autre sur la
concertation avec les acteurs concerns (d'un ct les organismes de contrle, et de l'autre les
obligs ou les acteurs souhaitant faire certifier le type d'action tudi). Le seul lment ex-
post est alors le nombre d'actions ralises.

En gnral, cette mthode est accompagne par une vrification ex-post d'un chantillon
alatoire de programmes. Mais le plus souvent cette vrification se cantonne aux critres
fixs pour la validation de l'action (par ex. installation relle de l'isolation) et ne concerne pas
les paramtres fixs ex-ante (par ex. temprature fixe dans le logement). Parfois des tudes
complmentaires sont donc menes pour vrifier la pertinence des valeurs fixes ex-ante.

Ce systme permet effectivement de minimiser les cots d'administration. Par exemple au
Royaume-Uni, le calcul des obligations fixes dans le cadre de l'Energy Efficiency Commit-
ment est effectu ainsi, et le cot du dispositif est de moins de 0,1% des cots des program-
mes contrls pour l'organisme de contrle (1,4 millions d'euros contre 1.700 millions d'euros
pour la priode 2005-2008 selon l'intervention de Charles Hargreaves de l'Ofgem
157
dans
[Lees 2005 p.9]), avec des cots globaux d'valuation pour l'ensemble des acteurs qui restent
infrieur 1% [Thomas 2005b p.2].

Les principaux cots d'valuation sont :
- les tudes ncessaires pour dfinir les mthodes de calcul ex-ante
- les vrifications d'chantillon alatoire
- les tudes complmentaires pour vrifier certains paramtres

De fait, les cots d'valuation d'un tel systme sont souvent dcroissants avec le temps,
puisqu'un des principaux cots est la dfinition des mthodes ex-ante et que ces mthodes une
fois dfinies ont un cot minime d'utilisation (enregistrement du type et du nombre d'actions
ralises). Ainsi, David Sumi (dont l'intervention est relate dans [Thomas 2005b p.14]) vo-
que l'exemple de l'tat amricain du Wisconsin qui a mis en place un tel systme et dont les
cots d'valuation sont dj tombs de 5 3% des cots totaux des programmes raliss.

Ces exemples permettent Stefan Thomas d'affirmer que les mthodes d'valuation bottom-
up ne sont donc pas forcment plus coteuses que celles top-down [Thomas 2005b p.3].

157
Rgulateur des marchs de l'lectricit et du gaz au Royaume-Uni, et charg du contrle du programme
d'obligations (l'Energy Efficiency Commitment)
Annexe A.2.4 Perspectives pour les dispositifs et approches d'valuation
62
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006

Ce systme a l'avantage de minimiser les cots d'valuation concernant la quantification des
conomies d'nergie, notamment pour l'organisme de contrle. Cependant il ne fournit pas
d'informations sur quelles sont les actions les plus efficaces et comment assurer leur suc-
cs. Cette partie de l'valuation est a priori la charge des obligs qui ont pour objectif de
rechercher la manire la plus rentable de remplir leurs obligations.

Enfin, ces conomies d'nergie prsumes restent des estimations. Peu de retours sont dispo-
nibles sur leur validit. Toutefois un rapport la Chambre des Communes du Parlement bri-
tannique soulve cette question concernant l'EEC, et signale que la plupart des recherches
scientifiques disponibles montrent que les conomies prsumes sont surestimes et
qu'aucune tude n'a t ralise ou commande pour confirmer ou infirmer cela par l'orga-
nisme de contrle (Ofgem) [CPA 2005 p.13]. Ces constats sont similaires ceux ayant
conduit aux Etats-Unis gnraliser les tudes sur la persistance des rsultats (cf. Encadr
1 p.29).


A.2.4.3 La situation actuelle : vers une harmonisation encadre par la nouvelle Directive


Un atelier a t organis le 3 mars 2005 par la Commission, le Parlement europen et
l'ECEEE pour faire le point sur les mthodes d'valuation bottom-up en vue de la future ap-
plication de la nouvelle Directive (les interventions faites cet atelier sont relates dans [Lees
2005]).

Cet atelier a permis de constater que mme si les expriences dans ce domaine taient inga-
les d'un pays l'autre, elles avaient des points communs (compromis entre prcision et cots
d'administration, priorit des mthodes standardises, etc.) et qu'il semblait possible de
dvelopper dans un dlai raisonnable (i.e. d'ici 2008, date fixe dans la Directive) des mtho-
des d'valuation harmonises pour l'ensemble des pays.

Une des conclusions de cet atelier tait notamment de constituer un comit d'experts pour
aider la Commission dans ce sens. Cette recommandation a t retenue dans la Directive et le
comit a t mis en place. En outre, une proposition de projet europen dans le cadre du pro-
gramme Intelligent Energy Europe a t faite sur ce thme pour aider le comit sur les ques-
tions les plus techniques et dvelopper concrtement des mthodes d'valuation.

Coordonne par Stefan Thomas du Wuppertal Institut, cette proposition (EMEEES) regroupe
l'ensemble des principaux spcialistes de l'valuation des activits de MDE en Europe. Le
tableau suivant liste les organismes impliqus par ordre alphabtique.

Nom de l'organisme Type d'organisme Pays
ADEME agence publique France
AEA (Agence Autrichienne de l'Ener-
gie)
agence publique Autriche
ARMINES
institut de recherche associ aux
Ecoles des Mines
France
CRES (Centre pour les Sources d'EnR) agence publique Grce
DEFRA ministre
Royaume-
Uni
Annexe A.2.4 Perspectives pour les dispositifs et approches d'valuation
63
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
ECN institut de recherche Pays-Bas
EDF compagnie d'nergie France
eERG (Polytechnique Milan) institut de recherche universitaire Italie
Ekodoma consultants indpendants Lettonie
Enerdata consultants indpendants France
Enova SF agence publique Norvge
FHG-ISI (Institut Fraunhofer pour la
Recherche et l'Innovation)
institut de recherche Allemagne
KE Marked S/A compagnie d'nergie Danemark
Institut ISR-UC de l'Universit de
Coimbra
institut de recherche universitaire Portugal
ISIS (Institut d'Etude pour l'Intgration
des Systmes)
institut de recherche Italie
Motiva oy agence publique Finlande
SenterNovem agence publique Pays-Bas
SRCI A/S. consultants indpendants Danemark
STEM agence publique Sude
Universit des Sciences et Technolo-
gies d'AGH
institut de recherche universitaire Pologne
Wuppertal Institut institut de recherche Allemagne
Tableau 21 - liste des organismes impliqus dans la proposition de projet europen
EMEEES

D'autres organismes pourraient tre cits ici comme le cabinet de consultant nerlandais Eco-
fys, les organismes britanniques (Ofgem, EST), les organismes danois (ELFOR, DEA, etc.),
mais la liste du Tableau 21 donne dj un trs bon aperu des principaux acteurs du domaine
en Europe.

Outre le dveloppement de mthodes oprationnelles d'valuation, un des principaux objectifs
du projet EMEEES sera d'tudier comment combiner les deux approches bottom-up et
top-down.


64
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Annexes A.3 Complments aux conclusions sur les expriences
dvaluation des activits de MDE


Les annexes de cette partie viennent complter la synthse finale du Chapitre I qui fournit un
tat des connaissances sur l'valuation ex-post des activits de MDE.

L'Annexe A.3.1 prsente les principaux rsultats des recherches engages dans le cadre de
l'axe "International Database on Energy Efficient Demand-Side Management (EE-DSM)
Technologies and Programmes" du programme sur la MDE de l'AIE (Agence Internationale
de l'Energie). Ces recherches sont en particulier l'occasion de mettre en commun les experti-
ses des diffrents pays participants cet axe. Elles fournissent d'une part des tudes de cas sur
ces pays, et d'autre part une synthse internationale sur les approches dveloppes pour va-
luer les activits de MDE.

L'Annexe A.3.2 dtaille le contenu des cinq guides de rfrence identifis au travers de nos
recherches bibliographiques, en suivant la grille de lecture dfinie dans la sous-partie I.3.1 du
Chapitre I. La compilation de ces guides offre une vue d'ensemble des principales rponses
apportes aux questions cls de l'valuation des activits de MDE.



65
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Annexe A.3.1 Les travaux sur l'valuation du programme DSM de l'Agence
Internationale de l'Energie


A.3.1.1 L'AIE et son programme sur la MDE


L'Agence Internationale de l'Energie (AIE) est un organisme intergouvernemental cre en
1974 pour travailler pour la scurit d'approvisionnement en nergie, la croissance cono-
mique et l'environnement travers la coordination des politiques nergtiques
158
. L'AIE
compte aujourd'hui 26 pays membres. Parmi ces activits, l'AIE soutient des programmes de
recherche et dveloppement sous la forme d'accords de coopration ou "implementing agree-
ments", dont un (depuis 1993) porte plus spcifiquement sur les activits de MDE ("Demand-
Side Management Programme") et auquel participent 17 pays.

Ce programme contient lui-mme 15 projets ou "tasks", dont la numro 1 concerne l'tablis-
sement d'une base de donnes sur le DSM (INDEEP
159
) et l'valuation des programmes d'EE-
DSM. Ce projet est coordonn par Harry Vreuls de l'agence publique des Pays-Bas, Senter-
Novem.

L'objectif initial fix en 1994 tait de dvelopper INDEEP et d'analyser les donnes ainsi col-
lecter (cf. [Van der Laar, Evert 2004, Vine 1996, Vreuls 1997]). Puis le projet a t tendu au
dveloppement d'un guide d'valuation des impacts des programmes de DSM et d'efficacit
nergtique en lien avec les objectifs de rduction des missions de GES (Gaz Effet de
Serre) fixs par le protocole de Kyoto.


A.3.1.2 Des synthses sur l'valuation des programmes de MDE


Ce programme a notamment permis de mettre en commun les travaux et expriences des dif-
frents pays participants. Violette [1995] a ainsi prpar un guide faisant la synthse des exp-
riences amricaines des annes 1980 et du dbut des annes 1990. Le site du programme
160

met de plus disposition certains des ouvrages de rfrence dans ce domaine dont le guide
europen coordonn par SRCI [2001].

Ce travail sur l'valuation a connu un nouvel lan suite la 5
me
confrence pour l'application
du protocole de Kyoto Bonn en novembre 1999
161
. Il a alors t dcid que les pays signa-
taires devaient non seulement rendre compte de l'volution de leurs missions de GES, mais
aussi du lien entre ces volutions et les dispositions prises.

Un nouveau sous projet a alors t engag en mai 2002 dans le cadre de la Task 1 du pro-
gramme DSM de l'AIE. Il avait pour but de dfinir un guide fournissant des mthodes harmo-
nises pour l'valuation des programmes d'EE-DSM. A la fois pour aider les experts qui au-
ront la charge d'examiner les rapports des pays signataires du protocole de Kyoto, et pour ser-

158
cf. www.iea.org
159
cf. http://dsm.iea.org/INDEEP
160
cf. http://dsm.iea.org/
161
Confrence dite COP-5 : Conference Of the Parties to the UNFCCC (United Nation Framework Convetion on
Climate Change)
Annexe A.3.1 Les travaux sur l'valuation du programme DSM de l'Agence Internationale de l'Energie
66
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
vir de base commune aux diffrents pays pour raliser leurs propres valuations.

Ce sous projet a dbouch sur un guide en deux volumes publis fin 2005
160
:
- le volume I [Vreuls 2005a] traite des thories de l'valuation et recommande comment
conduire les valuations pour cinq types de programmes. Cette nouvelle approche impli-
que d'organiser les valuations selon sept lments analytiques
- le volume II [Vreuls 2005b] regroupe les fiches prsentant les expriences de huit pays
qui ont servi de base pour dvelopper le volume I, et qui ont t ralises par des experts
des pays concerns

Les sept lments utiliss pour structurer les valuations sont :
- la logique d'intervention du programme valu ("policy measure theory used")
- la spcification d'indicateurs de succs du programme
- le rfrentiel ("baseline") utilis pour ces indicateurs
- l'valuation des produits ("outputs") et rsultats ("outcomes")
- l'valuation des impacts finals (conomies d'nergie, rductions d'missions, etc.)
- le calcul des cots, de la rentabilit et de l'efficience du programme
- le niveau d'effort de l'valuation

La caractrisation de trois niveaux d'effort d'valuation est un des apports importants du
guide [Vreuls 2005a p.43] :
- niveau A : valuation approfondie ("comprehensive evaluation")
- indicateurs intermdiaires, incluant les rsultats nets
- indicateurs d'impacts sur les conomies d'nergie
- des sources supplmentaires d'information sont ncessaire
- niveau B : valuation cible
- indicateurs intermdiaires, incluant les rsultats bruts
- quelques sources supplmentaires d'information
- niveau C : valuation d'examen du programme ("programme review evaluation")
- indicateurs intermdiaires, incluant les rsultats bruts
- utilisation des seules sources d'information dj existantes

Les cinq types de programmes traits sont :
- les mesures rglementaires (les exemples dtaills sont les rglementations thermiques et
les standards minimum de performance nergtique)
- les programmes d'information
- les programmes d'incitations financires
- les accords volontaires
- les programmes combins (qui utilisent plusieurs des quatre types de programmes ci-
dessus)

Par ailleurs, le guide schmatise le rle et les critres d'valuation sous une forme qui rejoint
celle que nous avons dfinie dans la Figure 5
162
.

162
Ce schma est d'ailleurs inspir d'un schma de [European Commission 1999] lui-mme dduit du schma
propos par [Nagarajan 1997] que nous avons utilis pour dfinir la Figure 5.
Annexe A.3.1 Les travaux sur l'valuation du programme DSM de l'Agence Internationale de l'Energie
67
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006

Source : [Vreuls 2005a p.27]
Figure 21 - structure pour l'valuation propose dans le nouveau guide de l'AIE

(Pour plus de dtails sur le contenu du guide l'AIE, se reporter l'Annexe A.3.1)



Socit
Economie
Environnement
Evaluation
Intervention publique
Mesures politiques /
Programmes /
Oprations
Critres et questions de l'valuation :
- pertinence : dans quelle mesure les objectifs sont justifis au regard des be-
soins ?
- efficacit : dans quelle mesure les objectifs fixs ont t atteints ?
- efficience : les objectifs ont-ils t atteints au meilleur cot ?
- utilit et durabilit : les effets (attendus ou non) du programme contribuent-ils
Besoins
Problmes
Questions
Objectifs Entres /
"inputs"
Sorties /
"outputs"
Rsultats /
"outcomes"
Impacts
finals
Pertinence
Efficacit
Efficience
Utilit et durabilit

68
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Annexe A.3.2 Les apports des cinq guides de rfrence sur les problmatiques
cls de l'valuation des actions sur la demande en nergie


Dans cette partie nous reprenons les problmatiques cls identifies dans la section I.3.1, en
en faisant ressortir les approches et rponses proposes par cinq ouvrages de rfrence. Cette
analyse bibliographique reste mthodologique. Les dtails pratiques sont dvelopps dans le
chapitre III.

Le choix des ouvrages de rfrence utiliss pour cette synthse s'est fait sur les trois critres
suivants :
- reconnaissance et/ou utilisation de l'ouvrage par les institutions nationales ou interna-
tionales et/ou par les principaux acteurs concerns (utilits, ESCo, rgulateurs, agences
publiques)
- actualit de l'ouvrage (i.e. correspond-il un bon tat de l'art actuel ? notamment, tient-il
compte des travaux et expriences existantes ?)
- tendue de l'approche mthodologique (i.e. que l'ouvrage couvre la plupart des probl-
matiques cls identifies dans la section I.3.1)

Nous avons ainsi choisi de nous concentrer sur les cinq guides suivants:

- l'IPMVP [DOE 2001], tabli par le DOE, rfrence internationale adopte entre autres
par de nombreux Etats des Etats-Unis, et dont une description synthtique peut tre trou-
ve dans [Annexe B de SRCI 2001 pp.B50-B53]

- le guide MERVC
163
[Vine 1999a], financ par l'US-EPA
164
et le DOE, dvelopp pour
l'valuation des projets d'implmentation conjointe et de mcanismes de dveloppement
propre dans le cadre du protocole de Kyoto, et qui a t prsent lors de l'ECEEE Summer
Study de 1999 [Vine 1999b]

- le guide europen coordonn par SRCI [SRCI 2001], rfrence internationale cite en
tant que telle dans l'annexe IV de la Directive EESE, et qui a t prsent lors de l'ECEEE
Summer Study de 2001 [Birr-Pedersen 2001]

- le guide d'valuation californien coordonn par TecMarket Works [2004], utilis entre
autres par l'Etat californien, trs dtaill et qui fournit des rfrences bibliographiques trs
compltes

- le guide de l'AIE coordonn par Vreuls [2005a] qui utilise des rfrences bibliographi-
ques trs compltes et qui se basent sur l'analyse des expriences des huit pays ayant par-
ticip ce projet

Sur certains points particuliers des questions tudies, d'autres publications apportent des
lments nouveaux par rapport ces cinq ouvrages. Ils ne sont pas cits dans cette annexe,
mais il y est fait rfrence dans les sections traitant plus en dtails de ces points. L'objectif de
cette annexe n'est pas de rentrer dans les dtails, mais de donner une vue d'ensemble de l'tat
de l'art sur les problmatiques cls de l'valuation des activits de MDE.

163
MERVC: Monitoring, Evaluation, Reporting, Verification and Certification
164
U.S. Environmental Protection Agency
Annexe A.3.2 Les apports des cinq guides de rfrence sur les problmatiques cls de l'valuation des actions sur
la demande en nergie
69
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006

Nous reprenons le plan de la section I.3.1.


A.3.2.1 Description gnrale de l'opration value


Caractriser les oprations : un travail de typologie

La plupart des ouvrages de rfrence commencent par dfinir, plus ou moins explicitement,
une typologie des activits de MDE. La typologie utilise permet de faire ressortir les crit-
res de segmentation qui guideront l'approche d'valuation.

Guide Critre prpondrant
IPMVP cible technique (qui dtermine parmi les 4 options d'valuation propo-
ses laquelle est la mieux adapte)
guide MERVC cible technique (critre utilis pour dfinir une typologie des program-
mes)
guide europen les grands types de programmes sont dfinis partir d'une typologie
mixte :
- objectifs (transformation de march, report de renforcements de r-
seau, rduction des pics de charge, fidlisation des clients)
- instruments d'intervention (information cible)
- acteurs (programmes des ESCo)
guide californien approche systmatique, et non pas par type de programme l'approche
est dfinie partir des champs que doit couvrir l'valuation :
- impacts finals (conomies d'nergie, etc.)
- impacts sur le march
- impacts en termes d'information / sensibilisation
- impacts non nergtiques (activits conomiques, etc.)
- analyse du processus et de la logique d'intervention
- analyse conomique
guide de l'AIE instruments d'intervention :
- les mesures rglementaires
- les programmes d'information
- les programmes d'incitations financires
- les accords volontaires
- les programmes combins (qui utilisent plusieurs des quatre types de
programmes ci-dessus)
Tableau 22 - critres principaux utiliss par les cinq guides de rfrence

L'II.2.2.2 fournit plus de dtails sur les critres de segmentation des oprations de MDE.


L'analyse de la logique d'intervention : un point essentiel
de l'valuation

La logique d'intervention n'est pas aborde dans l'IPMVP et peu dans le guide MERVC, qui
traite seulement indirectement de la causalit actions rsultas par l'tude des impacts nets
Annexe A.3.2 Les apports des cinq guides de rfrence sur les problmatiques cls de l'valuation des actions sur
la demande en nergie
70
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
par rapport aux impacts bruts. En revanche, l'analyse de la logique d'intervention prend une
place croissante dans les ouvrages plus rcents, o elle apparat comme un point essentiel de
l'valuation.

Cela traduit l'volution des approches d'valuation et donc des objectifs auxquels rpondent
les guides.

L'IPMVP et le guide MERVC sont concentrs sur la dimension rcapitulative de l'valuation
(voire contractuelle pour l'IPMVP). Ils sont en effet conus avant tout comme des outils pour
rendre des comptes : entre une ESCo et son client pour l'IPMVP, entre des pays signataires
du protocole de Kyoto et les instances internationales pour le guide MERVC.

Les autres guides renvoient plus ou moins directement l'IPMVP pour la quantification des
impacts, mais largissent aussi les champs de l'valuation l'analyse de la logique d'interven-
tion pour mieux comprendre le droulement "rel" de l'opration value avec pour objectifs :
- d'tudier la causalit entre actions et rsultats, pour complter la justification des rsultats
allous l'opration value et mieux dfinir la rentabilit nette des actions
- de capitaliser l'exprience, en faisant ressortir les facteurs cls de succs / chec
- d'apporter des lments d'aide la dcision, la fois pour les choix de poursuivre / modi-
fier / arrter une opration, et pour la conception de futures oprations

Au-del de rendre des comptes, les autres guides se veulent aussi des outils d'accompagne-
ment des dcideurs dans le dveloppement de leurs politiques d'actions.

Guide Approche de la logique d'intervention
IPMVP Pas aborde, car implicite
165
. L'approche d'valuation dcrite est quasi-
contractuelle et a pour but de fixer les conditions d'un accord entre celui
qui fournit un service nergtique (par ex. une ESCo) et son client.
guide MERVC
(section 4.3 pp.55-
60)
Traite principalement par l'tude de l'effet d'aubaine.
guide europen
(section 2.5 pp.14-18
et partie 7 pp.87-98)
Aborde sous l'angle de la thorie de l'valuation raliste
166
qui fixe
l'tude de la causalit comme un point central de l'valuation. Le guide
ne fournit pas de mthode concrte, mais prsente les enqutes auprs
des acteurs concerns comme l'outil principal pour cette partie de l'va-
luation.
guide californien
(chapitre 8 pp.205-
228)
Aborde sous l'angle de l'valuation du processus de l'opration
167
, avec
comme objectif principal d'identifier des recommandations pour amlio-
rer le type de l'opration value. Le guide dtaille les comptences re-
quises, la dfinition des questions cls et des besoins en valuation, les
outils possibles, et comment planifier cette partie de l'valuation.

165
De fait l'IPMVP n'est pas rellement un guide d'valuation, mais un protocole pour mesurer et vrifier les
conomies d'nergie.
166
La thorie de l'valuation raliste ("realistic evaluation") est dcrite par Pawson et Tilley [1997]. Le guide
europen en fournit un rsum trs concis [annexe B de SRCI 2001 pp.B9] et dcrit le principe de base de cette
thorie : Contexte + Mcanismes = Rsultats (en anglais CMO pour "Context + Mechanisms = Outcome"). La
description des mcanismes correspond l'analyse de la logique d'intervention.
167
L'valuation du processus ("process evaluation") consiste tudier la conception, la ralisation et la gestion
de l'opration value.
Annexe A.3.2 Les apports des cinq guides de rfrence sur les problmatiques cls de l'valuation des actions sur
la demande en nergie
71
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Les auteurs reconnaissent cependant que l'approche qu'ils proposent
correspond une tude approfondie au cot lev
168
. Ils proposent donc
une srie de douze questions pour savoir si une telle tude est utile ou
non.
guide de l'AIE
(section 1.3.1 pp. 21-
25)
Liste comme un des sept points cls de l'valuation, et relie en particu-
lier avec deux autres points cls : la dfinition d'indicateurs et du rfren-
tiel. L'analyse est centre sur deux composants : le domaine d'action (i.e.
la cible, les acteurs impliqus et leur rle, et la zone concerne) et les
hypothses sur les effets attendus (en particulier les barrires surmon-
ter). En outre, le guide reprend le schma de la logique d'un programme
dcrit par Nagarajan [1997] pour structurer les critres d'valuation (cf.
Figure 21)
Tableau 23 - les approches de la logique d'intervention dans les cinq guides de rfrence

Pour plus de dtails sur l'analyse de la logique d'intervention, se reporter la section III.2.


A.3.2.2 Elaboration de l'valuation


Le choix de l'valuateur

Les guides relient le plus souvent la question du choix de l'valuateur celle de la responsabi-
lit de l'valuation. De plus, ce choix est souvent considr implicitement comme dpendant
du contexte contractuel ou rglementaire.

Guide Responsabilit de l'valuation et type d'valuateur conseill
IPMVP La responsabilit est implicitement suppose partage entre les deux
parties contractantes (par ex. une ESCo et son client).
De mme, l'valuation est suppose ralise conjointement par les deux
parties, avec ventuellement un recours des consultants extrieurs pour
de grosses oprations.
guide MERVC La responsabilit de l'valuation est implicitement suppose partage
entre l'acteur qui veut faire valider son opration, et l'instance nationale
ou internationale charge de la valider.
Le guide fait une distinction entre l'valuation et la vrification / certifi-
cation. L'valuation peut tre ralise en interne ou par des consultants.
En revanche, la vrification / certification doit tre ralise par une tierce
partie.
guide europen Le commanditaire doit tre responsable de l'valuation, et donc dfinir
clairement une personne charge de la suivre.
Le choix de l'valuateur est un des points traiter lors de la planification
de l'valuation. Mais le guide ne donne pas plus d'indication pour faire
ce choix.
guide californien Dans la structure rglementaire de la Californie, le porteur de projet est
responsable de son valuation pour le faire valider par la CPUC, et l'va-
luation doit tre en gnral ralise par des consultants spcialiss.

168
Les auteurs estiment le cot d'une telle tude entre 10.000 et 60.000$ selon son ampleur.
Annexe A.3.2 Les apports des cinq guides de rfrence sur les problmatiques cls de l'valuation des actions sur
la demande en nergie
72
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Pour chaque partie de l'valuation (quantification des impacts, analyse de
la logique d'intervention, etc.), le guide liste les comptences requises
chez l'valuateur pour garantir la qualit de l'valuation.
guide de l'AIE Point non trait explicitement.
Tableau 24 - responsabilit de l'valuation et choix de l'valuateur selon les cinq guides
de rfrence


Objectifs et champs de l'valuation

La bonne dfinition des objectifs de l'valuation est un point essentiel mais dlicat pour en
assurer l'utilit. Le guide europen propose une analyse en six tapes pour les prciser et en
dduire les besoins en valuation (cf. [Birr-Pedersen 2001 pp.117]et Figure 2).

Les deux tableaux suivants rsument les rponses des cinq guides aux deux questions identi-
fies dans la section I.3.1.2 :
- pourquoi et quelles fins entreprendre une valuation ? (Tableau 25)
- quest-ce qui doit tre valu ? (Tableau 26)

Guide Objectifs et utilits de l'valuation
IPMVP
(section 1.2 pp.6-9)
Objectifs
- connatre le montant des conomies d'nergie ralises et leur dure
- disposer d'une base contractuelle pour favoriser les investissements
dans les projets d'EE-DSM
Utilits
- augmenter les conomies d'nergie
- rduire le cot de financement des oprations
- encourager une meilleure conception et gestion des oprations
- dmontrer les rductions d'missions lies aux oprations d'EE-DSM
- sensibiliser les acteurs concerns la gestion de l'nergie
- aider la promotion de l'efficacit nergtique
guide MERVC
(section 1.3 p.5)
Objectif
- dterminer avec une prcision suffisante les impacts des projets dans
le cadre des implmentations conjointes et des mcanismes de dve-
loppement propre du protocole de Kyoto
Utilits
- amliorer la fiabilit des donnes pour l'estimation des rductions
d'missions de GES
- fournir des donnes en temps rel pour rviser les oprations mi-
parcours
- introduire plus de cohrence et de transparence entre les types de
oprations, les secteurs et les rapporteurs d'oprations
- amliorer la crdibilit des oprations
- rduire les cots
- faciliter les financements
guide europen
(sections 2.2 et 2.3
pp.8-10)
Objectifs
- estimer les impacts du programme
- dterminer comment le processus de l'opration peut tre amlior
- rpondre des obligations contractuelles ou rglementaires
Annexe A.3.2 Les apports des cinq guides de rfrence sur les problmatiques cls de l'valuation des actions sur
la demande en nergie
73
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Utilits
- capitaliser les expriences
- optimiser l'utilisation des ressources financires et humaines
- fournir aux dcideurs une meilleure comprhension de l'efficacit et
de la rentabilit des programmes pour les aider dans leurs dcisions
- assurer la crdibilit et lgitimit des rsultats affichs
guide californien
(chapitre 1 pp.1-2)
Objectifs
- documenter de manire fiable les rsultats des programmes
- amliorer la conception et ralisation, et donc la rentabilit des pro-
grammes
Utilits
- fournir des rsultats fiables pour aider les prises de dcision
- permettre la comparaison entre les programmes
- identifier, comprendre et vrifier les diffrents rsultats
- fournir des recommandations pour de futurs programmes
guide de l'AIE
(section 1.1.1 pp.8-9)
Objectifs
- quantifier les rsultats obtenus de manire fiable et transparente no-
tamment dans le cadre de rglementations nationales ou internationa-
les
Utilits
- faciliter le suivi de l'application des rglementations nationales et
internationales
- fournir des bases de comparaison des programmes
Tableau 25 - les objectifs et utilits de l'valuation selon les cinq guides de rfrence

Guide Champs d'valuation abords
IPMVP - quantification des conomies d'nergie et des impacts sur la charge
guide MERVC - quantification des conomies d'nergie et des rductions d'missions
guide europen - quantification des conomies d'nergie, des impacts sur la charge et
des rductions d'missions
- analyses cots / bnfices quantitatives et qualitatives
- analyse de la logique d'intervention
- rsultats en termes de transformations de march
- rsultats en termes de sensibilisation / information
- rsultats en terme de fidlisation des clients
guide californien - quantification des conomies d'nergie, des impacts sur la charge et
des rductions d'missions
- analyses cots / bnfices quantitatives et qualitatives
- analyse de la logique d'intervention
- rsultats en termes de transformations de march
- rsultats en termes de sensibilisation / information
- autres rsultats possibles
- recommandations pour de futurs programmes
guide de l'AIE - quantification des conomies d'nergie, des impacts sur la charge et
des rductions d'missions
- analyses cots / bnfices quantitatives et qualitatives
- analyse de la logique d'intervention
- produits et rsultats intermdiaires et finals (identifis partir de
l'analyse de la logique d'intervention)
Annexe A.3.2 Les apports des cinq guides de rfrence sur les problmatiques cls de l'valuation des actions sur
la demande en nergie
74
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Tableau 26 - les champs d'valuation abords par les cinq guides de rfrence


Planification de l'valuation

Tous les guides rappellent que l'valuation doit tre prpare avant que l'opration va-
luer ne commence. D'une part pour assurer que toutes les informations ncessaires pourront
tre collectes, et d'autre part parce que cela permet de limiter les cots d'valuation.

Guide Approche de la planification des valuations
IPMVP
(section 3.3 pp.18-
21)
Prparation d'un plan de mesures et vrifications (sous la forme d'une
liste de points dfinir) faire avant le dbut des actions values.
guide MERVC
(Encadr 1, p.6)
Le guide ne parle pas explicitement de la planification de l'valuation.
Mais il la situe par rapport au temps de l'opration value :
- avant l'opration : estimations ex-ante des rsultats envisags
- pendant l'opration : suivi ("monitoring") de l'opration
- aprs l'opration : valuation ex-post des rsultats, puis rapport ("re-
porting") et enfin vrification priodique et certification
guide europen
(sections 3.2 pp.21-
24)
Points principaux du processus de planification :
- dsigner un responsable de ltude au sein de l'organisme commandi-
taire de l'valuation
- dfinir les buts de l'valuation, les questions poses, et l'utilisation
attendue
- rechercher les retours d'exprience pour des cas similaires
- organiser l'valuation (choix des valuateurs, concertation avec les
acteurs concerns, choix des mthodes employer, cahier des char-
ges)
- dfinir le niveau de dtail souhait
- raliser ltude, prsenter et utiliser les rsultats
guide californien
(chapitre 5 pp.53-92
et annexe C pp. 465-
487)
La planification de lvaluation doit tre cohrente avec le cycle du pro-
gramme, et notamment les moments de prise de dcision. La bonne int-
gration de lvaluation dans le cycle du programme est indispensable
pour engager un processus damlioration continue
169
.
Le guide identifie 12 points dont dpend le plan dvaluation (dure et
ge du programme, rsultats fournir, donnes disponibles, etc.).
Il dfinit une liste de 16 points que doit contenir ce plan et qui pourraient
servir de base un cahier des charges.
Il fournit aussi des recommandations pour fixer les priorits et les bud-
gets dvaluation.
Au final, l'annexe C reprend l'ensemble de ces points et propose un pro-
cessus trs dtaill pour prparer l'valuation.
guide de l'AIE
(section 1.3.7 pp.41-
48)
La planification est aborde indirectement au travers du choix du niveau
deffort dvaluation.
Le guide liste pour chaque tape dun programme (de sa conception sa
rvision) les activits dvaluation envisager.
Tableau 27 - les approches de planification de l'valuation des cinq guides de rfrence

169
Le guide renvoie sur ce point Rufo [1993].
Annexe A.3.2 Les apports des cinq guides de rfrence sur les problmatiques cls de l'valuation des actions sur
la demande en nergie
75
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006


A.3.2.3 Ralisation de l'valuation


Donnes utilises, collecte, traitement et analyse

Les donnes ncessaires sont dpendantes des modles de calcul utiliss, et rciproquement.
L'approche la plus courante est de lister quelles sont les donnes dj disponibles et/ou le plus
aisment accessibles, puis de choisir parmi les modles de calcul celui qui apparat alors le
plus adapt.

Le guide europen dfinit la stratgie d'valuation partir de trois composantes [SRCI 2001
pp.39] : les sources de donnes, les techniques de collecte (ou d'chantillonnage) et les tech-
niques d'analyse.

Guide Donnes principales considres
IPMVP
(section 3.3 p.19,
chapitre 4 pp.37-44)
- donnes de consommations d'nergie et profil de la demande (par
usage ou par site)
- donnes ncessaires pour les ajustements (donnes climatiques, taux
d'occupation, surfaces, donnes de production, inventaire des qui-
pements, conditions d'opration)
- prix de l'nergie
- facteurs d'mission
guide MERVC

Comme le guide s'appuie sur l'IPMVP, implicitement les donnes consi-
dres sont les mmes (avec en plus des donnes pour estimer l'effet
d'aubaine). Elles ne sont pas directement listes. Mais elles sont en gn-
ral abordes lorsque les diffrents types de modles de calcul sont pr-
sents.
guide europen
(sections 4.1et 4.2
pp.39-49, section
4.4.2 p.59, section
6.2.3 p.79, section
7.5 pp.92-96)
Le guide ne liste pas les donnes ncessaires mais les abordent au travers
des sources (primaires ou secondaires) de donnes et des modles de
calcul possibles.
Pour la quantification des impacts, les donnes sont en gros les mmes
que pour l'IPMVP, auxquelles s'ajoutent le taux de ralisation relle et la
dure de vie des actions.
Pour l'analyse cots/bnfices, le guide propose une liste des cots et
bnfices prendre en compte selon le point de vue adopt.
Pour les transformations de march, le guide fournit une liste d'indica-
teurs envisageables.
Pour l'analyse de la logique d'intervention, le guide prsente des conseils
de base pour la conception de questionnaires.
guide californien
(chapitre 5 pp.53-92)
Le guide ne liste pas directement les donnes ncessaires, mais en fait
tat lorsque les modles de calcul et/ou d'analyse sont prsents.
guide de l'AIE
(section 1.3.7 pp.41-
48)
Idem que pour le guide californien. Mais il est possible de lister ici les
grandes catgories de donnes considres :
- donnes de consommations d'nergie et facteurs d'mission
- donnes de produits ("outputs") et rsultats ("outcomes")
- autres donnes lies aux indicateurs spcifis
- donnes de cots associs au programme
Tableau 28 - les principales donnes considres par les cinq guides de rfrence
Annexe A.3.2 Les apports des cinq guides de rfrence sur les problmatiques cls de l'valuation des actions sur
la demande en nergie
76
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006

Guide Principales mthodes de collecte (ou sources de donnes) proposes
IPMVP
(section 3.3 p.19,
chapitre 5 pp.45-48,
annexe C pp.81-86 )
Le guide conseille de collecter les donnes ncessaires lors d'un audit
dtaill. De plus, il traite en dtails des questions lies la mesure di-
recte des consommations ou de la demande dans son chapitre 5. Enfin
son annexe C est consacre aux techniques courantes de mesures selon
les principales grandeurs physiques mesurer.
guide MERVC
(section 4.2, p.31)
- estimations physiques ("engineering calculations")
- enqutes
- modlisation
- mesures directes
- audits et inspections sur site
- collecte des donnes de facturation
guide europen
(sections 4.1 pp.39-
42, chapitre 7 pp.87-
98)
Le guide distingue les sources primaires (donnes propres l'opration
value) et les sources secondaires (donnes de rfrence).
Sources primaires :
- systme de suivi du programme
- enqutes (courrier, tlphone, ou en personne)
- inspections sur site
- relevs et/ou facturations de consommations d'nergie
- mesures directes
Sources secondaires :
- organismes publics
- tudes existantes
- fabricants d'quipements
- organismes de recherche
- organismes privs spcialiss
De plus, le chapitre 7 est consacr aux techniques d'enqute et la
conception de questionnaire.
guide californien

Le guide n'aborde pas part les mthodes de collecte de donnes. Elles
sont abordes lors de la description des mthodes d'analyse. Les mtho-
des de collecte envisages sont grosso modo les mmes que celles du
guide europen.
guide de l'AIE Les mthodes de collecte de donnes sont abordes lors de la description
des mthodes d'valuation par type de programme.
Tableau 29 - mthodes de collecte de donnes proposes par les cinq guides de rfrence

Guide Principales mthodes de calcul des impacts bruts
IPMVP
(tableau 1 p.22 )
Le guide propose 4 options :
- option A : calculs physiques directs partir de paramtres mesurs et
de paramtres estims ex-ante
- option B : calculs physiques partir des consommations d'nergie de
l'usage concern mesures directement (et sparment du reste)
- option C : analyse comparative ou par rgression des consommations
d'nergie d'un btiment
- option D : simulation des consommations d'nergie aprs un talon-
nage partir de donnes releves
guide MERVC
(section 4.2, p.31)
Le guide liste les mthodes suivantes :
- modles de calculs physiques ("engineering methods")
Annexe A.3.2 Les apports des cinq guides de rfrence sur les problmatiques cls de l'valuation des actions sur
la demande en nergie
77
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
- modles statistiques basiques
- modles statistiques multi variables (par ex. modles de rgression
multiple et modles de demande conditionnelle)
- mthodes combines
Chaque type de modle est prsent plus en dtails dans la suite de la
section 4.2, avec chaque fois un tableau pour rcapituler les principales
rfrences bibliographiques.
Enfin le tableau 9 (p.46) donne une synthse des avantages et
inconv nients de chacune des modles .
guide europen
(section 4.2 pp.42-
49)
Le guide distingue d'une part les techniques d'chantillonnage (alatoire,
stratifie, pondre, ou par ratio) et les mthodes de calcul :
- calculs physiques (algorithmes simples ou sophistiqus, et modles
de simulation)
- modles statistiques (comparaisons simples, comparaisons avec
corrections climatiques, analyses multivariables)
- mthodes combines
Le guide (section 4.2) dcrit succinctement chaque modle, en donnant
des exemples et en listant les cas o ils s'appliquent le mieux. Il fournit
ensuite (section 4.3) quelques conseils pour choisir entre un modle sim-
ple ou plus complexe.
guide californien
(Chapitre 6, pp.105-
113 et 123-129)
Le guide distingue les mthodes bases sur l'analyse des factures et cel-
les de calculs physiques directs.
- mthodes d'analyse des factures : avec corrections climatiques, ana-
lyse de demande conditionnelle, mthode combine (intgrant des
calculs physiques), analyse de rgression
- mthodes de calculs physiques : algorithmes ou modles de simula-
tion
Dans son chapitre 6, le guide fournit des conseils pour choisir entre les
deux catgories (p.100) puis prsente une description trs dtaille de
chacune des mthodes et de leurs conditions d'application.
Le guide reprend de plus dans son chapitre 7 les options proposes par
l'IPMVP dans le cas o des mesures et/ou des inspections sont possibles.
Le guide consacre enfin un chapitre entier (le 13) aux questions d'chan-
tillonnage.
En outre, le guide cite deux rfrences [Ridge 1994, Schiffman 1993]
qui comparent les mthodes physiques et statistiques.
guide de l'AIE
(section 1.3.5 pp.35-
37)
Le guide distingue les modles suivants :
- calculs physiques bass sur des estimations (algorithmes ou modles
de simulation)
- calculs physiques avec certains paramtres mesurs (algorithmes)
- analyse des factures (mmes catgories que le guide californien)
- calculs directs partir des consommations mesures
Le tableau 1.2.2 du guide liste les cas typiques.
La description de chaque modle est succincte dans la section 1.3.5, mais
le guide propose ensuite pour chacun des grands types de programme
considrs une mthode concrte (mais sans rentrer dans les dtails pra-
tiques).
Tableau 30 - mthodes de calcul des impacts bruts selon les cinq guides de rfrence
Pour plus de dtails sur les mthodes de calcul des impacts, se reporter la section III.3.1.1.
Annexe A.3.2 Les apports des cinq guides de rfrence sur les problmatiques cls de l'valuation des actions sur
la demande en nergie
78
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006


Le rfrentiel

L'approche utilise pour dfinir le rfrentiel est souvent relie au modle de calcul et aux
facteurs d'ajustement pris en compte.

Guide Approche du rfrentiel ("baseline")
IPMVP
(section 3.1 p.17)
La rfrence prise est la situation avant la ralisation des actions (pour le
mme usage ou btiment), laquelle il faut appliquer les facteurs d'ajus-
tement (cf. Tableau 32 ci-aprs).
Le cas des btiments nouveaux est trait dans un volume part (volume
III). La dfinition du rfrentiel y est trait dans son chapitre 2. Le guide
recommande de prendre comme rfrence un niveau de consommation
"standard", si possible dfini par une rglementation.
guide MERVC
(section 1.2 p.3,
section 3.2 pp.20-22,
section 4.3 p.55)
La rfrence est ce qui serait arriv si l'opration n'avait pas t rali-
s. Le guide reprend ensuite les conditions poses dans le protocole de
Kyoto : les rsultats pris en compte sont ceux qui sont additionnels.
Implicitement le guide envisage deux types de rfrentiel : la situation
avant la ralisation des actions et une situation "standard" correspondant
un niveau de performance moyen du parc ou du march selon les cas.
La mthode propose est d'estimer une rfrence avant de raliser l'op-
ration, puis de l'ajuster a posteriori en valuant notamment l'effet d'au-
baine.
guide europen
(section 4.2.1 p.43,
section 5.1 p.63)
Le guide utilise la mme dfinition de la rfrence que le guide
MERVC. Il suppose une situation idale o la rfrence peut tre dfinie
en comparant le groupe expos l'opration avec un groupe tmoin non
expos mais identique. Mais cette situation n'existe pas en ralit. Les
possibilits proposes (avec leurs difficults propres) sont :
- une comparaison avant / aprs (valuer une volution "virtuelle" pour
un scnario sans l'opration)
- une comparaison entre participants et non-participants (risque impor-
tant de biais d'chantillonnage du fait d'une auto-slection)
- une comparaison entre exposs et non-exposs (difficults de trouver
un groupe tmoin rellement comparable et/ou de tenir compte des
diffrences entre les deux groupes)
guide californien
(Chapitre 6, pp.103-
105 et 120-121)
L'approche du rfrentiel est diffrente selon les deux types de modles
de calcul.
Pour les modles statistiques, dfinir le rfrentiel correspond choisir
une situation "tmoin" comme propos dans le guide europen.
Pour les modles physiques, l'approche rejoint celle propose dans le
guide MERVC, en prcisant dans quel cas il faut utiliser la moyenne du
parc, du march, le niveau rglementaire ou la situation initiale propre
l'opration.
guide de l'AIE
(section 1.3.3 pp.29-
32)
Le guide distingue plusieurs mthodes pour dfinir le rfrentiel :
- mthodes exprimentales (quivalentes celles proposes dans le
guide europen)
- analyses de sries temporelles ou d'historiques (comparaison
avant/aprs amliore)
- enqute directe auprs de la cible pour savoir ce qu'elle aurait fait si
Annexe A.3.2 Les apports des cinq guides de rfrence sur les problmatiques cls de l'valuation des actions sur
la demande en nergie
79
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
l'opration n'avait pas eu lieu
- utilisation du niveau standard rglementaire
- mthodes d'extrapolation (bases sur un jeu d'hypothses et/ou des
dires d'experts)
Le guide examine ensuite la question du rfrentiel pour chaque grand
type de programme trait.
Tableau 31 - approches du rfrentiel des cinq guides de rfrence


Biais / facteurs d'ajustement

Guide Facteurs d'ajustement et correctifs abords
IPMVP
(section 3.1 p.17,
section 4.1 p.37)
Les ajustements pris en compte sont en fait des facteurs correctifs :
- corrections climatiques
- corrections structurelles (surfaces, taux et nature des quipements)
- corrections d'activit (taux d'occupation, donnes de production,
conditions d'opration)
- corrections sur la ralisation effective de l'action (bonne application,
dure de vie)
De plus le guide distingue les ajustements prvisibles ("routine adjust-
ments"), qui peuvent tre calculs, et factuels ("non-routine adjuste-
ments") qui doivent tre mesurs.
guide MERVC
(section 3.2 pp.20-
22, section 4.3.1
p.58)
Le guide donne quelques exemples de facteurs correctifs en plus de ceux
cits par l'IPMVP : croissance, volutions technologiques, des prix, r-
glementaires.
Pour les facteurs d'ajustement, le guide se concentre sur l'valuation de
l'effet d'aubaine pour lequel il cite les mthodes courantes (enqutes,
tudes statistiques, ratios standard). Les auteurs considrent que l'effet
d'entranement ("spill-over") est le plus souvent soit ngligeable soit in-
tgr dans les effets de transformation de march.
guide europen
(section 5.2 pp.66-
72)
Le guide liste les facteurs d'ajustement suivants :
- effet d'aubaine ("free-rider") (complet, partiel ou diffr)
- effet d'entranement ou boule de neige ("spill-over")
- effet rebond
- effet de persistance
Pour l'effet d'aubaine, le guide fournit des conseils pour la ralisation
d'enqute (notamment pour croiser les rsultats) et cite aussi les mtho-
des comparatives (groupe tmoin), d'analyses conjointes et de modlisa-
tion en choix discret.
guide californien
(Chapitre 6, pp.133-
145 et chapitre 12
pp.292-294)
Le guide ne traite pas sparment des facteurs correctifs qui sont abords
lors de la description des modles de calcul. Les facteurs cits sont qui-
valents ceux cits par l'IPMVP et le guide MERVC.
L'approche pour les facteurs d'ajustement est de dterminer un ratio pour
passer des rsultats bruts aux rsultats nets (tudes NTGR pour "Net-To-
Gross Ratios"). Ces ratios rendent surtout compte de l'effet d'aubaine.
Annexe A.3.2 Les apports des cinq guides de rfrence sur les problmatiques cls de l'valuation des actions sur
la demande en nergie
80
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Le guide distingue deux types de mthodes pour les dfinir (par enqutes
ou par tudes conomtriques
170
) et les dtaillent.
Enfin le guide fournit aussi une liste des biais potentiels lis aux hypo-
thses utilises :
- biais d'chantillonnage (de non-rponse, d'auto-slection, etc.)
- biais de mesures (dans les questions d'une enqute, de modlisation,
de calibration d'appareil de mesure, etc.)
- biais de spcification d'un modle statistique
- biais dans la dfinition du rfrentiel
- biais d'interprtation des rsultats (et notamment de leur causalit)
guide de l'AIE
(section 1.3.3 p.29-
32 et section 1.3.5
pp.34)
Le guide cite les facteurs correctifs les plus courants (corrections clima-
tiques, conditions conomiques qui influent sur les niveaux de produc-
tion et les prix de l'nergie, taux d'occupation).
Les facteurs d'ajustement sont abords conjointement la dfinition du
rfrentiel. Le guide reprend l'approche du guide californien avec un
ratio pour passer des rsultats bruts aux rsultats nets. Ce ratio est cens
inclure directement les effets d'aubaine et d'entranement.
Tableau 32 - facteurs d'ajustement et correctifs pris en compte par les cinq guides de
rfrence


Erreurs et incertitudes, et cots d'valuation

La question des incertitudes sur les rsultats valus est centrale quant leur validit et donc
leur utilit. Elle est le plus souvent relie celle des cots d'valuation, car les gains en prci-
sion ncessitent en gnral des moyens d'valuation supplmentaires. Il s'agit alors de recher-
cher le meilleur compromis prcision / cot.

Guide Traitement des erreurs et incertitudes
IPMVP
(sections 4.2 p.37,
4.11 p.43 et 5.5 p.46,
et annexe B p.75-80)
La logique du guide est de connatre au mieux les incertitudes sur les
rsultats pour scuriser les financements.
Le guide associe les incertitudes des erreurs potentielles et signale que
toutes ne peuvent tre quantifies, en particulier celles lies aux hypo-
thses ralises. Pour celles qui peuvent tre quantifies, le guide re-
commande de les exprimer sous la forme d'un intervalle de confiance.
Le guide liste les erreurs quantifiables suivantes et dcrit dans son an-
nexe B les mthodes pour quantifier les incertitudes associes :
- erreurs d'instrumentation : en gnral ngligeable et fournies pas les
fabricants
- erreurs de modlisation : indicateurs statistiques (coefficient de
corrlation, erreur type, etc.)
- erreurs d'chantillonnage : approches statistiques de l'erreur type
En outre, le guide signale que les conomies d'nergie ne peuvent tre
considres comme relles que dans le cas o elles rsultent en une r-
duction relative plus forte que le bruit observ sur les donnes antrieu-
res l'action.

170
Les auteurs signalent par ailleurs que les tudes conomtriques ont souvent recours des enqutes pour
traiter de l'effet d'aubaine.
Annexe A.3.2 Les apports des cinq guides de rfrence sur les problmatiques cls de l'valuation des actions sur
la demande en nergie
81
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
guide MERVC
(chapitre 9 pp.72-73)
Le guide distingue trois sources d'incertitudes : l'utilisation de reprsen-
tation simplifie avec des valeurs moyennes, les incertitudes sur la
comprhension des processus qui mnent aux missions de GES, et les
incertitudes lies aux paramtres qui ne peuvent tre mesurs directe-
ment.
Les auteurs signalent l'importance d'indiquer le niveau de prcision des
rsultats, soit quantitativement (sous la forme d'un intervalle de
confiance ou quivalent), soit qualitativement (prcision faible, moyenne
ou bonne).
Pour rendre compte de la qualit de l'valuation, le guide fournit de plus
des normes de garantie qualit, i.e. une liste de questions cls qui doivent
tre renseignes dans les rapports d'valuation.
Enfin le guide cite dans sa section 4.13.1 l'exemple intressant de l'US-
EPA
171
qui attribue un bonus/malus selon la rigueur de l'valuation rali-
se.
guide europen
(section 3.4 pp.26-
28)
Le guide propose un processus en six tapes pour trouver le meilleur
compromis cot / prcision. Il s'agit dans un premier temps d'identifier
les sources possibles d'incertitudes, puis de les hirarchiser avant de r-
aliser des tests de sensibilit sur les paramtres les plus importants. En-
fin, les cots d'accs des informations supplmentaires sont mis en
regard des gains d'incertitudes qu'ils permettent, la lumire des tests de
sensibilit.
guide californien
(Chapitre 12 pp.287-
304)
Le guide consacre un chapitre part entire au traitement des incertitu-
des.
Concernant les incertitudes associes aux hypothses faites, le guide
suggre d'tudier diffrents scnarios pour faire ressortir les variations
qu'elles induisent
Pour les incertitudes lies l'chantillonnage ou des enqutes, le guide
renvoie des tests statistiques qui sont abords dans le chapitre 13.
Le guide recommande aussi de raliser des tudes spcifiques pour les
paramtres identifis comme dterminants pour la prcision du rsultat.
Le guide cite de plus des tudes de rfrence sur l'estimation d'incertitu-
des pour des valuations d'conomies d'nergie.
Enfin les auteurs soulignent qu'aucune mthode d'analyse n'est a priori
plus prcise que les autres, car elles reposent toutes sur des hypothses et
que c'est la validit de ces hypothses qui dtermine avant tout la fiabili-
t des rsultats obtenus. Dans ce sens, les auteurs recommandent de
combiner les mthodes d'analyse pour confirmer la fiabilit des rsultats.
guide de l'AIE
(section 1.3.7 pp.41-
48)
La question des incertitudes n'est pas traite directement, elle est aborde
par l'approche des niveaux d'effort d'valuation. Le guide dfinit trois
niveaux d'effort qui implicitement correspondent trois niveaux de pr-
cision (approche qualitative).
Tableau 33 - traitement des erreurs et incertitudes dans les cinq guides de rfrence

Guide Approche des cots d'valuation
IPMVP
(sections 4.10 p.42,
Le guide liste les facteurs influenant les cots d'valuation, et signale
que pour la plupart ils peuvent tre partags avec des cots de rgulation

171
Rfrence faite au programme de l'United-States Environment Protection Agency concernant les missions de
dioxyde de soufre et les pluies acides.
Annexe A.3.2 Les apports des cinq guides de rfrence sur les problmatiques cls de l'valuation des actions sur
la demande en nergie
82
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
et 4.11 p.43)
que pour la plupart ils peuvent tre partags avec des cots de rgulation
ou de facturation. Ces cots sont de plus rpartir entre l'ESCo et son
client. Et pour que l'opration reste rentable, les cots d'valuation ne
doivent pas excder une certaine partie (le guide cite 10%) des cono-
mies attendues.
Ainsi le choix du niveau de prcision est fonction du gain apport, i.e.
les cots additionnels ne doivent pas dpasser la valeur de la part des
conomies d'nergie qu'ils permettent de prciser.
guide MERVC
(sections 4.11 p.27 et
4.2.10 p.50)
Les cots d'valuation dpendent principalement des donnes ncessai-
res supplmentaires, de la taille de l'opration, de la mthode de suivi
utilise et de la frquence requise pour rcuprer les donnes.
Le guide souligne qu'il ne peut pas tre dfini un cot standard d'valua-
tion (ni en absolu, ni en relatif), et qu'il peut parfois tre utile d'avoir des
cots initiaux d'valuation plus importants, car ils sont ensuite rentabili-
ss dans la dure (notamment quand ils permettent une meilleure gestion
des consommations d'nergie). A titre indicatif, le guide cite un cot
moyen de 5 10% du budget de l'opration partir des expriences am-
ricaines.
De plus les auteurs argumentent que l'exprience montre qu'une opra-
tion bien suivie et value donne de meilleurs rsultats. Ils signalent aus-
si qu'un rsultat plus prcis a plus de valeur
172
. Le compromis est donc
une valuation dont les cots n'excdent pas les gains en valeur qu'elle
permet.
Les auteurs sont en outre conscients que les cots d'valuation doivent
tre les plus faibles possibles pour ne pas dcourager les parties concer-
nes d'valuer les oprations.
guide europen
(sections 3.4 pp.26-
28 et 3.6 p.31)
Le guide propose un processus pour trouver le meilleur compromis cot
/ prcision (cf. Tableau 33 ci-dessus). Il relie aussi le cot d'valuation
au choix du niveau d'effort, en donnant quelques conseils ce sujet, mais
sans donner d'lments concrets quant aux cots d'valuation.
guide californien
(chapitres 5 p.75, 8
p.228, et 12 p.310-
313)
Le guide cite un cot moyen de 4% des budgets des oprations pour les
valuations ralises en Californie en 2002-2003. Les auteurs signalent
que cette moyenne est indicative. D'abord parce que les rapports corres-
pondants signalent que le manque de moyens pour les valuations ne
permet pas de fournir des rsultats fiables (la plupart des rsultats sont
des conomies supposes et non vrifies).
Les auteurs rappellent ensuite qu'il n'y a pas de valeur standard pour
fixer les cots d'valuation. L'valuation d'une opration pilote sera par
exemple plus coteuse que celle d'une opration "mture". Il faut donc
aussi envisager les cots d'valuation sur le long terme et pas unique-
ment sur le cot terme.
Une question cl pour dfinir le niveau d'effort adquat est de voir quelle
sera l'utilisation des rsultats obtenus, et en particulier quels sont les ris-
ques de prendre une mauvaise dcision partir de ces rsultats.
Le guide fournit en outre des conseils pour fixer les priorits de l'valua-
tion, choisir le niveau d'effort et trouver l'allocation optimale des moyens
d'valuation.
guide de l'AIE Le guide propose trois niveaux d'effort d'valuation, et fournit des

172
ce que prend en compte l'US-EPA dans son systme
Annexe A.3.2 Les apports des cinq guides de rfrence sur les problmatiques cls de l'valuation des actions sur
la demande en nergie
83
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
(section 1.3.7 pp.41-
48)
conseils pour choisir le niveau le mieux adapt.
Concernant les cots, les auteurs signalent qu'ils ont trop peu de retours
d'exprience sur ce point pour donner des indications significatives et
citent juste les fourchettes de cots relatifs moyens donns par les autres
guides.
Tableau 34 - approche des cots d'valuation dans les cinq guides de rfrence


Analyse conomique

Guide Approche de l'analyse conomique
IPMVP
(sections 4.5 p.39 et
annexe A pp.71-73)
Simple calcul des conomies financires ralises partir des conomies
d'nergie
guide MERVC
(section 8.2 p.70)
Analyse cots / bnfices mentionne, mais pas dtaille.
guide europen
(section 4.4 pp.55-
62)
Le guide reprend la mthode prsente par Johansen et Hoog [1995],
avec le dtail des cots et bnfices prendre en compte selon les diff-
rents points de vue.
guide californien
(chapitre 14 pp.385-
394)
Le guide renvoie pour l'analyse de la rentabilit de l'opration au Stan-
dard Practice Manual mis jour en 2001 par la CPUC, qui constitue le
guide rglementaire dans ce domaine en Californie.
Cependant le guide reprend certains points pour amliorer cette analyse :
- quels sont les facteurs qui influencent la rentabilit d'une opration
- comment prendre en compte les catgories spciales de cots (sur-
cots pour les participants, cots de dmarrage ou d'amlioration
d'une opration, cots d'valuation)
- comment calculer les cots vits de production et transport d'ner-
gie (en particulier en tenant compte des variables spatiotemporelles)
guide de l'AIE
(section 1.3.6 pp.39-
41)
Le guide liste les grandes catgories de cots et bnfices et fait la diff-
rence entre les indicateurs d'efficience (produits rapports aux cots) et
de rentabilit (impacts rapports aux cots). Il cite comme indicateur de
rentabilit le plus courant la valeur actualise nette ("net present value").
Tableau 35 - approche de l'analyse conomique dans les cinq guides de rfrence


Evaluation des autres effets de l'opration

Guide Autres effets abords
IPMVP

Le guide est conu pour s'appliquer aussi aux conomies d'eau. En outre,
le volume II de l'IPMVP est consacr la qualit de l'environnement
intrieur (confort thermique, niveau d'clairement, etc.).
guide MERVC
(sections 4.2 p.54-55,
8.1 pp.68-69 et 8.2
pp.70-71)
- effets de transformation de march (mthode propose base sur les
trois critres dfinis par Schlegel et al. [1997b])
- autres impacts environnementaux (pas de mthode, mais une liste des
impacts envisager)
- impacts socio-conomiques (pas de mthode, mais une liste des im-
pacts et des conseils pour dfinir des indicateurs pertinents)
Annexe A.3.2 Les apports des cinq guides de rfrence sur les problmatiques cls de l'valuation des actions sur
la demande en nergie
84
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
guide europen
(sections 6.2 pp.77-
79, 6.3 p.79, 6.4
p.80, 6.5 p.82-84)
- effets de transformation de march (approche mthodologique et
conseils pour la dfinition d'indicateurs)
- cots vits de transport et distribution d'nergie (pas de mthode)
- fidlisation des clients (quelques lments de mthode)
guide californien
(chapitres 9, 10 et 11
pp. 229-286)
- effets de transformation de march (mthodologie dtaille)
- information / ducation (quelques lments de mthode)
- autres effets non nergtiques (approche globale et exemples)
guide de l'AIE
(sections 1.3.2 pp.32-
33 et 1.3.5 p.38)
- produits et rsultats intermdiaires (y compris les effets de transfor-
mation de march) de l'opration (conseils pour les identifier et dfi-
nir les indicateurs adapts)
- autres effets (quelques exemples juste cits comme les gains en ter-
mes d'emploi et de comptitivit)
Tableau 36 - autres effets abords par les cinq guides de rfrence


A.3.2.4 Rsultats et exploitation de l'valuation


Prsentation de l'opration value et des rsultats de
l'valuation

Guide Format de prsentation / rapport propos
IPMVP

Point non trait.
guide MERVC
(partie 5 p.61 et
annexes A, B et C)
Le guide propose trois formats de fiche respectivement pour le rapport
d'estimation, d'valuation et de vrification.
Les fiches ont la mme structure principale avec quatre sections : des-
cription de l'opration, consommations d'nergie et missions, autres
impacts environnementaux, impacts socio-conomiques.
Concernant le rapport d'valuation, la fiche est assez synthtique en ce
qui concerne la prsentation des rsultats. Elle met surtout l'accent sur la
prcision et la qualit de l'valuation, notamment au travers des critres
de garantie qualit.
guide europen
(section 8.1 p.99 et
annexe C)
Le guide fournit d'abord des conseils sur la prsentation des rsultats,
avec une liste des points importants faire ressortir et une liste de desti-
nataires potentiels. Les auteurs soulignent en outre que la question de la
prsentation des rsultats est dlicate : d'une part pour qu'ils apparaissent
comme fiables et ne soient pas source de polmiques, d'autre part pour
qu'ils ne soient pas perus comme des critiques ngatives mais comme
un apport positif.
Puis dans son annexe C, le guide prsente deux exemples de format de
prsentation de l'opration avant de proposer un nouveau format de fiche
de rapport d'valuation complt par une check-list qui rassemble en une
page les points importants de l'valuation.
guide californien
(chapitres 9, 10 et 11
pp. 229-286)
Pas trait directement. Des conseils sont fournis au fur et mesure de la
description des mthodes d'analyse, notamment sur le fait que les rsul-
tats prsents doivent tre accompagns d'information sur leur prcision
et leur mthode de dtermination.
guide de l'AIE Le guide ne traite pas explicitement de cette question. Toutefois dans son
Annexe A.3.2 Les apports des cinq guides de rfrence sur les problmatiques cls de l'valuation des actions sur
la demande en nergie
85
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
(volume II, section
1.4 p.6)
volume II, les expriences de chaque pays sont prsentes avec une
structure standard.
Tableau 37 - conseils des guides de rfrence pour la prsentation des valuations


Exploitation de l'valuation

Guide Approche de l'exploitation des valuations
IPMVP
(section 1.2 pp.7-9 et
chapitre 2 pp.13-16)
L'utilit premire du processus de suivi vrification propose par le
guide est de fournir une base pour l'application d'un contrat entre une
ESCo et son client, et donc de servir scuriser le financement des ac-
tions d'EE-DSM.
Les auteurs argumentent de plus qu'un bon suivi permet de garantir voire
d'augmenter les conomies d'nergie car il assure l'application de bonnes
pratiques et une meilleure dure de vie aux actions.
De plus, l'anticipation du plan de suivi d'une opration permet souvent
d'en amliorer la conception et d'en assurer la qualit.
Ils soulignent aussi l'importance du suivi et de l'valuation pour assurer
la crdibilit des actions d'EE-DSM, ce qui est ensuite essentiel leur
dveloppement.
guide MERVC
(section 1.3 pp.5-6)
Le but premier des valuations dfinies par le guide est de faire valider
les rsultats de projets dans le cadre du protocole de Kyoto.
L'valuation doit donc permettre d'assurer la fiabilit et crdibilit des
rsultats affichs (les conseils de garantie qualit vont dans ce sens).
La validation devant tre internationale, l'valuation doit aussi assurer la
transparence et la cohrence de ces rsultats, en particulier dans l'optique
d'un march internationale de droits d'missions de GES.
L'utilit de l'valuation est aussi de fournir des lments pour amliorer
les oprations (notamment mi-parcours) et pour scuriser les finance-
ments.
guide europen
(chapitre 8 pp.99-
101)
Le guide liste les intrts possibles des rsultats de l'valuation, et en
particulier : justifier l'utilit de l'opration, fournir des recommandations
pour de futures actions, garantir des financements, construire un savoir-
faire et encourager l'intrt dans l'efficacit nergtique.
Le guide aborde en outre la question de l'appropriation et de la percep-
tion de l'valuation par les acteurs concerns (sans rentrer dans les d-
tails).
Le guide traite aussi du choix du moment pour rapporter l'valuation,
notamment par rapport au calendrier des dcisions. Les auteurs souli-
gnent alors l'intrt de dvelopper des indicateurs de performance pou-
vant servir aux dcisions, notamment lorsqu'ils sont associs des va-
leurs seuil. Ils voient dans ce type d'indicateur un moyen de mieux cibler
les efforts (de l'opration et de son valuation) et d'augmenter l'utilit de
l'valuation pour les dcideurs.
Enfin l'valuation permet de mieux comprendre les mcanismes d'un
programme dans l'optique de le reproduire (transfert de savoir-faire).
guide californien
(chapitres 1 p.1-2, 4
p.27-28 et 42, 5 p.59)
Le but premier des valuations est de faire valider les oprations d'EE-
DSM dans le cadre rglementaire dfini par la CPUC.
Mais le guide souligne bien que l'valuation a les deux dimensions rca-
Annexe A.3.2 Les apports des cinq guides de rfrence sur les problmatiques cls de l'valuation des actions sur
la demande en nergie
86
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
pitulative et formative.
L'valuation sert donc d'une part justifier les rsultats d'une opration,
notamment pour en garantir la rentabilit et scuriser son financement.
D'autre part, elle permet de fournir un retour sur l'opration dans l'opti-
que de l'amliorer.
Elle constitue en outre un lment important d'aide la dcision, et doit
ce titre tre intgre dans le cycle global des politiques d'actions. C'est
aussi un argument qui justifie des financements publics consacrs
l'valuation.
guide de l'AIE
(section 1.1.1 p.8-9)
L'utilisation des valuations est aborde au travers des rcentes volu-
tions de contexte (protocole de Kyoto, Directives europennes, etc.) qui
impliquent des besoins en valuation. Ces besoins concernent le plus
souvent la justification des rsultats obtenus.
Tableau 38 - approches de l'exploitation des valuations des cinq guides de rfrence

87
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006










Annexes B au Chapitre II





88
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Les Annexes B viennent complter les analyses prsentes au Chapitre II sur les activits lo-
cales de MDE et leur valuation. Pour faciliter le lien entre les deux, les Annexes B repren-
nent la structure du Chapitre II.

Dans un premier temps, nous apportons des dtails sur l'analyse du contexte au niveau natio-
nal puis local des activits de MDE en France. Nous regardons d'abord les spcificits du sec-
teur nergtique franais (Annexe B.1.1), puis nous esquissons un bilan des activits de MDE
en France depuis les chocs ptroliers de 1974 et 1979 en nous appuyant sur les principaux
retours disponibles (Annexe B.1.2). Nous tudions alors plus particulirement le rle et la
place de l'chelon local dans les politiques nergtiques pour en souligner l'essor croissant et
les besoins en valuation associs (Annexe B.1.3). Pour complter cette revue du contexte
local, nous dcrivons le rapport l'valuation qu'entretiennent les principaux acteurs (Annexe
B.1.4) et cadres oprationnels (Annexe B.1.5) des activits locales de MDE en France. Enfin,
nous revenons sur deux exemples de cadre de dveloppement de politiques nergtiques loca-
les : le SSCE et les OPATB (Annexe B.1.6).

Dans un second temps, nous exposons les tapes ralises pour caractriser les activits loca-
les de MDE : leur inventaire (Annexe B.2.1), les recherches bibliographiques sur les typolo-
gies existantes (Annexe B.2.2), et les rsultats des analyses de l'inventaire (Annexe B.2.3) au
moyen des critres de segmentation dfinis dans la section II.2.2.2 du Chapitre II.

Dans un troisime temps, nous nous intressons aux pratiques actuelles de l'valuation ex-post
des activits locales de MDE en France. D'abord en revenant sur les approches au niveau na-
tional (Annexe B.3.1), puis par le biais d'tudes de cas sur des retours d'expriences locales
suffisamment documents (Annexe B.3.2 et Annexe B.3.3), et par une revue des autres exem-
ples marquants de MDE locale en France (Annexe B.3.5). Par ailleurs, les tudes de cas ont
aussi t l'occasion de faire le lien entre l'valuation et les tudes sur les consommations
d'nergie (Annexe B.3.4). Nos recherches bibliographiques et nos contacts pendant la thse
nous ont aussi permis d'avoir un aperu des expriences europennes de MDE locale (Annexe
B.3.6).

Enfin, nous avons souhait proposer une synthse de la thse de Franck Trouslot sur l'valua-
tion des activits de l'ADEME Poitou-Charentes dans les annes 1980, car elle constitue une
analyse trs intressante de l'valuation des politiques publiques au niveau local (Annexe
B.3.7).


Sommaire des Annexes B
89
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Annexes B.1 Complments l'analyse du contexte des activits de MDE au niveau local
.................................................................................................................................................. 91
Annexe B.1.1 Les principales caractristiques du contexte national franais................... 92
B.1.1.1 La structure des marchs de l'nergie, sa rgulation et les particularits franaises ................. 92
B.1.1.2 Les principales motivations selon les acteurs ........................................................................... 95
B.1.1.3 Les principales approches pour les politiques et programmes d'EE-DSM............................... 99
Annexe B.1.2 Bilan de 30 ans d'activits de MDE en France......................................... 106
B.1.2.1 La spcificit de la tarification marginale : un levier important mais avec certaines limites.. 106
B.1.2.2 1973-1993 : le bilan mitig de politiques conjoncturelles ...................................................... 107
B.1.2.3 Annes 1990 : la MDE relgue larrire-plan .................................................................... 110
B.1.2.4 Perspectives ............................................................................................................................ 112
Annexe B.1.3 Quel rle de l'chelon local dans les politiques nergtiques ?................ 118
B.1.3.1 Politiques de dcentralisation et matrise de l'nergie dans les annes 1980.......................... 118
B.1.3.2 Un nouvel lan li au renouveau de l'intercommunalit, au renforcement des Rgions et
l'ouverture des marchs ....................................................................................................................... 120
B.1.3.3 Quelle place pour les actions de MDE dans les lans du dveloppement durable et du "think
global, act local" ?............................................................................................................................... 123
Annexe B.1.4 Les principaux acteurs des oprations locales de MDE et leur rapport
l'valuation....................................................................................................................... 128
B.1.4.1 EDF, un acteur central de l'nergie avec un rseau local historiquement implant ................ 128
B.1.4.2 Le Dlgations Rgionales de lADEME, une source importante dinformations et un exemple
de dispositif de suivi............................................................................................................................ 129
B.1.4.3 Les Espaces Info Energie et/ou Agences Locales de l'Energie............................................... 132
B.1.4.4 Les Agences Rgionales de lEnergie et de lEnvironnement (ARENE) et les Observatoires
Rgionaux de lEnergie (ORE) ........................................................................................................... 134
B.1.4.5 Autorits concdantes, syndicats dlectrification et GRD..................................................... 136
B.1.4.6 Autres ..................................................................................................................................... 137
Annexe B.1.5 Les principaux cadres oprationnels et leur rapport l'valuation........... 140
B.1.5.1 Accord cadre EDF-ADEME................................................................................................... 140
B.1.5.2 Le FAC ................................................................................................................................. 141
B.1.5.3 Contrats de plan Etat-Rgion (CPER) (et Rgion-ADEME) .................................................. 141
B.1.5.4 Les outils de l'ADEME pour l'efficacit nergtique au niveau local..................................... 142
B.1.5.5 Les certificats dconomies dnergie .................................................................................... 144
B.1.5.6 Conventions spcifiques un territoire................................................................................... 146
Annexe B.1.6 Exemples de cadres de dveloppement de politiques nergtiques locales
......................................................................................................................................... 148
B.1.6.1 Le SSCE : une tentative avorte ? .......................................................................................... 148
B.1.6.2 Les OPATB : un exemple de croisement de cadre sectoriel et d'approche territoriale .......... 149
Annexes B.2 Complments l'tude des oprations locales de MDE en France ........... 151
Annexe B.2.1 Mthodes et rsultats de l'inventaire des oprations locales de MDE en
France .............................................................................................................................. 152
B.2.1.1 Mthode utilise pour l'inventaire........................................................................................... 152
B.2.1.2 Rsultats de l'inventaire .......................................................................................................... 153
B.2.1.3 extraits de l'inventaire ralis.................................................................................................. 155
Annexe B.2.2 Exemples de typologies utilises pour les activits de MDE................... 159
B.2.2.1 Typologies utilises pour des bases de donnes d'actions ou de programmes........................ 159
B.2.2.2 Typologies dfinies dans les guides de rfrence ................................................................... 164
B.2.2.3 Typologies dfinies dans dautres publications ...................................................................... 168
Annexe B.2.3 Principaux rsultats des analyses de linventaire ..................................... 172
B.2.3.1 Modalits les plus frquentes par critre ................................................................................ 172
B.2.3.2 Analyses croises entre critres .............................................................................................. 172
B.2.3.3 Analyses centres sur l'tude de la dimension locale des actions ........................................... 173
Annexes B.3 Complments l'tude des pratiques d'valuation au niveau local .......... 177
Sommaire des Annexes B
90
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Annexe B.3.1 Approches franaises de l'valuation des activits de MDE au niveau
national ............................................................................................................................ 178
B.3.1.1 Limportance croissante de lvaluation dans le pilotage des politiques publiques................ 178
B.3.1.2 L'valuation des politiques publiques : de la matrise de l'nergie la lutte contre le
changement climatique........................................................................................................................ 179
B.3.1.3 Lvaluation des activits de MDE : des cadres contractuels mais une pratique relle limite
............................................................................................................................................................. 182
B.3.1.4 Le nouveau dispositif de lADEME ....................................................................................... 185
B.3.1.5 Les tudes sur les consommations d'nergie et les querelles de donnes ............................... 188
B.3.1.6 Les certificats dconomies dnergie : opportunit ou cueil ?............................................. 191
Annexe B.3.2 Prsentation des oprations ayant fait l'objet d'tudes de cas................... 196
B.3.2.1 Les alternatives au renforcement de rseau ............................................................................ 196
B.3.2.2 Les campagnes monotechniques de matrise de la demande en lectricit............................. 197
Annexe B.3.3 Exemple d'tude de cas : opration de MDE rurale du canton de Lanmeur
......................................................................................................................................... 200
B.3.3.1 Prsentation gnrale de l'opration ....................................................................................... 200
B.3.3.2 Elaboration de l'valuation ..................................................................................................... 202
B.3.3.3 Ralisation de l'valuation ...................................................................................................... 204
B.3.3.4 Rsultats de l'opration........................................................................................................... 206
B.3.3.5 Exploitation de l'valuation .................................................................................................... 207
B.3.3.6 Analyse critique de l'valuation.............................................................................................. 209
Annexe B.3.4 Analyse de campagnes de mesure des consommations d'nergie : apports et
rapports avec l'valuation ................................................................................................ 217
B.3.4.1 Prsentation des deux campagnes de mesure tudies en dtails............................................ 217
B.3.4.2 Comparaisons de donnes....................................................................................................... 217
B.3.4.3 Conclusions gnrales sur les tudes de terrain sur les consommations d'nergie ................. 219
Annexe B.3.5 Autres exemples marquants de MDE locale en France............................ 222
B.3.5.1 Les collectivits pionnires et la gestion de l'nergie des patrimoines publics ................... 222
B.3.5.2 La gestion de l'nergie dans les parcs de logements sociaux.................................................. 223
B.3.5.3 La MDE dans les zones insulaires .......................................................................................... 226
B.3.5.4 La recherche universitaire sur les activits locales de MDE................................................... 228
Annexe B.3.6 Exemples de MDE locale en Europe........................................................ 234
B.3.6.1 Etudes de cas ralises par le Wuppertal Institut .................................................................... 234
B.3.6.2 La capitalisation d'expriences faite par Energie-Cits .......................................................... 234
Annexe B.3.7 Synthse sur la thse de Franck Trouslot [1995]...................................... 236


91
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Annexes B.1 Complments l'analyse du contexte des activits de
MDE au niveau local


Bouvier [2005 p.212] rsume l'historique des politiques nergtiques locales comme suit :
Les politiques nergtiques locales doivent leurs premires impulsions la prise de cons-
cience conscutive aux crises ptrolires des annes 1970. Celles-ci ont conduit les collectivi-
ts locales se soucier de leur consommation dnergie. La dmarche est dabord dorigine
conomique : compenser les hausses des prix de lnergie par des mesures de matrise des
dpenses nergtiques. Si les plus grandes collectivits se sont parfois dotes dun service
nergie charg de veiller la matrise des consommations, lutilisation rationnelle et la ma-
trise de lnergie ne sinstitutionnalisent que dans les collectivits militantes. Dans un second
temps, avec la prise de conscience globale des enjeux environnementaux et la monte en
puissance du pouvoir local, ces dmarches tendent se gnraliser en politiques de dvelop-
pement durable.

L'analyse des raisons du dveloppement de politiques nergtiques locales est importante
pour mieux comprendre le contexte dans lequel sont ralises les oprations locales de MDE.
Cette analyse prliminaire du contexte permet alors de caractriser les besoins en valuation
de faon dvelopper des outils oprationnels qui rpondent aux attentes des acteurs.

Aprs une revue des lments de contexte au niveau national (Annexe B.1.1 et Annexe B.1.2),
nous reprenons l'analyse "historique" de Bouvier en distinguant deux priodes : l'essor
conjoint des politiques de dcentralisation et de matrise de l'nergie dans les annes 1980
(section B.1.3.1), puis le nouvel lan suscit par la restructuration et le renforcement des pou-
voirs locaux et la nouvelle donne de l'ouverture des marchs (section B.1.3.2). Nous tudions
alors la place des oprations de MDE dans les politiques de dveloppement durable et d'envi-
ronnement (section B.1.3.3), en nous intressant plus particulirement aux besoins d'valua-
tion qui s'en dgagent.

Nous compltons cette analyse du contexte par une tude des principaux acteurs (Annexe
B.1.4) et des principaux cadres d'action (Annexe B.1.5) des politiques nergtiques locales, en
dcrivant plus particulirement leur rapport l'valuation.

Nous revenons par ailleurs sur deux exemples de cadre de dveloppement de politiques ner-
gtiques locales : le SSCE et les OPATB (Annexe B.1.6).


92
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Annexe B.1.1 Les principales caractristiques du contexte national franais


Nous reprenons ici les critres identifis dans la mthodologie d'analyse cots/bnfices dve-
loppe dans le cadre de l'tude dcrite p.35 (section A.2.2.2 de l'Annexe A.2.2, voir aussi [Jo-
hansen 1995]). Dans cette mthodologie, Johansen et Hoog soulignaient l'importance de
l'analyse du contexte pour bien comprendre puis valuer les programmes d'EE-DSM. Ils d-
crivaient de plus les points importants dtailler. Ce sont ces points que nous reprenons ici :
- structure et rgulation des marchs de lnergie
- principales motivations mener des actions dEE-DSM
- principales approches pour les politiques et programmes dEE-DSM

Ainsi cette analyse du contexte ne se veut pas exhaustive mais est oriente sur les lments
qui peuvent avoir une influence sur les approches des activits de MDE et plus particulire-
ment leur valuation. En outre, nous abordons ici les lments du contexte national. Le
contexte des oprations locales de MDE est tudi dans la partie II.1.


B.1.1.1 La structure des marchs de l'nergie, sa rgulation et les particularits franaises


Comme pour les autres pays europens, il convient de distinguer deux priodes : avant et
aprs l'ouverture des marchs de l'lectricit et du gaz la concurrence. Deux lois [France
2000, France 2003] ont fix les conditions d'application des Directives europennes corres-
pondantes et un chancier progressif d'ouverture la concurrence :
- juin 2000 : ouverture la concurrence de la fourniture d'lectricit pour les clients gros
consommateurs (plus de 16 GWh/an)
- 1
er
juillet 2004 : ouverture la concurrence de la fourniture d'lectricit et de gaz pour
tous les clients professionnels, privs et publics
- 1
er
juillet 2007 : ouverture totale la concurrence pour la fourniture d'lectricit et de gaz
(i.e. ouverture pour les clients particuliers)


Avant l'ouverture des marchs : une structure trs
centralise

La structure des marchs de l'lectricit et du gaz avant l'ouverture a t fixe par la loi de
1946 sur la nationalisation de l'lectricit et du gaz. La reconstruction du pays, dans les an-
nes cinquante, rendait lgitime une forte intervention de l'Etat pour assurer la disponibilit
de l'nergie essentielle la croissance conomique et la satisfaction des besoins fondamen-
taux de la population. La nationalisation des entreprises productrices d'nergie visait ainsi
contrler les activits de production et de distribution d'nergie dans le sens de l'intrt col-
lectif. Cette dmarche commune l'ensemble des pays europens a t particulirement ac-
centue en France en raison des faibles ressources nergtiques nationales et de la tradition
centralisatrice de l'Etat [Moisan 1999 p.565].

De fait, les principales caractristiques des marchs de l'lectricit et du gaz avant leur
ouverture sont les suivantes :

- une concentration verticale totale (production-transport-distribution-fourniture) avec
Annexe B.1.1 Les principales caractristiques du contexte national franais
93
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
une entreprise publique (EDF pour l'lectricit et GDF pour le gaz) en position de mono-
pole et sous l'autorit de l'Etat qui rgule les tarifs et dcide des investissements nces-
saires en capacit de production et de transport

- des politiques nergtiques trs centralises : mme si les communes sont propritaires
des rseaux de distribution et qu'un mouvement de dcentralisation s'amorce au dbut des
annes 1980, les dcisions importantes sont prises par l'Etat. Pour l'lectricit par exem-
ple, la priorit est donne de grandes units de production pour alimenter un rseau in-
terconnect, plutt qu' la production dcentralise pour couvrir les besoins localement

- les spcificits franaises lies aux missions rgaliennes de service public, et notamment
la prquation tarifaire
173



Aprs l'ouverture des marchs : un Etat toujours trs
prsent

Les marchs de l'lectricit et du gaz ont ensuite connu une restructuration du fait de la trans-
position des Directives europennes (96/92/CE puis 2003/54/CE pour l'lectricit, et
98/30/CE puis 2003/55/CE pour le gaz) en droit franais (lois 2000-108 et 2003-8) concernant
leur ouverture la concurrence. La transcription franaise applique les conditions minimum
d'ouverture
174
(par exemple pour les dlais de mise en uvre) ce qui montre l'attachement
"culturel" franais son modle monopolistique centralis qui a permis le dveloppement des
deux "champions nationaux" EDF et GDF.

Les principales caractristiques des marchs de l'lectricit et du gaz aprs leur ouverture
sont les suivantes :

- la fin de la concentration verticale, avec la sparation des diffrentes activits du sec-
teur : production / transport / distribution / fourniture. De plus, les principes de spcialit
d'EDF et GDF (qui les empchait par exemple d'agir en aval du compteur) ont t levs
(dcrets n2004-1223 pour GDF et n 2004-1224 pour EDF)

- le transport et la distribution restent en situation de monopole public (RTE pour le
transport, EDF-GDF Distribution (pour 95% des communes) et rgies (inter)communales
(5% des communes) pour la distribution)

- la production et la fourniture (vente et facturation) sont ouvertes la concurrence

- une nouvelle rpartition des charges de service public entre les acteurs publics et les
acteurs du march

- une commission indpendante, la CRE (Commission de Rgulation de l'Energie), est

173
La prquation tarifaire est aussi appele le principe du timbre poste : tous les consommateurs finals paient
l'lectricit au mme prix, indpendamment de leur localisation gographique (l'lectricit est ainsi vendue au
mme prix un client proche d'une centrale nuclaire ou en zone urbaine qu' un client en bout de rseau ou en
zone rurale, insulaire ou hors mtropole)
174
La France fait d'ailleurs partie des 17 pays ayant reu le 4 avril 2006 des lettres de mise en demeure de la part
de la Commission europenne qui a jug qu'ils avaient mal appliqu ou transpos la Directive sur l'ouverture des
marchs
Annexe B.1.1 Les principales caractristiques du contexte national franais
94
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
cre pour rguler les marchs, i.e.
175
:
- assurer que les conditions d'accs aux rseaux d'lectricit et de gaz sont gales
pour tous les producteurs et fournisseurs
- approuver les dcisions d'investissement pour les rseaux de transport de gaz et
d'lectricit
- valuer et proposer le montant des charges de service public qui peuvent faire l'ob-
jet de compensation tarifaire

Malgr tout, l'Etat conserve un rle de dcision important. Mme si la CRE peut mettre
un certain nombre d'avis, c'est par exemple lui qui continue de fixer les tarifs rguls pour les
clients qui ne font pas jouer la concurrence
176
ou qui ne sont pas encore ligibles (i.e. qui ne
peuvent pas encore faire jouer la concurrence). De mme, l'Etat reste le principal administra-
teur d'EDF et de GDF. Enfin la dernire loi sur l'nergie [France 2005] confirme que ce do-
maine reste fortement orient par les politiques publiques et les dcisions de l'Etat.

D'autre part, pour l'instant EDF et GDF restent en position trs fortement dominante pour la
fourniture respectivement d'lectricit et de gaz.


Le schma ci-dessous rsume la rorganisation du march de l'lectricit.



175
cf. <http://www.cre.fr/presentation/missions.jsp>
176
Une des particularits du processus franais d'ouverture est qu'il n'oblige pas les clients finals faire jouer la
concurrence, i.e. ils peuvent dcider de conserver comme fournisseur EDF et GDF au tarif rgul par l'Etat.
Toutefois, une fois qu'ils ont quitt ce systme tarifaire (en faisant jouer la concurrence), ils ne peuvent plus
prtendre le retrouver.
Monopole
EDF
RTE
Producteurs
Fournisseurs(**)
production
transport
facturation
vente
Tarifs rguls
par l'Etat
L
o
i
s

d
u

m
a
r
c
h

a
c
h

t
e
n
t

v
e
n
d
e
n
t
AVANT 2000 APRES 2007 (*)
distribution
EDF-GDF Distribution (95%)
ou rgies municipales (5%)
Tarifs rguls par l'Etat
sur avis de la CRE
Revendent
aux clients
finals
(*) l'ouverture totale ne sera effective qu'au 1
er
juillet 2007, d'ici l certains clients (par ex. les
particuliers) restent dans le schma "avant 2000"
(**) les fournisseurs sont le plus souvent aussi producteurs (par ex. EDF, Suez), mais certains ne
sont que fournisseurs (par ex. Poweo, Direct Energie)
Annexe B.1.1 Les principales caractristiques du contexte national franais
95
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Figure 22 - rorganisation du march de l'lectricit en France

Trois autres spcificits nationales doivent tre prises en compte dans l'analyse du contexte du
secteur des nergies en France :

- la part prpondrante du programme lectronuclaire utilis comme principal moyen
d'assurer l'indpendance nergtique de la France

- la tarification marginaliste utilise par EDF

- la politique de dcentralisation amorce au dbut des annes 1980 avec la question de
l'articulation entre les diffrents niveaux de comptence (national/local) qui reste un d-
bat rcurrent [Moisan 1999 p.570] Ce point est abord dans la sous-partie II.1.3.


B.1.1.2 Les principales motivations selon les acteurs


Dans la thorie, deux raisons principales justifient le besoin en activits de MDE [Finon 1996
p.608] :
- corriger les imperfections du march (notamment du signal prix et les dfauts d'infor-
mation)
- limiter les impacts environnementaux lis la production, au transport distribution et
la consommation d'nergie

Mais Finon souligne bien que la MDE n'est pas un concept dont la dfinition et les fonde-
ments justificateurs sont universels, car ils dpendent du contexte institutionnel. Ainsi la
pratique s'carte parfois de ces proccupations premires. Nous reprenons ici les principales
motivations raliser des activits de MDE selon le point de vue des principaux acteurs
concerns.


L'Etat

Les politiques de MDE ont rellement commenc en raction aux chocs ptroliers de 1974
puis 1979. La motivation premire est donc la rduction des importations de ptrole. De
fait, dans sa prface du rapport de l'instance d'valuation sur la matrise de l'nergie entre
1973 et 1993, Yves Martin souligne que ces politiques taient plus conjoncturelle que struc-
turelle. La synthse de l'tude ralise fait ainsi notamment ressortir que l'ampleur des d-
penses publiques de matrise a accompagn assez troitement la variation des prix du p-
trole [Martin 1998 pp.9 et 23].

Au dpart, l'implication de l'Etat est justifie au nom de la dpendance franaise au regard
de ses approvisionnements nergtiques, les enjeux environnementaux de la matrise des
consommations d'nergie n'tant considrs que comme des "retombes positives" des mesu-
res mises en uvre. D'autre part, au dbut des annes quatre-vingt les crdits affects la
matrise des consommations visent surtout, de faon conjoncturelle, la relance des activits
du btiment [Moisan 1999 p.566].

Les activits de MDE sont donc aussi pour l'Etat un moyen dtourn de soutenir certaines
Annexe B.1.1 Les principales caractristiques du contexte national franais
96
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
activits conomiques. De mme, les activits de MDE sont parfois lies des politiques
sociales, comme par exemple pour l'utilisation des Fonds Spcial Grands Travaux pour la
rnovation des logements sociaux [Bourjol 1984].

A partir des annes 1990, la motivation environnementale prend de l'importance. En tmoi-
gne la loi n96-1236 du 30 dcembre 1996 sur l'air et l'utilisation rationnelle de l'nergie.
Cette loi associe des activits de MDE aux objectifs de qualit de l'air
177
. Cette motivation
environnementale a ensuite t renforce du fait des engagements internationaux de la France
(par ex. protocole de Kyoto
178
).

La matrise de la demande d'nergie est le premier moyen cit par l'article 1 de la loi sur
l'nergie de 2005 [France 2005] pour atteindre les objectifs de la politique nergtique
franaise (indpendance nergtique et scurit d'approvisionnement; prix comptitif de
l'nergie; prserver la sant humaine et l'environnement; accs de tous l'nergie). Mais cet
affichage est relativiser (cf. le Tableau 39 p.116 et la section B.1.2.4 de l'Annexe B.1.2).


L'ADEME

Ds 1974, l'Etat a cre en raction aux chocs ptroliers l'AEE (Agence pour les Economies
d'Energie). Cette agence est devenue l'AFME (Agence Franaise pour la Matrise de l'Ener-
gie) en 1982 avant d'tre regroupe en 1991
179
avec l'ANRED (Agence Nationale pour la R-
cupration et l'Elimination des Dchets) et l'AQA (Agence pour la Qualit de l'Air) au sein de
l'ADEME (Agence de l'Environnement et de la Matrise de l'Energie).

Etant sous tutelle du gouvernement
180
, les motivations de l'ADEME et de ces prdcesseurs
sont fortement lies aux missions qui lui sont attribues. De fait, les diffrents noms de
l'agence traduisent bien l'volution de ces missions et motivations. D'abord centres sur la
promotion des conomies d'nergie dans un contexte d'urgence nationale, puis conjointes la
promotion des nergies renouvelables
181
mais toujours pour faire face aux prix levs du p-
trole, et enfin largies aux proccupations environnementales dans une optique d'approche
plus globale en accord avec les principes du dveloppement durable. La promotion de la ma-
trise de l'nergie est aujourdhui l'une des cinq missions confies l'ADEME
182
.

Plus rcemment, l'volution des messages utiliss dans les deux dernires grandes campagnes
de sensibilisation "grand public" de l'ADEME confirme la place importante des proccupa-
tions environnementales dans les motivations promouvoir les conomies d'nergie, la
fois suivant et influenant l'opinion sur ce point. Ainsi lors de la "chasse aux gaspi" de la fin
des annes 1970, le slogan tait En France, on a pas de ptrole, mais on a des ides. En
2001, le slogan tait Prservez votre argent. Prservez votre plante, et en 2004, Econo-

177
Par ailleurs on retrouve bien cette volution dans les mots-cls associs cette loi par la base de donnes de
Legifrance (environnement, air, nergie, pollution atmosphrique, etc.) par rapport ceux associs la loi 74-
908 du 29 octobre 1974 relative aux conomies d'nergie (organisation de la nation en temps de guerre, mobili-
sation industrielle, nergie, conomie d'nergie)
178
Ratifi par la France en avril 2000 puis par l'Union Europenne en mai 2002. Voir aussi le dcret n2005-285
du 22 mars 2005 suite la mise en uvre effective du protocole en fvrier 2005 aprs la ratification de la Russie.
179
loi du 19 dcembre 1990 et dcret d'application du 26 juillet 1991
180
pour l'ADEME des Ministres chargs de la recherche, de l'environnement et de l'nergie (article 1
er
du dcret
d'application du 26 juillet 1991)
181
matrise de l'nergie = URE + EnR [ENA 2002 pp.66]
182
article 2 du dcret d'application du 26 juillet 1991
Annexe B.1.1 Les principales caractristiques du contexte national franais
97
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
mies d'nergie, faisons vite a chauffe.

Les motivations de l'ADEME peuvent aussi tre analyses la lumire des volutions de son
budget.


Part du budget de l'ADEME consacr l'nergie et aux dchets
2001 2002 2003 2004
nergie 31% 18% 35% 34%
dchets 36% 38% 22% 21%
( partir des rapports annuels d'activit disponibles sur www.ADEME.fr)
Figure 23 - budget de l'ADEME : volutions et rpartitions

Le premier constat est que le budget global de l'ADEME est sujet des variations importan-
tes. Il lui est donc difficile de dfinir des stratgies sur le moyen et long terme. Le second
point est que son budget provient trs majoritairement du Ministre charg de l'environne-
ment. Ce qui d'une part explique les variations de budget, et d'autre part atteste de la prpon-
drance de sa mission environnementale.
Rpartition du budget de l' ADEME
par axes d' intervention
91
63
92
55
107
130
59
34
32
51
33
14
57
48
45
23
9
50
36
33
0
50
100
150
200
250
300
350
2001 2002 2003 2004
(
e
n

m
i
l
l
i
o
n
s

d
'
e
u
r
o
s
)
autres
R&D
sols, air, bruit, surveillance
dchets
nergie
Rpartition du budget de
l'ADEME par origine
225
248
186
97
38
31
26
29
21
10
14
15
12
53
39
18
0
50
100
150
200
250
300
350
2001 2002 2003 2004
(
e
n

m
i
l
l
i
o
n
s

d
'
e
u
r
o
s
)
autres
recherche
industrie
environnement
dotations totales annuelles l' ADEME
0
50
100
150
200
250
300
350
400
1992 1993 1994 1995 1996 1997 1998 1999 2000 2001 2002 2003 2004
(
e
n

m
i
l
l
i
o
n
s

d
'
e
u
r
o
s
)
Rpartition des
budgets pour
l' nergie
0%
10%
20%
30%
40%
50%
60%
70%
80%
90%
100%
2
0
0
1
2
0
0
2
2
0
0
3
2
0
0
4
URE
EnR
Annexe B.1.1 Les principales caractristiques du contexte national franais
98
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006

Ces observations se retrouvent dans l'utilisation des budgets, avec par exemple la priorit
donne l'axe "dchets" jusqu'en 2002 du fait de la gestion de la transition de la politique sur
les dchets (interdiction de mise en dcharge, etc.). En outre, les budgets consacrs l'nergie
connaissent de fortes variations, presque du simple au double d'une anne sur l'autre. Ces va-
riations peuvent s'expliquer en partie par les variations dans les flots de dpts de dossiers de
demandes d'aides. Enfin, les moyens financiers engags pour l'nergie sont d'abord consacrs
aux nergies renouvelables ( 70% en moyenne, contre 30 pour l'URE).

Toutefois cette analyse est relativiser. D'une part, car dans la ralit les budgets ne sont pas
cloisonns
183
. D'autre part parce l'intervention de l'ADEME n'est pas que financire
184
. Ainsi
les graphiques de la Figure 23 ne refltent probablement pas la rpartition relle des efforts
engags par l'ADEME, mais traduisent plutt ses priorits stratgiques conjoncturelles.


EDF

La premire motivation d'EDF concernant les activits de MDE tait d'optimiser le recours
aux centrales de production. Le but est d'ajuster la demande grce une structure tarifaire
base sur les cots marginaux
185
, et ce ds 1954 avec la mise en place du tarif vert [Orphe-
lin 1999 p.10].

Un autre point important qui explique les motivations d'EDF est la prquation tarifaire.
L'application de ce principe fait qu'EDF a intrt uvrer pour la matrise des consomma-
tions dans les zones o il lui cote cher d'acheminer (i.e. zones rurales ou en bout de ligne) ou
de produire de l'lectricit (i.e. zones insulaires et DOM-TOM).

D'autre part, la situation de surcapacit du fait de l'important programme lectronuclaire a
paradoxalement encourag une des thmatiques de MDE : celle concernant l'amlioration de
l'isolation des logements et des performances du chauffage lectrique. Les activits de MDE
ont eu alors des motivations commerciales pour gagner des parts de march pour un usage
concurrentiel de l'nergie [Gouja 1993 p.375]
186
.

EDF, tant une entreprise publique, suit aussi les orientations donnes par l'Etat. Ainsi
partir de 1993, EDF signe avec l'ADEME des accords-cadres triennaux qui portent notam-
ment sur la matrise de la demande d'lectricit. Les actions ralises dans ce cadre intgrent
la fois des motivations conomiques et environnementales.

Par ailleurs, les activits de MDE ont aussi t un moyen pour EDF de valoriser son image,

183
Par exemple, les campagnes de sensibilisation sont comptes comme des actions transversales.
184
Par exemple l'ADEME intervient aussi par le biais de ses chargs de mission ou des conseillers info nergie
pour accompagner et/ou conseiller les entreprises, collectivits et particuliers dans leurs projets lis l'nergie.
LADEME estime ainsi que sur ces 850 employs, 250 traitent plus particulirement des questions defficacit
nergtique [Vreuls 2005b pp.100].
185
Oppose la tarification la valeur d'usage ou aux cots moyens, celle en cot marginal prend en compte la
disponibilit des centrales, i.e. le fait que d'une part le cot de production d'un kWh n'est pas le mme selon les
priodes (heures, saisons) (cots marginaux de court terme), et d'autre part que ce cot dpend aussi de la plani-
fication des investissements en capacit de production (cots marginaux de long terme).
186
Ce que reconnat galement Pierre Daures (DG d'EDF) Dans son ditorial de la Revue de l'Energie n483
(dcembre 1996) consacre la MDE : par le pass, EDF s'est surtout centr sur l'amlioration et la promotion
des usages concurrentiels de l'lectricit
Annexe B.1.1 Les principales caractristiques du contexte national franais
99
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
notamment pour contrebalancer les contestations des anti-nuclaires.

En 1996
187
, Pierre Daures (alors Directeur Gnral d'EDF) crivait qu'EDF s'est depuis long-
temps engage dans des actions de MDEc, pour deux raisons principales :
- la premire est la satisfaction de nos clients qui passe par une meilleure gestion de
l'nergie afin de mieux l'utiliser et de l'conomiser, tout en conservant ou en amliorant le
confort et la qualit de la fourniture et des services
- la seconde est la protection de l'environnement ()
Comme tout lectricien, EDF est conscient qu'un engagement renforc dans la matrise de la
demande est un facteur de succs commercial et de lgitimit.

L'ouverture la concurrence de la vente d'lectricit modifie les motivations d'EDF, d'une
part parce qu'elle n'est plus en monopole, et d'autre part parce que son nouveau statut lve le
principe de spcialit ce qui l'autorise diversifier ses activits. Les activits de MDE menes
par EDF rpondront donc dsormais trs probablement deux motivations principales :
- la redfinition des missions de service public (par ex. certificats d'conomie d'nergie)
- la diffrenciation par rapport ses concurrents et le dveloppement de ses activits (par
exemple en proposant des offres de services nergtiques ses clients)


Autres acteurs

Les entreprises regroupes au sein de la FG3E (Fdration franaise des entreprises Gestion-
naires de services aux Equipements, l'Energie et l'Environnement), les entreprises du b-
timent, les cabinets de consultants spcialiss (par ex. en audit nergtique), etc. jouent aussi
un rle important dans les activits de MDE.

Pour ces acteurs privs, la motivation principale est bien sr conomique. Les actions qu'ils
ralisent sont des services et/ou produits qu'ils proposent leurs clients. Leur objectif dans ce
cadre est donc de dvelopper leur activit (chiffre d'affaire et bnfices). Dans une moindre
mesure peuvent intervenir des motivations environnementales et/ou en termes d'image.

Des associations (par ex. pour l'environnement ou de consommateurs) peuvent aussi avoir un
rle dans les activits de MDE. Elles sont ainsi souvent associes aux Espaces Info Energie
ou aux Agences locales de l'nergie. Leurs motivations dpendent de leurs objectifs propres
mais sont en gnral de nature environnementale, sociale et/ou citoyenne.

Par ailleurs, il est intressant de noter que les activits du gestionnaire des rseaux de
transport d'lectricit (RTE) ne comprennent aucun axe en lien avec les activits de
MDE. Ceci est d'autant plus notable que deux programmes ambitieux ont t rcemment lan-
cs en Rgion PACA puis dans le Lot avec comme objectif principal d'viter de nouvelles
infrastructures de transport d'lectricit.

En ce qui concerne les acteurs locaux, se reporter la partie II.1.


B.1.1.3 Les principales approches pour les politiques et programmes d'EE-DSM


187
Dans son ditorial de la Revue de l'Energie n483 (dcembre 1996) consacre la MDE
Annexe B.1.1 Les principales caractristiques du contexte national franais
100
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006

Notre thse se concentre sur les oprations locales (dcrites dans la partie II.2), mais il est
important de connatre les principales approches nationales avec lesquelles elles peuvent avoir
des interactions. Nous en prsentons ici un aperu global, non exhaustif mais qui a pour but
de mieux comprendre le cadre dans lequel interviennent les oprations locales.

Les activits de MDE ne correspondent pas un seul et unique champ d'intervention. Elles
peuvent tre directement identifiables (par ex. aides de l'ADEME dans ce domaine) ou le fait
d'autres objectifs (par ex. rhabilitation de logements sociaux). Nous avons donc choisi de
reprendre ici les mmes limites que l'instance d'valuation de 1998 qui s'taient concentres
sur les actions volontaristes tiquetes comme ayant pour but de rduire les consomma-
tions d'nergie [Martin 1998 p.17]. Par ailleurs notre sujet n'aborde pas le secteur des trans-
ports et les dispositions lies l'urbanisme.

Nous avons galement choisi de les prsenter selon qui les mettait en uvre, afin d'avoir ga-
lement une ide de la rpartition des rles.


L'Etat : rglementations et aides fiscales

Les interventions directes de l'Etat en faveur de la matrise de la demande en nergie
sont pour la plupart aujourd'hui regroupes dans le Plan Climat que l'Etat doit soumettre r-
gulirement la Commission europenne
188
. Elles sont construites autour de deux axes prin-
cipaux : les rglementations et les aides fiscales (les axes d'information et de conseil sont
mis en uvre par l'ADEME).

Les principales rglementations dans le domaine des conomies d'nergie sont
189
:

- la rglementation thermique (ds 1974
190
) pour tous les nouveaux btiments, renforce
en 1989, puis en 2000 et dsormais tous les 5 ans
191
, et complte par la transposition de
la Directive 2002/91/CE relative la performance nergtique des btiments
192
concernant
les diagnostics de performance nergtique des btiments (document qui comprend la
quantit d'nergie effectivement consomme ou estime pour une utilisation standardise
du btiment ou de la partie de btiment et une classification en fonction de valeurs de r-
frence afin que les consommateurs puissent comparer et valuer sa performance nerg-
tique. Il est accompagn de recommandations destines amliorer cette performance,
article L134-1)

- les rglementations sur les chaudires et les installations de combustion compltes

188
Suite la Directive EESE, l'Etat devra partir de 2007 soumettre tous les trois ans la Commission un PAEE
(Plan daction d'Efficacit Energtique), dans lequel seront regroupes l'ensemble des dispositions prises en
faveur de la matrise de la demande en nergie
189
cf. http://www.industrie.gouv.fr/energie/developp/econo/f1e_eco.htm
190
1974 pour les logements, 1976 pour les btiments tertiaire
191
la rglementation en vigueur aujourd'hui est donc la RT2005. En outre, une rglementation est en cours de
dfinition pour les travaux importants de rhabilitation des logements existants, dans le cadre de la transposition
de la Directive europenne relative la performance nergtique des btiments
192
faite dans le chapitre IV du titre III du livre Ier du code de la construction et de l'habitation instaur par l'arti-
cle 17 de l'ordonnance n 2005-655 du 8 juin 2005
Annexe B.1.1 Les principales caractristiques du contexte national franais
101
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
d'une part par le PNAQ (Plan National d'Allocation des Quotas)
193
et d'autre part sur
l'inspection rgulire des chaudires et des systmes de climatisation
194


- l'tiquetage des appareils lectrodomestiques, initi par les Directives europennes
correspondantes, aujourd'hui compltes pour l'ensemble des biens par l'article 28 de la
loi de 2005 sur l'information des consommateurs : pour les biens mis en vente, prescrire,
le cas chant, laffichage de lvaluation du cot complet, tenant compte de leur
consommation en nergie et de leur cot lachat, et en prciser les mthodes de dter-
mination

- le changement d'heure saisonnier
195
(heure d't/heure d'hiver) instaure en 1975, et
confirme par la Directive europenne 2000/84/CE et l'arrt du 3 avril 2001 relatif
l'heure lgale franaise.


Les principales aides fiscales sont
196
:

- crdits d'impts pour les particuliers pour des investissements amliorant les performan-
ces nergtiques des btiments (isolation, production performante d'nergie ou nergies
renouvelables) renforcs par le Plan Climat 2004

- TVA rduite 5,5% pour les travaux damlioration du parc ancien

- rgime damortissement exceptionnel pour les entreprises pour les matriels destins
conomiser de lnergie ou la production dnergie renouvelable

- financement des investissements d'conomies d'nergie par crdit-bail (SOFERGIE, ins-
taur en 1980)

Il est aussi intressant de noter que la DIDEME (DIrection de la DEmande et des Marchs
Energtiques, au sein du Ministre de l'Industrie) fait figurer dans sa liste des aides incitatives
aux conomies d'nergie le nouveau dispositif des certificats d'conomies d'nergie. Or ce
dispositif tient plus de la rglementation, car il consiste en une obligation faite aux fournis-
seurs d'nergie, et concrtement l'Etat ne distribuera pas d'aides pour que ces obligations
soient remplies.

Par ailleurs, l'Etat a aussi un rle d'exemplarit, et se doit donc de mener des actions dans
ses propres btiments et adapter ses procdures de commandes d'quipements. Ce rle est
rgulirement rappel par des circulaires ministrielles
197
.

Enfin l'Etat soutient aussi la recherche dans le domaine de la matrise de l'nergie
198
, mais
dans une moindre mesure que pour les filires sur l'offre d'nergie et en particulier le nu-

193
Le PNAQ correspond la mise en uvre de la Directive europenne 2003/87/CE sur les quotas d'missions
de gaz effet de serre
194
cf. alina IV de l'article 27 de la loi de 2005 [France 2005]. Cette inspection rgulire est aussi une transposi-
tion de la Directive 2002/91/CE
195
Selon lADEME, le changement dheure permet dconomiser 1,3 TWh/an (communiqu de presse de
lADEME du 24 mars 2006 sur le passage lheure dt)
196
cf. http://www.industrie.gouv.fr/energie/developp/econo/textes/mesures-ee.htm
197
par exemple, circulaires du Premier Ministre du 12 janvier 1991,ou plus rcemment du 28 septembre 2005
198
par exemple le programme interdisciplinaire sur l'nergie du CNRS (cf. <http://energie.insa-lyon.fr/>)
Annexe B.1.1 Les principales caractristiques du contexte national franais
102
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
claire (cf. Tableau 39 p.116).


L'ADEME : conseil et sensibilisation

Le dispositif d'intervention de l'ADEME est conu par catgorie d'acteurs (entreprises, collec-
tivits et particuliers), c'est pourquoi nous reprenons ici cette forme de prsentation. Nous ne
mentionnons pas ici les accords EDF-ADEME qui sont abords dans les actions d'EDF ci-
aprs.


- Entreprises

LADEME a mis en place un dispositif daides la dcision aux investissements
((pr)diagnostic, tude de faisabilit, accompagnement au montage de projet). Dans les sec-
teurs de la mcanique, du textile et de la blanchisserie, des actions groupes de diagnostics ont
par exemple t lances. Ces aides sont disponibles en procdure "guichet".

Outre ces aides la dcision, l'ADEME propose aussi des solutions pour faciliter le finan-
cement de projets d'amlioration de l'efficacit nergtique des entreprises :
- le FOGIME (FOnds de Garantie des Investissements de Matrise de lEnergie)
vise faciliter laccs des PMI aux financements de leurs investissements de ma-
trise de lnergie, ce fonds offre une garantie hauteur de 70 % pour les emprunts
effectus
- le FIDEME (Fonds d'investissement de l'environnement et de la matrise de
l'nergie) a pour but de financer des projets utilisant des technologies connues et
prouves. Il permet une association de fonds privs (fonds propres de l'entreprise)
et publiques (amens par l'ADEME) dans le cadre de Fonds Commun de Place-
ment qui limite les risques pour l'entreprise et lui offre des taux plus attractifs que
ceux du march.

L'ADEME dveloppe aussi une politique partenariale pour faire relayer ses efforts et pour
encourager les dmarches d'autres acteurs aussi bien public que priv (par ex. accords cadre
EDF-ADEME et Club Plante Gagnante).

Enfin, l'ADEME lance des appels projets pour favoriser l'mergence de nouvelles solu-
tions performantes (soutien aux projets de R&D), puis leur diffusion et mise sur le march
(soutien aux oprations exemplaires).


- Collectivits locales

Le dispositif d'aides la dcision existe aussi pour les collectivits. Mais il est orient sur les
questions lies aux btiments et vers l'assistance aux matres d'ouvrage.

L'ADEME a aussi mis en place deux programmes pour encourager les approches territoria-
les de projets (OPATB et contrats ATEnEE). Ils sont dcrits dans la section B.1.5.4.


- Particuliers
Annexe B.1.1 Les principales caractristiques du contexte national franais
103
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006

Le rle de l'ADEME auprs des particuliers consiste sensibiliser (cf. campagnes nationales
de 2001 et 2004-2006), relayer et/ou diffuser l'information (information sur les crdits
d'impts, brochures et guides sur les bonnes pratiques et les solutions performantes), et pro-
poser un conseil de proximit par le biais des Espaces Info Energie.

Par ailleurs, l'ADEME mne aussi des actions en faveur de l'ducation l'environnement
dans les coles.


EDF : tarification, missions de service public, offres de
services commerciaux et R&D

L'action d'EDF est principalement fonde sur le rle dcisif du signal donn au client par
les tarifs; les imperfections du march ont cependant ncessit d'accompagner cette dmar-
che par exemple par des actions de R&D ou des campagnes d'information.
199


- la tarification marginaliste

La tarification marginaliste vient du fait que l'lectricit est un produit non stockable, et que
les moyens de production sont utiliss de manire rpondre la demande instantane. Or
cette demande est irrgulire, notamment en fonction des heures de la journe et des saisons.
Ces fluctuations sont caractrises par la courbe de charge du systme lectrique qui trace la
puissance totale appele en fonction du temps.

La demande est ainsi traditionnellement dcoupe en trois domaines : la base (puissance
moyenne appele plus de 6000h/an), la semi-base (dure d'appel intermdiaire) et la pointe
(puissances appeles aux moments critiques). Les capacits de production sont choisies en
fonction de la structure de cette charge (moyens de base, de semi-base ou de pointe), avec
pour chaque catgorie des cots diffrents, moins levs en base et plus levs en pointe (cf.
[Orphelin 1999 p.25].
200


Le principe de la planification du systme lectrique franais (cf. Figure 24) est bas sur un
ajustement de la demande gr par la structure tarifaire. Pour une demande d'lectricit fu-
ture prvue, on dtermine un "mix" optimal des centrales de production. Les cots marginaux
sont alors calculables, et les tarifs proposs aux clients adapts sur la base de ces cots. Les
consommateurs ragissent l'volution de ces cots en modifiant leur consommation qui se
rapproche de la demande "prvue".

199
Pierre Daures, DG d'EDF dans son ditorial de la Revue de l'Energie n483 (dcembre 1996) consacre la
MDE
200
Par exemple pour schmatiser en France, les moyens de base sont le nuclaire et l'hydraulique et les moyens
de pointe sont les centrales thermiques. Orphelin en tire d'ailleurs le concept de pollution marginale et souli-
gne l'importance de relier les objectifs de rduction d'missions avec les impacts sur la charge.
Annexe B.1.1 Les principales caractristiques du contexte national franais
104
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006

Source : [Orphelin 1999 pp.11]
Figure 24 - rgulation de la demande par la tarification marginaliste

L'utilisation de la tarification marginaliste est une des diffrences fondamentales entre la
France et les Etats-Unis o la tarification est majoritairement en cots moyens. Ce qui ex-
plique en bonne partie pourquoi la France, contrairement d'autres pays europens (par ex.
Danemark, Allemagne, Pays-Bas) n'a pas cherch appliquer une dmarche drive de l'IRP
l'amricaine.


- les missions de service public

La prquation tarifaire et l'objectif d'accs l'nergie pour tous mnent EDF raliser des
programmes locaux de matrise de la demande en lectricit (par ex. programmes raliss
dans le cadre du FACE en zones rurales, ou programmes dans les DOM). Ceux-ci sont plus
largement dtaills dans la partie II.3. Ils consistent en gnral des campagnes d'informa-
tion et de promotion pour des quipements performants (par ex. LBC), plus ou moins cibles
selon la taille de la zone concerne.

Ces programmes sont souvent raliss dans le cadre des accords EDF-ADEME, qui couvrent
cependant d'autres champs. Par exemple, figurent parmi les objectifs du dernier accord pour
2004-2007
201
des actions d'information et de communication pour les particuliers, des actions
de promotion des technologies conomies pour les clients ligibles et des actions de R&D de
nouvelles technologies performantes. Toutefois l'avenir des accords EDF-ADEME est incer-
tain compte tenu des conditions respecter pour ne pas crer de distorsions de concurrence.


Enfin les nouvelles obligations lies aux certificats d'conomies d'nergie peuvent tre
considres comme faisant partie des missions de service public. Dans ce cadre, EDF doit
raliser ou faire raliser des actions standardises d'conomies d'nergie (par ex. LBC, isola-
tion).


- les offres de services commerciaux

EDF dveloppe une culture "commerciale" de la MDE, ainsi l'article de Yann Laroche, Direc-
teur du March rsidentiel chez EDF, dans le numro spcial MDEc de la Revue de l'Energie
de dcembre 1996 [Laroche 1996] s'intitulait Le dveloppement de la matrise de la demande

201
cf. communiqu de presse commun du 26 avril 2004
<http://www2.ADEME.fr/f pp.ervlet/getDoc ?cid=96&m=3&id=19271&ref=13416&p1=B>
demande d'lectricit optimisation du parc
de production
tarif cots marginaux
Annexe B.1.1 Les principales caractristiques du contexte national franais
105
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
d'lectricit EDF - Une seule exigence : la satisfaction de nos clients.

De fait, EDF cherche proposer ses clients une offre de services, notamment en termes de
matrise des consommations :
- pour les entreprises : les bilans annuels personnaliss et les conseils clai-
rage et climatisation
- pour les collectivits : les offres Citlia avec les diagnostics Optimia (glo-
bal, clairage, projet, piscine)
- pour les particuliers : des conseils et simulations sur Internet ou par tl-
phone, les campagnes Gesteco (dans certaines rgions pilotes) avec un pack
MDE, et l'offre Vivrlec
202
(pour les usages thermiques de l'lectricit)


- la R&D : EDF dispose d'un important centre de R&D dont un des axes est de dvelopper
de nouvelles technologies performantes, que ce soit pour des procds industriels ou pour
des quipements pour les mnages (notamment pour les usages thermiques). Un des buts
de ces activits est de promouvoir le recours l'lectricit pour les usages concurrentiels
(i.e. pour lesquels plusieurs sources d'nergie peuvent tre utilises)

Hormis pour la tarification et la prquation tarifaire, les mmes axes d'actions se retrouvent
pour GDF.

Pour les nouveaux entrants sur les marchs de l'lectricit et du gaz, il est encore trop tt pour
analyser leur approche de MDE. A priori elle sera surtout guide par les obligations qu'ils
auront dans le cadre des certificats d'conomies d'nergie.


Les services nergtiques la franaise

Les entreprises gestionnaires de services l'nergie (dont la plupart sont membres de la
FG3E) prsentent les activits de MDE comme faisant partie de leur corps de mtier. Ces ac-
tions sont encadres par les contrats passs avec leurs clients sur la fourniture non pas d'ner-
gie finale mais d'un produit ou service final (chaleur, air comprim, clairage, etc.).

Dans le cadre de ces contrats, Dalkia, Elyo et consort peuvent s'engager sur un niveau de per-
formance pour le service rendu (par ex. par un contrat de performance nergtique). Ce do-
maine d'activits n'est pas abord dans notre thse. Nous conseillons de se reporter la thse
de Maxime Dupont (thse soutenue prochainement) pour plus d'informations sur ce sujet.



202
Cette offre a surtout pour but de promouvoir l'usage de l'lectricit pour les usages thermiques.

106
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Annexe B.1.2 Bilan de 30 ans d'activits de MDE en France


Tho Leray et Bertrand de La Roncire [2002] proposent une synthse de 30 ans de politiques
de matrise de l'nergie en France, en s'appuyant sur les tmoignages des personnalits mar-
quantes de cette histoire. Nous proposons ici un bilan qui recoupe cette synthse, en nous in-
tressant plus particulirement aux activits de MDE (Matrise de la Demande en Energie) et
en nous appuyant sur les valuations disponibles.


B.1.2.1 La spcificit de la tarification marginale : un levier important mais avec certaines
limites


Concernant la matrise de la demande d'lectricit, la tarification marginaliste a probablement
t le principal levier utilis en France en termes de rsultats. En effet, Orphelin [1999
pp.11] souligne que le facteur de charge journalier
203
de la compagnie lectrique [EDF]
dpasse aujourd'hui les 90%, ce qui est un bon indicateur de la russite de la stratgie tari-
faire adopte.

Gouja [1993] en rappelle aussi l'intrt par rapport aux autres tarifications ( la valeur d'usage
ou aux cots moyens), et souligne que c'est la seule inciter les acheteurs se comporter
dans le sens de l'optimum sectoriel d'allocation des ressources. Il indique d'ailleurs les rsul-
tats affichs par EDF : rien que pour l'option EJP (Effacement Jour de Pointe), introduite
progressivement depuis 1982 () EDF a pu conomiser aujourd'hui [en 1993] prs de 3 GW,
soit 5% de la pointe nationale.

Mais il en prsente aussi les limites lies ses imperfections
204
qui remettent en cause les
hypothses
205
sur lesquelles la tarification marginaliste et base. Ainsi la tarification
marginaliste demeure un instrument ncessaire mais insuffisant.

Les principales imperfections listes par Gouja [1993] expliquent de fait la lgitimit et le
besoin d'interventions de la part des divers acteurs (Etat, ADEME, fournisseurs d'nergie)
pour y palier.

Pour exemple, nous dtaillons ici les imperfections listes pour l'irrationalit des compor-
tements des consommateurs, qui remettent en cause les thories noclassiques de rationalit
totale des consommateurs qui ferait que le signal prix serait l'information ncessaire et suffi-
sante leur fournir :
- faible part des dpenses nergtiques dans le budget total des entreprises ou des mnages
qui font que ces dpenses sont ngliges dans les prises de dcision
- temps de retour soit non pris en compte (prise en compte des cots d'investissement mais

203
facteur de charge journalier =
(h/jour) 24 * (MW) annuelle pointe
(MWh/jour) consomme nergie

204
contrainte d'quilibre budgtaire, concurrence entre les nergies, incertitudes sur les prix des nergies et les
futures technologies de production, utilisation des tarifs pour des objectifs de politique conomique, ncessit de
simplification tarifaire, prquation territoriale, difficile internalisation des cots externes, irrationalit des com-
portements des consommateurs
205
information parfaite, rationalit parfaite des fournisseurs d'lectricit et des consommateurs, adaptation par-
faite des consommateurs
Annexe B.1.2 Bilan de 30 ans d'activits de MDE en France
107
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
pas de fonctionnement), ou voulu trs court
206
(en comparaison du long terme des inves-
tissements en capacit de production d'lectricit)
- accs limit aux capitaux
- dissociation entre proprit et usage des quipements (par ex. dans le secteur locatif)
- contrainte d'apprentissage et d'adaptation du comportement (inertie des comportements)
- dfauts de diffusion commerciale des quipements efficients (par ex. coulements de
stocks d'appareils non performants)


B.1.2.2 1973-1993 : le bilan mitig de politiques conjoncturelles


les politiques publiques

A la demande du Ministre de l'Industrie, le Commissariat Gnral du Plan a lanc en 1993
une valuation de la politique franaise de matrise de l'nergie sur la priode 1973-1993.

L'instance qui a ralis cette valuation souligne trois difficults principales qu'elle a ren-
contr [Martin 1998 pp.17] :

- l'impossibilit de prendre en compte certaines politiques publiques, notamment en
matire de logement, d'urbanisme et de transport, conues indpendamment de tout souci
de matrise de l'nergie [qui] ont pu avoir un impact fort, et souvent dcisif, sur la quanti-
t d'nergie consomme

- le fait que l'ampleur des actions publiques visant la matrise de l'nergie a fluctu en
phase avec les prix, ce qui rend difficile la sparation des consquences respectives de
ces politiques et de l'effet prix

- l'absence de mmoire de l'administration qui rend difficile un historique de la politique
value

L'instance a donc d d'une part faire une slection des actions valuer et d'autre part fixer
des hypothses pour estimer les dpenses publiques globales attribuables la matrise de
l'nergie.

Sous ces rserves, les principales conclusions gnrales de l'instance sont les suivantes
[Martin 1998 pp.23-26] :

- la dcroissance trs rapide de la dpense publique partir de 1986 a eu pour cons-
quence d'amplifier l'effet dmobilisateur que la chute des prix du ptrole a eu sur l'atten-
tion spontane porte par les consommateurs l'optimisation de leurs comportements en
matire d'utilisation de l'nergie. Ce phnomne est d'autant plus important qu'il s'est ac-
compagn de la baisse de certaines fiscalits spcifiques aux produits nergtiques

- on doit souligner le contraste entre d'une part la trs grande continuit de l'effort pu-
blic, reconnu ncessaire pour le dveloppement du nuclaire, et de l'effort priv d'inves-
tissement des grands producteurs d'nergie fossile et d'autre part le caractre conjonctu-

206
ce qui est aussi quivalent un taux d'actualisation et un critre de rentabilit trs levs du fait que l'inves-
tissement est peru comme dfensif
Annexe B.1.2 Bilan de 30 ans d'activits de MDE en France
108
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
rel de l'impulsion publique en matire de matrise de l'nergie

- les conomies d'nergie values ne tiennent pas compte du fait que des augmentations
de consommation ont eu lieu cause de l'volution de facteurs "lis aux forces du mar-
ch" sur lesquels on n'a pas voulu (ou su) agir, alors mme que l'volution de ces fac-
teurs tait largement tributaire des politiques publiques menes dans divers domaines

- la comparaison suggre que la France est bien place dans le groupe de pays tudis
[Etats-Unis, Japon, Allemagne, Royaume-Uni et Pays-Bas] mais qu'elle le doit en grande
partie au gain de rendement en nergie finale qui est automatiquement obtenu lors de la
substitution d'lectricit des combustibles fossiles, substitution qui a connu en France
une trs grande ampleur avec le programme nuclaire et qui est indpendante de la poli-
tique de matrise de l'nergie

Le rapport dtaille ensuite les conclusions sur les principaux axes d'intervention sur la de-
mande en nergie [Martin 1998 pp.27-38] :

- les aides la dcision : mission publique la plus lgitime, les actions dans ce domaine
ont eu un rsultat positif, notamment le dveloppement d'une profession de consultants
spcialiss. Mais l'instance signale que les budgets correspondants ont fortement diminu
partir de 1986 et qu'il tait ncessaire de relancer puis entretenir une capacit d'exper-
tise efficace dans les bureaux d'tude capables de substituer rentablement de la matire
grise locale de l'nergie importe. De plus l'instance souligne l'extrme modestie des
moyens disponibles pour l'information et la sensibilisation en regard des moyens des of-
freurs d'quipements et de services.

- les actions sur l'offre d'quipements et les btiments conomes en nergie :

- l'aide aux oprations de dmonstration : l'instance estime que les performances
de cette procdure sont honorables, mais qu'elle eut pu tre plus efficace si
elle avait t mieux cible et suivie. Mais la gestion de cette procdure a t rendue
difficile par les volte-face des pouvoirs publiques qui ont d'une part dans un
premier temps orient les actions sur le court terme (par ex. avec le FSGT, Fonds
Spcial des Grands Travaux) puis d'autre part ont fortement rduit les budgets pour
ce domaine.

- la rglementation sur les chaudires : qualifie d'chec exemplaire, la rgle-
mentation a fix un seuil rglementaire trop bas qui de plus n'a pas suivi les vo-
lutions techniques. De fait le rglement n'a servi rien parce qu'il tait insuffi-
samment exigeant. Il semble par contre que le label facultatif "haute perfor-
mance nergtique" () ait t un stimulant efficace. L'instance souligne la n-
cessit de mieux informer les acheteurs sur l'efficacit nergtique des chaudires
en raison de l'opacit des informations alors disponibles.

- la rglementation thermique pour les nouveaux btiments : exemple d'action
rglementaire russie qui a eu un impact nergtique marqu et rentable. Toute-
fois l'instance suggre quelques amliorations, notamment de revoir les exigences
qui n'avaient pas t rexamines depuis 1988, en particulier pour combler les
carts entre rsidentiel et tertiaire, pour amliorer le contrle de la rglementation
et pour instaurer des exigences lors de la rhabilitation de logements anciens.
Annexe B.1.2 Bilan de 30 ans d'activits de MDE en France
109
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006

- les aides l'investissement :

- dans l'industrie :
- les subventions forfaitaires de 400F/tep/an taient une procdure int-
ressante, qui optimisait l'impact de l'aide public, mais n'a dur que de
1978 1981
- les crdits-bails (SOFERGIE) ont eu un rle trs limit, car ils ne pro-
posaient pas un avantage dcelable pour les entreprises
- l'impact du rgime d'amortissement acclr n'a pas pu tre mis en vi-
dence, mais cette mesure reste modeste et utile car elle peut tre un ar-
gument commercial pour les fabricants.

- dans le logement :
- pour le logement social, un effort important a t port sur la rhabilita-
tion dans le cadre des PALULOS (Primes l'Amlioration des Logements
Usage Locatif et Occupation Sociale) et des FSGT. Il est difficile de ju-
ger de la rentabilit des travaux raliss car beaucoup d'entre eux taient
buts multiples. De plus, les informations disponibles ne permettent pas de
se prononcer sur l'volution des consommations d'nergie des logements
locatifs sociaux antrieurs 1975.
- pour le secteur locatif priv, les aides de l'ANAH n'ont pas t values
- pour les propritaires occupants, la principale mesure concerne les cr-
dits d'impts qui paraissent avoir volu davantage comme un soutien
l'activit du secteur du BTP que comme procdure de soutien la matrise
de l'nergie, avec un effet d'aubaine de grande ampleur. Pour autant,
les rsultats obtenus sont trs positifs et l'instance value 30% la rduc-
tion des consommations de chauffage dans les logements antrieurs 1975
grce aux investissements raliss.

- dans les btiments de l'Etat : l'instance a not que l'on tait loin d'tre parvenu
mettre sur pied une politique qui permette de dtecter et raliser les investisse-
ments rentables de matrise de l'nergie

Par ailleurs, concernant plus particulirement l'ADEME [Martin 1998 pp.43-45], l'instance
conclut que la continuit du soutien apport par l'Etat cette agence n'a pas t suffisante
pour lui permettre d'tre un vritable muscle antagoniste face aux offreurs d'nergie qui au-
rait permis d'optimiser long terme notre politique nergtique. Poursuivant que les fortes
rductions de moyens et d'effectif partir de 1987 ont t particulirement peu favorables
la constitution d'quipes capables de construire une logique de matrise de l'nergie face
aux quipes de l'offre d'nergie. En outre en raison du regroupement de l'AFME avec les
agences en charge des dchets et de la qualit de l'air, il est clair que des transferts massifs
de personnel de la matrise de l'nergie vers la protection de l'environnement ont t rendus
indispensables par le dplacement des volumes de crdits d'intervention.

En conclusion sur l'ADEME, l'instance considre que le dsengagement de l'Etat s'est tra-
duit par un dmantlement progressif et insidieux des actions de matrise de l'nergie de
l'Agence. Parmi celles de ses actions qui ont t values beaucoup ont t pourtant favora-
blement juges. Mais l'instance de souligner l'insuffisance du suivi des affaires et de l'va-
luation de leur impact rel.
Annexe B.1.2 Bilan de 30 ans d'activits de MDE en France
110
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006


les autres actions

Le rapport de l'instance ne concerne pas les actions ralises hors interventions de l'Etat et de
l'ADEME. En outre il est rvlateur qu' aucun moment il ne fasse mention des actions qui
auraient pu tre ralises un chelon local.

De fait peu de littrature est disponible sur les activits de MDE menes hors du cadre des
politiques publiques de matrise de lnergie. Un exemple permet cependant dillustrer ce que
ces actions ont pu tre.

Les programmes de promotion des chaudires condensation en France ont t valus
dans le cadre dune tude europenne [Haug 1998 pp.31-34 et 67-75]. Cet exemple fait res-
sortir la stratgie adopte par GDF pour promouvoir cet quipement performant, dans le but
de conqurir des parts de march pour le gaz, contre llectricit et surtout contre le fioul.

Lvaluation insiste sur la distinction ncessaire entre les programmes pour les chaudires
individuelles et ceux pour les chaudires collectives. Pour les individuelles, GDF a soutenu
fortement lensemble de la filire dans les annes 1980 (fabricants, installateurs et acheteurs
finals). Ce fort investissement de GDF a permis un essor important des ventes pour la priode
1983-1990. Mais par la suite, GDF a arrt ses programmes daide. Cet arrt, conjointement
une baisse de lattractivit des chaudires individuelles condensation
207
, a t suivi dune
forte chute des ventes revenues en 1995 leur niveau de 1982

En revanche, pour les chaudires collectives, les fabricants avaient cru dans lintrt des
chaudires condensation ds les annes 1970. Leur march stait donc dvelopp avant
mme que GDF ny ajoute des programmes daide. Les aides de GDF et de lEtat (par
lintermdiaire de lAFME et/ou de lANAH, Agence Nationale pour lAmlioration de
lHabitat) ont renforc la pntration de ce produit sur le march. Ce succs a perdur mme
aprs larrt des programmes de GDF et en 1998, le gaz tait utilis dans 50% des chaudires
collectives, avec 65% de chaudires condensation.

Cet exemple montre bien que les actions hors politiques publiques ont aussi t conjoncturel-
les et le plus souvent lies des intrts conomiques et commerciaux. Elles ont ainsi connu
des fortunes diverses quil est difficile destimer compte tenu du manque dvaluations rali-
ses et du peu de traces quil en reste.


B.1.2.3 Annes 1990 : la MDE relgue larrire-plan


Les efforts engags suite aux chocs ptroliers ont t fortement diminus la fin des annes
1980 du fait du contre-choc ptrolier. Les proccupations environnementales commenaient
certes prendre une place plus importante dans les politiques publiques et des entreprises.
Mais cette pression restait insuffisante pour initier des programmes consquents de MDE.


207
Du fait de la meilleure isolation des logements (rglementation thermique), de la rduction de lcart de per-
formance entre les chaudires condensation et les chaudires basse temprature, et de la baisse des prix du
gaz. Ces trois facteurs rduisaient donc les conomies obtenues grce une chaudire condensation.
Annexe B.1.2 Bilan de 30 ans d'activits de MDE en France
111
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
De fait alors que la France avait connu une rduction importante de son intensit nergtique
primaire depuis les chocs ptroliers
208
, celle-ci a stagn entre 1990 et 2000. Et mme si globa-
lement les consommations unitaires ont continu de baisser (notamment du fait des progrs
technologiques et des rglementations), les consommations globales ont fortement augment
en raison des effets dactivit et de structures (voir les analyses faites dans [ENA 2002 pp.13-
19]).


(source :Observatoire de lEnergie, 2001 cit par [ENA 2002 pp.11])
Figure 25 - intensit nergtique primaire de la France (1970-2000)

Les actions ayant perdur dans cette priode sont principalement celles qui reprsentent un
intrt direct pour ceux qui les ralisent. Par exemple pour EDF, les actions les plus importan-
tes taient celles motives par la prquation tarifaire, i.e. celles dans les DOM [Benard
1996], et dans une moindre mesure la MDEc rurale [De Gouvello 1996]. Ces oprations
sont les principaux axes dintervention sur la demande en nergie des accords ADEME-
EDF, qui furent le principal (bien que modeste
209
) cadre de financement
210
pour les activits
de MDE pendant les annes 1990. Il est en outre significatif quil nexiste pas de rel bilan
disponible des actions menes dans ce cadre
211
, alors que l'affichage d'EDF comme acteur
essentiel pour le dveloppement d'actions de MDE [Laroche 1996 pp.657] est beaucoup plus
visible.

Ainsi lorsque Yann Laroche [1996 pp.659] dresse un premier bilan des accords ADEME-EDF
sur la priode 1993-1996, il ne fait au final qu'une numration des champs couverts et des
possibilits envisages (promotion des LBC et de l'tiquette nergie dans le rsidentiel, dve-
loppement d'une nouvelle dmarche d'audit nergtique dans le tertiaire, actions sur les mo-
teurs, les installations frigorifiques et d'air comprim dans l'industrie). Mais aucune valua-
tion des rsultats obtenus n'est prsente. Du ct d'EDF, deux arguments venaient aussi
justifier la difficult de mener des actions de MDE de grande ampleur (hors cas spcifiques
des DOM) : le principe de spcialit qui empche EDF d'intervenir directement sur des ac-
tions en aval du compteur, et les questions d'quit de traitement de tous les clients
212
.

Ce manque de retour dtaill sur les actions menes alors s'explique aussi par le fait qu'au-

208
En moyenne -2,2%/an entre1973 et 1982, puis -0,7%/an entre 1983 et 1989
209
cause de la surcapacit de production en France mtropolitaine, ces actions ont t marginales dans le
pass [Irrek 2002 pp.29]
210
avec l'enveloppe MDEc du FACE (Fonds d'Amortissement des Charges d'Electrification) qui n'a jamais t
pleinement utilise (ainsi en 1996, on note 400.000 F de projets raliss pour une enveloppe de 100 millions par
an [De Gouvello 1996 pp.703] (voir aussi section B.1.5.2 de l'Annexe B.1.5)
211
La principale source d'information sur cette priode est le numro spcial de la Revue de l'Energie sur la
Matrise de la Demande d'Electricit (n483 de dcembre 1996)
212
ces deux arguments sont ainsi les deux principales explications fournies pour la non utilisation des fonds
MDEc du FACE
Annexe B.1.2 Bilan de 30 ans d'activits de MDE en France
112
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
cun objectif quantitatif n'avait t fix dans ces accords. De fait, l'ADEME n'a pas non plus
rellement affich de rsultats pour ces actions bipartites
213
. Voici par exemple les rsultats
affichs dans la lettre de l'ADEME n68 de juin 2000 : Des rsultats significatifs pour les
deux prcdentes conventions. A deux reprises par le pass, EDF et lADEME se sont enga-
ges par convention dans des actions de partenariat (1993-1996, 1996-1999). La campagne
de promotion de ltiquette nergie sur les appareils lectromnagers a, par exemple, permis
den faire adopter le principe par le public et sest solde par une conomie dnergie estime
30% sur les produits vendus dans les 5 000 points de vente des 49 enseignes engages dans
lopration. Autres exemples dactions : le label de qualit sur les lampes basse consomma-
tion, vite devenu europen, les audits de matrise de la demande dlectricit, raliss dans
400 btiments communaux et 220 installations industrielles, ou encore le programme Eole
2005. On notera que ce bilan reste d'une part centr sur le nombre d'actions ralises et non
sur leurs rsultats, et d'autre part que ces actions restent somme toute modestes.

Le bilan reste vasif lors de la confrence de presse annonant la reconduction de l'accord le
26 avril 2004 : aprs une premire phase d'apprentissage du travail en commun
(1993/1996), les thmatiques abordes ont t tendues (1996/1999) puis gnralises par
leurs dclinaisons en rgion (2000/2003). Plus de 300 projets ont t raliss dans tous les
secteurs de l'conomie (habitat, tertiaire, industrie) : sensibilisations la MDE, formations
des professionnels, tudes techniques, tudes de faisabilit, oprations exemplaires.

Au final, les actions les plus marquantes sur cette priode restent celles ralises dans les
DOM (cf. section B.3.5.3) et les campagnes de mesures commandes au cabinet ENER-
TECH d'Olivier Sidler qui constituent une source de donnes consquentes sur les consomma-
tions d'nergie en conditions relles
214
.

Le "passage vide" des annes 1990 concernant les activits de MDE est confirm dans le
rapport d'audit ralis en 1999-2000 sur la gestion de l'ADEME o les rapporteurs soulignent
que les deux axes de la politique de l'nergie de l'ADEME (l'URE et les EnR), ont t histo-
riquement trs importants pour l'ADEME, dont la principale constituante a t l'AFME, mais
plus ou moins laisss en friche pendant l'essentiel de la dcennie 90. Compte tenu des priori-
ts et des moyens budgtaires assigns par ses tutelles, lADEME na en effet pu conserver
quune activit minimale dans ces domaines (notamment en sappuyant sur des contrats eu-
ropens pour maintenir un niveau dexpertise en matire dnergies renouvelables) [De
Gouyon 2000 pp.11]

Au niveau des politiques publiques, il faut attendre la ratification par la France du protocole
de Kyoto en 2000 pour voir sinitier deux nouveaux programmes annonant la relance des
politiques de matrise de lnergie : le PNLCC (Plan National de Lutte contre le Change-
ment Climatique) complt par le PNAEE (Plan National dAmlioration de lEfficacit
Energtique). Toutefois la mise en uvre des mesures annonces est reste partielle [ENA
2002 pp.34].


B.1.2.4 Perspectives



213
Lvaluation et le contrle des actions de lagence [ADEME], entendus au sens large, restent lacunaires.
[De Gouyon 2000 pp.23]
214
voir les rapports d'tude disponibles sur <http://f pp.idler.club.fr/page9.html>
Annexe B.1.2 Bilan de 30 ans d'activits de MDE en France
113
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Une relance lie la monte des proccupations
environnementales, renforce par une hausse "durable"
des prix des nergies

Depuis le dbut des annes 2000, les activits de MDE ont donc connu un regain dintrt,
notamment du fait des engagements internationaux pris pour rduire les missions de gaz
effet de serre. De fait les mesures du PNAEE ont bien pour but de participer aux politiques
annonces dans le PNLCC (aujourdhui remplac par le Plan Climat officialis en 2004).
Toutefois cette relance restait centre sur quelques mesures "phares" (campagne de communi-
cation de lADEME en 2001 et mise en place dun rseau dEspaces Info Energie), mme si
un rquilibrage en faveur de lnergie samorait au sein du budget de lADEME, notam-
ment avec une relance des activits de conseil.

Cette relance connat aujourdhui un second souffle car les questions de prix des nergies et
de scurit dapprovisionnement reviennent au premier plan avec la trs forte hausse du prix
du ptrole. Or, comme le souligne Pierre Radanne [Radanne 2006 pp.6], cette hausse est cette
fois-ci structurelle et non conjoncturelle comme dans les annes 1970. Cette nouvelle phase
dans les cycles de lnergie dcrits par Radanne, repose avec acuit les questions
dpuisement des ressources qui viennent sajouter la prise de conscience de la ncessit
de rduire les missions de gaz effet de serre.

Dans ce contexte, la France suit dabord les orientations fixes par les diffrentes Directives
europennes. Ainsi la majorit des dispositions annonces dans la loi de 2005 [France 2005]
ne sont quune transposition ou une anticipation de ces Directives
215
.

En parallle, on assiste une remobilisation du grand public la fois dans les objectifs du
Plan Climat et en rponse la hausse des prix des nergies. Les principales mesures ainsi en-
gages ont t de renforcer les crdits dimpts pour les investissements de matrise de
lnergie et que lADEME lance une nouvelle campagne de sensibilisation (faisons vite a
chauffe), plus ambitieuses que celle de 2001 et qui se veut surtout plus concrte
216
.

LADEME prsente un bilan trs positif des deux premires annes de cette campagne
217
(en-
viron 50% des personnes ayant entendu la campagne radio ou TV ont affirm avoir modifi
un geste au quotidien, +50% de personnes conseilles par les Espaces Info Energie, prs de
4000 initiatives dans le cadre du Club Plante Gagnante, etc.). Mais il est encore trop tt pour
valuer limpact rel de cette campagne sur les consommations dnergie. Il sera important de
suivre comment cette relance des activits de MDE se traduit concrtement, et surtout si
elle sinscrit dans la dure et ne correspond pas une nouvelle fois une politique de court
terme en raison de lenvole des prix des nergies.


Les enjeux actuels


215
Ainsi les certificats de performance nergtique correspondent la Directive 2002/91/CE et les certificats
dconomies dnergie anticipaient la Directive relative lefficacit nergtique. De mme, le PNAQ (Plan
National dAllocation des Quotas) est li la Directive 2003/87/CE.
216
Celle lance en 2004 a une dure de trois ans et se veut centre sur des messages plus concrets (exemples de
bonnes pratiques ou dquipements performants utiliser). Elle sappuie de plus sur une logique de partenariats
avec le Club Plante Gagnante.
217
Bilan prsent lors de la confrence de presse de Nelly Olin et Franois Loos le 13 dcembre 2005
(cf. http://www2.ADEME.fr/f pp.ervlet/getDoc ?cid=96&m=3&id=26079&ref=12527&p1=B)
Annexe B.1.2 Bilan de 30 ans d'activits de MDE en France
114
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
A la lumire des constats faits par le rapport de linstance prside par Yves Martin [Martin
1998] et des volutions quont connu depuis les politiques de matrise de lnergie (cf. [ENA
2002]), trois recommandations fortes ressortent :

- inscrire les actions dans le long terme, et pour ce faire intgrer les questions de matrise
des consommations dans lensemble des processus de dcisions

- structurer les politiques dactions en s'appuyant sur les diffrents niveaux territoriaux
(notamment avec le rle de coordination et dimpulsion de la Commission europenne, et
la position privilgie des collectivits locales pour atteindre les gisements diffus)

- dvelopper de nouvelles stratgies pour atteindre les gisements diffus qui sont devenus
lenjeu majeur de la matrise des consommations dnergie, et dune manire gnrale
sattaquer aux secteurs pour lesquels il est plus difficile dintervenir (logements anciens,
PME-PMI, etc.)


Intgration de la MDE dans des approches globales, et
articulation entre les diffrents niveaux d'actions (local,
national, europen)

Lintgration des activits de MDE dans des dmarches plus globales se fait dj la faveur
de lmergence dapproches de dveloppement durable telles que les agendas 21, les diff-
rents outils de lADEME (contrats ATEnEE, Plan Environnement Collectivits, Bilan Car-
bone, Analyse Environnementale de lUrbanisme, etc.), les certifications ISO14001 pour les
entreprises, etc.

En parallle la relance des politiques d'activits de MDE au niveau national, on assiste ga-
lement un essor de cette thmatique au niveau local, qui est dtaill dans les parties II.1 et
II.2.

En ce qui concerne la structuration des politiques lies lnergie en France, a t mis en
place le SSCE (Schma de Services collectifs de lEnergie) qui avait pour but dinitier une
concertation entre lEtat et les Rgions. C'est un moyen de concilier les enjeux locaux et la
politique nationale de l'nergie, notamment pour dterminer les conditions dans lesquelles
l'Etat et les collectivits territoriales pourront favoriser les actions de matrise de l'nergie et
de production et utilisation des nergies renouvelables [DATAR 2002 pp.839]
218
. Ce SSCE
tait notamment cens tre mis jour en 2005 pour prparer les nouveaux CPER (Contrats de
Plan Etat-Rgion). Mais il semble que ce processus reste trs ingal selon les rgions, et au-
cune communication na t faite sur la mise jour du SSCE. Aurait-il t abandonn ? (voir
aussi la section B.1.6.1 de l'Annexe B.1.6)

Dautre part, lhorizon 2007, les politiques defficacit devraient se structurer autour du
Plan daction dEfficacit Energtique que la France devra soumettre la Commission Eu-
ropenne dans le cadre de la Directive EESE et de son objectif indicatif de rduction addi-
tionnelle des consommations dnergie de 1%/an. Cela augure par exemple dun renforcement
des obligations lies aux certificats dconomies dnergie qui ne reprsentent pour la priode
2006-2008 quun objectif de rduction de 1 pour mille [Boterf 2006].

218
sur le premier processus d'laboration du SSCE (1999-2002) se reporter [Bailly 2000, Bailly 2001]
Annexe B.1.2 Bilan de 30 ans d'activits de MDE en France
115
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006


Une nouvelle donne avec les certificats d'conomies
d'nergie

Les certificats dconomies dnergie sont pour linstant linstrument principal mis en place
pour atteindre les gisements rentables diffus.

Il est encore bien trop tt pour en valuer la porte. Si lobjectif fix parat juste titre peu
ambitieux (1,7 pour mille des consommations couvertes par le dispositif [Boterf 2006]), il a
dj suscit un intrt important en juger le nombre de sminaires organiss pour en d-
battre et les principaux acteurs obligs (EDF et GDF) ont prpar des stratgies bases sur
leur savoir-faire commercial pour mettre en place un traitement industriel de ce march de
masse [celui des solutions conomes en nergie pour les particuliers]
219
.

Les CEE pourraient ainsi permettre un important changement d'chelle pour les activits de
MDE.

De plus, le dispositif est aujourd'hui en phase de rodage, et les acteurs suivent une phase
d'apprentissage. A l'image des dispositifs californien (cf. sous-partie I.1.4) et danois (cf.
sous-partie I.2.3), les objectifs ne pourront tre plus consquents qu'au fur et mesure de l'ex-
prience acquise.

Il reste donc voir que l'mulation actuelle se concrtise par des dynamiques de projets et que
les espoirs que fait natre ce nouveau dispositif chez certains acteurs comme les collectivits
locales ou lindustrie du btiment
220
ne soient pas dus. Les expriences danoise et britanni-
que montrent ainsi limportance quont le suivi et lvaluation du dispositif pour sa russite.


Conclusions

En conclusion, tout semble montrer que les activits de MDE vont connatre une priode faste
dans les annes venir, mais les dfis relever sont diffrents de ceux de la priode d'aprs
les chocs ptroliers de 1973 et 1979
- inscrire les actions dans la dure face des enjeux de court mais aussi de long terme
(puisement des ressources et lutte contre le rchauffement climatique)
- soutenir les activits de MDE dans un nouveau contexte de march ouvert la concur-
rence qui remet en cause la rpartition des rles et les modes d'intervention possibles
- s'attaquer des gisements diffus, qui se sont souvent rvls difficiles atteindre dans le
pass

Dans ce contexte, le dveloppement de dispositifs d'valuation adapts apparat plus que ja-
mais ncessaire pour :
- renforcer la lgitimit et la visibilit des activits de MDE, et par consquent en assurer le

219
expression reprise du dossier spcial sur les certificats d'conomies d'nergie du numro 367 de la revue
Energie Plus (paru le 1
er
juin 2006)
220
voir les prsentations faites par Fauconnier (Fdration Franaise du Btiment), Labb (Nantes Mtropole)
et Berzosa (SYDEV, Syndicat Dpartemental d'Energie et d'Equipement de la Vende) lors de la runion d'in-
formations et d'changes sur les certificats d'conomies d'nergie organise Nantes par l'ATEE, la DRIRE et
l'ADEME le 13 avril 2006
Annexe B.1.2 Bilan de 30 ans d'activits de MDE en France
116
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
dveloppement
- capitaliser les expriences, d'une part pour profiter des expriences passes dans la dfini-
tion des nouvelles actions, et d'autre part pour s'inscrire dans un processus d'amlioration
continue, indispensable pour intgrer les actions dans la dure
- aider la dfinition des actions et au choix des meilleures stratgies possibles
- aider la formation des nouveaux acteurs concerns par les actions de MDE

Tous ces points sont essentiels pour viter que les espoirs importants que fondent un nombre
croissant d'acteurs sur les actions de la MDE ne soient pas dus et pour viter que la prise de
conscience actuelle ne laisse ensuite place une rechute comme ce fut le cas dans les annes
1990.

Enfin les efforts faits en faveur de la matrise de la demande en nergie sont relativiser. Il
n'y a pas pour l'instant de rquilibrage rel entre les politiques d'investissements sur
l'offre et celles sur la demande
221
. Il serait par exemple intressant de pouvoir chiffrer les
politiques publiques engages sur ces deux points en 2005 : d'une part la construction d'un
nouveau racteur nuclaire (EPR) et d'autre part les mesures prises pour agir sur la demande
(certificats d'conomies d'nergie et transcription de la Directive europenne sur la perfor-
mance nergtique des btiments), sans compter les restrictions budgtaires de l'ADEME de-
puis 2002. Mais tous ces chiffres ne sont pas encore disponibles.

Toutefois sur cette question du rquilibrage, des chiffres sont disponibles quant aux moyens
engags concernant la recherche dans le domaine de l'nergie. Citons par exemple le dtail
des budgets du programme 188 Recherche dans le domaine de l'nergie fournis dans l'an-
nexe Recherche et enseignement suprieur de la loi de finances pour 2006
222
:

Axe de recherche Crdits 2005
(en millions d'eu-
ros)
Crdits 2006
(en millions
d'euros)
Comptitivit, scurit et dveloppement de l'nergie
nuclaire
388 (63,2%) 415 (63,5%)
Nouvelles technologies de l'nergie (NTE) 34,5 (5,6%) 57 (8,7%)
Comptitivit et dveloppement du secteur des hy-
drocarbures et de ses infrastructures, diversification
des rserves
192 (31,2%) 182 (27,8%)
Source : <http://alize.finances.gouv.fr/budget/plf2006/lfi/docbv/pdf/DBGPGMLFIPGM188.pdf>
Tableau 39 - rpartition du budget pour le programme 188 de recherche dans le
domaine de l'nergie

Un constat est fait galement sur les moyens financiers engags dans ce domaine dans le rap-
port fait en juin 2004 par le groupe de travail sur les NTE aux Ministres chargs de l'Indus-
trie (MINEFI) et de l'Environnement (MEDD) [Chambolle 2004 pp.37] : en 2002, les orga-
nismes de recherche ont consacr un budget global, provenant de subventions de l'tat et de
contrats industriels de 940 M la recherche en nergie rparti en 580 M [soit 61,7%]
pour le nuclaire, 230 M [soit 24,5%] pour les nergies fossiles, 50 M [soit 5,3%] sur les

221
Ce rquilibrage tait pourtant une des recommandations principales du rapport de l'instance prsid par Yves
Martin [Martin 1998]
222
Sans compter que l'axe "NTE" comprend outre les recherches sur les technologies performantes pour utiliser
l'nergie, les recherches sur l'hydrogne et les EnR
Annexe B.1.2 Bilan de 30 ans d'activits de MDE en France
117
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
nergies renouvelables, 40 M [soit 4,25%] sur l'efficacit nergtique et 40 M [soit
4,25%] sur l'hydrogne et la pile combustible. La contribution de l'tat ce budget s'lve
600 M environ. Le budget de la recherche sur le nuclaire tait donc plus de six fois
celui additionn sur les EnR et l'efficacit nergtique.
223


Ces chiffres illustrent bien l'article 5 de la loi de 2005 [France 2005] (La politique de recher-
che doit permettre la France dici 2015, dune part, de conserver sa position de premier
plan dans le domaine de lnergie nuclaire et du ptrole et, dautre part, den acqurir une
dans de nouveaux domaine) et viennent relativiser l'article 3 selon lequel le premier axe de
la politique nergtique est de matriser la demande dnergie.

Ces observations montrent bien qu'en termes de politiques nergtiques publiques la priorit
reste le nuclaire. Pour ce qui est des activits de MDE, les dispositions rcentes (par ex. cer-
tificats d'conomies d'nergie) montrent que l'orientation actuelle est de suivre le mouvement
d'ouverture des marchs de l'lectricit et du gaz, i.e. d'inscrire les activits de MDE dans
une logique de march, ce qui revient in fine transfrer les charges lies la MDE du
contribuable vers le consommateur d'nergie
224
. Cette nouvelle approche amnera proba-
blement redfinir les rles et les stratgies des principaux acteurs (Etat, ADEME, fournis-
seurs d'nergie, socits de services nergtiques).

Ce point tait d'ailleurs dj abord dans le rapport d'audit de 1999-2000 sur la gestion de
l'ADEME : au total, si lagence nest, dans le domaine de lnergie, quun acteur parmi
dautres bien plus importants, elle peut sans doute apporter une relle plus-value condition
de bien prciser son rle. Les orientations donnes EDF et la nouvelle organisation du
march lectrique seront autrement plus dterminantes pour le dveloppement des nergies
renouvelables en France que laction de lADEME, de mme que les volutions rglementai-
res et fiscales dans le succs du plan national de lutte contre leffet de serre. Mais il revient
lADEME daider les pouvoirs publics dans la ralisation de ces choix, ce qui suppose de sa
part une meilleure capacit acqurir et plus encore diffuser linformation, et de contri-
buer, pour sa part, orienter ses moyens budgtaires et humains vers les crneaux o elle
peut apporter une valeur ajoute par rapport aux autres intervenants, ce qui implique un
meilleur systme dinformation de gestion et dvaluation des impacts. [De Gouyon 2000
pp.12]




223
La trs forte implication franaise dans le projet international ITER sur la fusion nuclaire confirme par ail-
leurs ces orientations pour les annes venir.
224
Intervention de clture de Pierre Biche, Dlgu Rgional de l'ADEME Pays de la Loire lors de la runion
d'information et d'changes sur les certificats d'conomies d'nergie le 13 avril 2006 Nantes

118
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Annexe B.1.3 Quel rle de l'chelon local dans les politiques nergtiques ?


B.1.3.1 Politiques de dcentralisation et matrise de l'nergie dans les annes 1980


L'nergie au cur du processus de dcentralisation,
mais avec des dbuts difficiles

L'nergie est un des domaines qui faisait partie des politiques de dcentralisation inities au
dbut des annes 1980. Les textes runis par Bourjol et Le Lamer [1984] du Colloque "Ener-
gie, Dmocratie et Collectivits locales" organis Tours les 23 et 24 avril 1982 relatent les
dbuts incertains de ce processus.

Une circulaire ministrielle du 17 dcembre 1981 cosigne par les Ministres du Plan et de
l'Energie avait pos les premires pierres pour l'organisation de dbats nergtiques rgio-
naux et la prparation de plans nergtiques rgionaux. Ainsi la planification devaient dsor-
mais tre dcentralise et les plans rgionaux en constituer le fondement [Bourjol 1984
p.8].

Mais si Le Lamer
225
constate un intrt rel des acteurs locaux pour ce processus, il souligne
aussi que les disparits sont importantes selon les rgions. Et de poursuivre : entre les
ambitions affiches fin 1981 et les ralisations en mai 1983, la distance est importante.

Ce constat est expliqu en partie par un manque de clart dans la loi n82-213, dite loi Def-
ferre, relative aux Droits et Liberts des Communes, des Dpartements et des Rgions. Ainsi
Le Lamer rappelle l'absence de rfrence explicite aux comptences rgionales en matire
d'nergie. Ce qui vient du fait que le texte a t conu en fonction du principe des "comp-
tences exclusives" . Or les objectifs de politiques nergtiques sont fixes au niveau national,
ce qui implique que l'Etat, les Rgions et les collectivits locales doivent agir paralllement
et d'une manire coordonne dans le cadre de la planification rgionale.

Les dbats et la clarification de l'articulation entre les niveaux central et local apparaissent
donc comme un lment cl pour le dveloppement de politiques nergtiques locales.

A ce sujet, Roy faisait remarquer que la dcentralisation est un phnomne itratif et que
cette itration ou inter-action entre le national et le local est un rapport de force. [Bourjol
1984 pp.237-238]


Articulation [national local] et rapport de comptences

Dans ce sens, la pratique au niveau local de l'valuation des actions est un lment important
pour que les acteurs locaux disposent des informations ncessaires, d'abord pour prendre
part aux dbats, puis pour r-quilibrer les rapports de force guids par les niveaux de
comptences dvelopps par chaque acteur.

L'analyse de Bouvier ce sujet peut tre rsume comme suit.


225
dans son introduction [Bourjol 1984 pp.8-17]
Annexe B.1.3 Quel rle de l'chelon local dans les politiques nergtiques ?
119
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Dans un premier temps (la priode de monopole pendant laquelle EDF faisait figure de "Mi-
nistre de l'Energie" et "d'Etat dans l'Etat"), seule EDF disposait des comptences humaines
susceptibles dexercer les fonctions techniques et spcialises [Bouvier 2005 p.238]

Puis la cration de l'AFME en 1982 a concrtis l'mergence d'un contre-pouvoir EDF,
avec une forte culture militante. Sa critique essentielle port(ait) sur lexcs de pouvoir
dEDF qui dfinit les critres et procde leur vrification en abusant de sa comptence
technique pour soustraire la dcision au dbat public. [Bouvier 2005 pp.241-242]. L'implan-
tation de Dlgations de l'AFME dans chaque Rgion ds 1983 a particip une premire
volution du rapport de force, notamment pour remdier la fragilit (du) systme franais
(qui) provient justement du faible niveau de transfert de comptence vers les acteurs locaux
(Pierre Radanne cit par [Bouvier 2005 p.246])

En parallle la promotion des politiques nergtiques locales (s')est souvent base sur un
discours anti-Nation et anti-centralisation. () Ce courant sappuie par ailleurs sur un r-
flexe plus naturel en termes de pouvoir : celui des fonctionnaires territoriaux - dont le nom-
bre a explos et dont les comptences se sont largies en moins de vingt ans qui ont coeur
de dfendre les nouvelles prrogatives des collectivits territoriales. [Bouvier 2005 p.293]

Les rapports de force s'expliquent aussi par des rapports de comptences au sens juridique du
terme. Mais cette partie de l'analyse sort du champ de notre thse (se reporter aux thses de
[Bouvier 2005] et [Gayral 2005]).


Essor conjoint de la dcentralisation et de la matrise de
l'nergie, et question de la dimension locale des actions

L'autre point important des politiques nergtiques dfinies au dbut des annes 1980 est l'ac-
cent mis sur la matrise de l'nergie (cf. aussi section B.1.2.2). L'utilisation rationnelle de
l'nergie et les nergies renouvelables reprsentent alors les champs principaux pour le d-
veloppement de comptences locales dans le domaine de l'nergie, comme suggr dans le
plan d'indpendance nergtique adopt par l'Assemble Nationale le 7 octobre 1981 [Trou-
slot 1995 p. 53-57]. Ce plan proposait en outre la cration d'Agences Rgionales de l'Energie,
rattaches aux Conseils Rgionaux.

Mais c'est surtout la cration des Dlgations Rgionales de l'AFME (Agence Franaise
pour la Matrise de l'Energie) qui marque l'essor conjoint des politiques de dcentralisation et
de matrise de l'nergie
226
.

Dans son travail d'valuation de la politique de matrise de l'nergie en Poitou-Charentes entre
1984 et 1992 (cf. Annexe B.3.7), Trouslot analyse l'volution du mtier de l'ingnieur
AFME qui traduit une volution de l'articulation entre les niveaux national et local.

Dans un premier temps, les ingnieurs AFME taient surtout occups instruire des dos-
siers, (pouvant) difficilement dvelopper leurs fonctions de conseils du fait d'une politique
d'urgence court terme. Puis les objectifs de la politique rgionale se sont dclins plus long
terme avec une forme d'intervention conue en termes d'animation publique et de cration de

226
Alors que chaque rgion a bien eu une Dlgation Rgionale de l'AFME ds 1983, il n'existe encore que 10
Agences Rgionales de l'Energie ou quivalent en 2006 (cf. www.rare.asso.fr) pour 22 rgions (France mtro-
pole).
Annexe B.1.3 Quel rle de l'chelon local dans les politiques nergtiques ?
120
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
rseaux technico-conomiques, o le conseil et la mobilisation des acteurs locaux prennent
le pas sur les procdures classiques d'aide l'investissement [Trouslot 1995 pp.52 et 57].

Cette volution fait aussi ressortir plusieurs niveaux de dimension locale du simple relais de
procdures nationales au dveloppement d'initiatives locales (pour plus de dtails sur ce point,
se reporter la section II.2.2.4).

L'valuation ex-post peut alors tre utile pour accrotre les comptences locales et permettre
ainsi de passer de stratgies locales passives (applications simples de politiques nationales)
des stratgies plus actives (constitution de rseaux d'acteurs, analyse du contexte local
pour dfinir des initiatives qui rpondent ses spcificits).


Un souci d'valuation prsent ds le dbut, mais peu mis
en pratique

Trouslot note que l'valuation des politiques de matrise de l'nergie se trouve au cur des
principales proccupations qui ont marqu l'analyse des politiques publiques au cours des
annes 80. Il rappelle que le IX
me
Plan (loi n83-645) affirmait un devoir d'valuation :
les chelons rgionaux de la planification dcentralise devraient crer leurs propres
moyens d'valuation, en s'appuyant notamment sur les moyens universitaires disponibles.
[Trouslot 1995 pp.7-8].

Mais aussi bien Trouslot que l'instance d'valuation prside par Martin [Martin 1998] ont
constat que ces bonnes intentions sont souvent restes lettres mortes. Ce qui leur a no-
tamment pos des problmes pour rcuprer les informations ncessaires leur travail d'va-
luation (cf. aussi sections II.3.1.1 et II.3.1.2)


B.1.3.2 Un nouvel lan li au renouveau de l'intercommunalit, au renforcement des Rgions
et l'ouverture des marchs


D'une intercommunalit fonctionnelle une
intercommunalit de projets

Bouvier [2005 p.22] cite l'analyse faite par Poupeau [1999] du nouveau rle des collectivits
au cours des annes 1990, notamment l'occasion de la rvision des cahiers des charges de
concession de distribution publique qu'on reconnat comme une renaissance du pouvoir
concdant
227
.

Il fait aussi ressortir que la restructuration du maillage territorial local suite la loi Che-
vnement de 1999 sur les tablissements publics de coopration intercommunale
228
a t une
source de questionnement des collectivits locales sur leurs comptences (au sens juridique)
dans le domaine de l'nergie [Bouvier 2005 pp.192-202].


227
Les communes sont propritaires des rseaux de distribution d'lectricit et de gaz. Elles concdent ce service
public la branche Distribution d'EDF-GDF pour 95% des communes, et des rgies municipales pour les 5%
restant.
228
Pour plus de dtails sur les diffrents types de structures intercommunales, se reporter :
http://www.vie-publique.fr/decouverte_instit/instit/instit_3_5_0_q4.htm
Annexe B.1.3 Quel rle de l'chelon local dans les politiques nergtiques ?
121
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Il analyse ainsi le passage d'une intercommunalit fonctionnelle (ici fonction d'autorits
concdantes des rseaux de distribution) une intercommunalit de projets et citoyenne.
Dans ce cadre, les nouvelles structures intercommunales ne souhaitent plus seulement contr-
ler l'excution des contrats de concession, mais aussi dvelopper leurs propres politiques
nergtiques locales : plus encore que le renforcement des comptences de rgulation locale
des acteurs du service public, cest le dveloppement des politiques nergtiques locales
quon observe de manire plus vidente, parce que plus mdiatique. [Bouvier 2005 p.445]


Le renforcement du rle des Rgions et des collectivits
locales en gnral

En parallle, dans un contexte global de renforcement des comptences des Rgions, plusieurs
lments ont prt ce que les Rgions s'intressent au domaine de l'nergie, par exemple :

- le renforcement de la partie sur l'nergie dans les Contrats de Plan Etat-Rgion pour la
priode 2000-2006 (avec la systmatisation d'une annexe spciale concernant les conven-
tions Rgion-ADEME (cf. section B.1.5.3)), qui a par exemple permis de soutenir la
croissance des Agences Rgionales de l'Energie (cf. section B.1.4.4) ou de dfinir des
programmes d'aides / subventions (surtout pour les EnR)

- la tentative d'un nouveau processus de concertation et de coordination entre niveaux local
et rgional avec le Schma de Services collectifs de l'Energie (cf. section B.1.6.1), qui
suggre que l'chelon rgional est pertinent pour dfinir des plans daction de MDE et de
dveloppement des EnR et qui a par exemple dbouch dans certaines rgions la cra-
tion d'Observatoires Rgionaux de l'Energie (cf. section B.1.4.4)

Ce mouvement est aussi incit par la pression sociale lie aux proccupations croissantes
concernant les questions d'nergie et d'environnement, et laquelle les lus locaux souhaitent
de plus en plus rpondre : la voie politique de matrise de l'nergie se dveloppe mesure
que les enjeux environnementaux font surface dans le dbat public et qu'ils peuvent devenir
des enjeux lectoraux ou d'affichages politiques. [Bouvier 2005 p.226]

L'mergence de politiques nergtiques locales a aussi t encourage par des politiques inci-
tatrices de la part de la Commission europenne, avec par exemple le soutien aux Agences
Locales de l'Energie (cf. section B.1.4.3).

Ses diffrents programmes () ont permis la professionnalisation d'un certain nombre d'ac-
teurs et la prennisation de politiques militantes. [Bouvier 2005 p.227] Ainsi dans les r-
gions les plus dynamiques, Agences Rgionale et Locales de l'Energie, Espaces Info Energie,
Dlgations Rgionales de l'ADEME, associations et bureaux d'tudes spcialiss, tous ces
acteurs ont pu dvelopper leur exprience et constituer des rseaux qui se sont parfois
concrtiss sous la forme d'observatoires rgionaux ou quivalents.

L'valuation ex-post des actions entreprises permet de renforcer cette dmarche, en tant qu'ou-
til de capitalisation d'exprience.


Chevauchement ou rapprochement entre service public
de la distribution et politiques nergtiques locales ?

Annexe B.1.3 Quel rle de l'chelon local dans les politiques nergtiques ?
122
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Bouvier [2005 p.201] note que le risque nest pas nul de voir stablir un hiatus territorial
entre dune part les rgions responsables des politiques nergtiques locales et de la promo-
tion de la matrise de lnergie et dautre part, les dpartements (en tant quchelle) et les
syndicats dpartementaux dnergie (en tant quEPCI
229
) chargs du service public de la dis-
tribution dlectricit. Il souligne ici ce risque de diffrents sous l'angle du rapport des ac-
teurs locaux avec EDF et l'Etat, mais nous pouvons largir cette analyse la question de dve-
loppement de plans daction.

Bouvier montre ainsi combien les activits de MDE peuvent tre au cur de rapports de
force et de questions de pouvoir entre les diffrents acteurs locaux, ce qui peut tout aussi bien
reprsenter une opportunit qu'un frein.

Il note alors d'une part que le rapprochement politique et institutionnel des deux univers de
la distribution et des politiques nergtiques locales a fait un pas de plus l'occasion de la
signature d'un accord entre l'ADEME et la FNCCR
230
, et d'autre part l'opposition entre les
comptences des structures intercommunales spcialises et celles des intercommunalits et
le contexte de concurrence territoriale entre les mtropoles europennes et agglomrations
rgionales. [Bouvier 2005 pp.447-448]

Ce point peut tre prendre en compte dans l'analyse de la logique d'intervention d'une opra-
tion, notamment par rapport au choix du domaine d'intervention ou du fait de possibles
interactions (synergies (+) ou interfrences (-)) entre oprations menes par diffrents ac-
teurs.


La nouvelle donne lie l'ouverture des march :
raffirmation du rle des communes et nouveaux cadres
pour les activits de MDE

Bouvier [2005 p.199]note aussi que louverture des marchs de la fourniture dnergie
pourrait agir comme un acclrateur de processus et mettre progressivement sur agenda la
prise de comptence nergie par les communauts urbaines et dagglomration.

Ainsi, conjointement la rengociation des cahiers des charges de concession, l'ouverture des
marchs de l'lectricit et du gaz a rappel aux communes quels taient leurs rles et leurs
possibilits dans le domaine de l'nergie
231
.

Ces champs possibles d'actions sont le plus souvent rappels au travers des fonctions des col-
lectivits locales [Garnier 2004, IEA 2002] :
- consommatrices (pour une analyse approfondie de la gestion de l'nergie au sein des col-
lectivits locales se reporter la thse de Gayral [2005] qui montre notamment l'impor-
tance conomique de cet enjeu
232
)

229
Etablissement Public de Coopration Intercommunale
230
pour plus de dtails sur la Fdration Nationale des Collectivits Concdantes et Rgies se reporter la sec-
tion B.1.4.5
231
Se reporter aussi l'annexe 5 de [Gayral 2005] intitule Evolution de la lgislation franaise impactant les
collectivits territoriales dans leurs structures et dans leurs comptences en matire nergtique
232
Il site par exemple les rsultats de l'enqute "Energie et patrimoine communal" ralis en 2000 par la SO-
FRES pour l'ADEME en partenariat avec EDF et GDF. Cette tude estime environ 4 Tep d'nergie primaire
soit 30 TWh d'nergie finale les consommations annuelles totales du patrimoine gr directement par les com-
munes en 2000 [Gayral 2005 p.102].
Annexe B.1.3 Quel rle de l'chelon local dans les politiques nergtiques ?
123
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
- productrices (notamment pour satisfaire leurs propres besoins)
- distributrices (pour les communes, en tant qu'autorits concdantes des rseaux de distri-
bution)
- amnageuses (par le biais de ses politiques d'urbanisme (par ex. les PLU (Plans Locaux
d'Urbanisme))
- incitatrices / animatrices (par exemple en proposant des aides ou en s'impliquant dans
des structures d'information et/ou conseil comme les Espaces Info Energie ou les Agences
Locales de l'Energie, cf. section B.1.4.3)

A la veille de louverture totale du march de llectricit en juillet 2007, les collectivits
locales sont engages dans un re-positionnement. Autorits concdantes dun service public,
interface entre les citoyens et le march, prestataires de services divers pour leurs adhrents :
les rles et les fonctions des syndicats dnergie sont multiformes. [Bouvier 2005 p.204]

Ainsi, si la matrise des consommations sur son propre patrimoine reste souvent la porte
d'entre pour qu'une collectivit locale initie une rflexion sur les activits de MDE, cette
dmarche va aujourd'hui parfois beaucoup plus loin. L'ouverture des marchs contribue dans
certains cas accentuer cette tendance, car certaines structures publiques locales y voient une
opportunit de s'affirmer comme des acteurs du march part entire.

Bouvier [2005 p.446] cite ainsi l'exemple des syndicats d'lectrification qui deviennent de
plus en plus des syndicats d'nergie(s), et qui largissent leurs gammes de service non seule-
ment leurs adhrents (les communes), mais aussi l'ensemble des consommateurs d'nergie
de la zone qu'ils desservent. Il reprend en particulier l'exemple du SIEL (Syndicat Intercom-
munal d'Energies de la Loire
233
) qui fait partie des syndicats moteurs dans ce domaine.


Mais l'ouverture des marchs n'entrane pas seulement le questionnement des collectivits,
elle interroge d'une manire gnrale sur les modes d'interventions publiques concernant les
activits de MDE (voir aussi les sections II.1.1.1 et II.1.2.3). Ainsi en parallle la monte en
puissance des collectivits locales, l'Etat confre des obligations d'conomies d'nergie aux
fournisseurs d'nergie. Ce nouveau dispositif des certificats d'conomies d'nergie reprsente
une nouvelle approche des activits de MDE, dans la mesure o leur responsabilit est
transmise aux acteurs du march, et donc o indirectement leurs charges sont transfres du
contribuable vers le consommateur.


Au final ces deux mouvements, renforcement des rles des collectivits locales dans le do-
maine de l'nergie et transfert de responsabilits dactivits de MDE aux acteurs du march,
ont un objectif en commun : le changement d'chelle, i.e. passer d'oprations exemplaires
ralises par un cercle restreint d'initis une gnralisation des bonnes pratiques.

En parallle, comme le souligne Bouvier, cela participe aussi la professionnalisation du sec-
teur des oprations locales de MDE.


B.1.3.3 Quelle place pour les actions de MDE dans les lans du dveloppement durable et du
"think global, act local" ?


233
www.siel42.fr
Annexe B.1.3 Quel rle de l'chelon local dans les politiques nergtiques ?
124
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006

Un foisonnement d'outils et d'tudes pour dvelopper des
politiques locales lies l'nergie, l'environnement et/ou
le dveloppement durable

Les sections prcdentes ont permis de montrer que les volutions rcentes de contexte pou-
vaient favoriser l'mergence de politiques nergtiques locales. Ces volutions sont aussi ac-
compagnes de la mise disposition des collectivits de nombreux outils pour dvelopper
de telles politiques, en tant que telles ou intgres dans des approches plus globales (environ-
nementales ou de dveloppement durable). Citons par exemple les outils proposs par
l'ADEME
234
(OPATB, contrats ATEnEE, etc. voir section B.1.5.4) et par la MIES (Mission
Interministrielle l'Effet de Serre)
235
(Mmento des Dcideurs, guide pour les Plans Climats
Territoriaux, cahiers techniques pour l'laboration de bilans rgionaux).

Leur mise en uvre fait l'objet d'tudes menes pour analyser les possibilits d'actions des
collectivits locales (notamment pour contribuer la politique nationale de lutte contre
l'augmentation de l'effet de serre).

Ainsi une tude ralise par AGORA [2002 p.2] fait elle-mme rfrence une tude prc-
dente ralise par l'association 4D en 1999 qui constatait alors que la mobilisation des col-
lectivits locales sur l'effet de serre restait encore insuffisante.

L'tude d'AGORA confirme ce constat en en expliquant les raisons, avec notamment une
perception encore mal matrise et confuse, des attentes de communication simple et de cla-
rification des actions de l'Etat et des diffrents concepts qui touchent l'effet de serre, au
dveloppement durable, aux agendas 21, etc.. Les auteurs font alors des propositions pour
permettre l'intgration de la problmatique de l'effet de serre dans le processus interne du
management des collectivits locales.

Cette tude fait ressortir les principaux besoins formuls par les lus [AGORA 2002 p.8] :
- une communication simple et rgulire
- des indicateurs simples, synthtiques et vrifis
- une communication l'adresse des citoyens
- une attente de clarification des actions de l'Etat
- une intgration dans le champ renouvel des politiques urbaines
- une plus grande place aux scientifiques dans les travaux de rflexion
- la formation des lus ces nouvelles problmatiques

Dans un rapport plus rcent, Godinot et al. [2004 p.7] explique aussi la faible mobilisation
des collectivits au dbut des annes 2000 par le manque de contraintes rglementaires et le
fait que les programmes d'actions restaient encore trs "nationaux" (les auteurs donnent
l'exemple du PNLCC (Plan National de Lutte Contre les Changements Climatiques) qui
n'avait qu'un tout petit volet territorial).

Mais on note une monte progressive du volet territorial dans les documents de la MIES et
les discours officiels. De fait le Plan Climat 2004 (qui a remplac le PNLCC) comprend un
chapitre (le 7) sur les Plans Climats Territoriaux : en vue dencourager les initiatives locales
pour lutter contre leffet de serre, les collectivits locales seront incites mettre en place des

234
cf. www.ADEME.fr
235
cf. http://www.effet-de-serre.gouv.fr/fr/actions/collecti.htm
Annexe B.1.3 Quel rle de l'chelon local dans les politiques nergtiques ?
125
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Plans Climats Territoriaux qui assureront une dfinition et une mise en oeuvre dobjectifs au
niveau dune rgion, dun dpartement, dune commune ou dune intercommunalit.

Godinot et al. [2004 p.7] rappellent en outre que les politiques de type Plan Climat sont trs
lies celles sur l'nergie, et constatent que lorsque les collectivits locales recherchent
quantifier les missions, elles le font majoritairement par le biais de bilans nergtiques ou
d'tudes de planification nergtique.


Un engouement rel avec une priode d'apprentissage

Plusieurs indicateurs tendent montrer l'essor d'un rel engouement des collectivits locales
pour les questions d'efficacit nergtique, de lutte contre l'effet de serre et/ou de dveloppe-
ment durable.

Quelques exemples de cet engouement :

- le succs remport par les appels d'offre raliss par l'ADEME pour encourager des
initiatives locales avec notamment les Espaces Info Energie (cf. section B.1.4.3), les
OPATB et les contrats ATEnEE (cf. section B.1.5.4)

- la multiplication des agendas 21 locaux, qui s'tendent aujourd'hui aux Rgions et Dpar-
tements et dont le dveloppement est notamment soutenu par des appels d'offre raliss
par le MEDD (Ministre de l'Ecologie et du Dveloppement Durable)
236


- l'intrt manifest par certaines structures locales par rapport aux certificats d'conomies
d'nergie (qui a men l'ATEE a cre un groupe de travail ad-hoc sur le sujet, sous l'im-
pulsion d'AMORCE)

Il est encore difficile d'estimer d'une part quelle ampleur a ce mouvement
237
, et d'autre part s'il
va durer. Cependant Bouvier fait l'analyse suivante [Bouvier 2005 p.234] : malgr la fai-
blesse dun recul d peine quelques annes, il apparat tout de mme que la mise en oeuvre
des agendas 21 est un phnomne qui sinscrit bien au-del dune mode. Sans doute, la plu-
part des collectivits navaient pas attendu les agendas 21 pour penser une politique de dve-
loppement durable. Dailleurs, le dveloppement navait pas attendu le concept de sustaina-
ble development pour tre lui-mme durable . Mais on aurait tort de traiter le dveloppe-
ment durable avec sarcasme, les modes smantiques refltent toujours une volution de la
pense collective. Les agendas 21 locaux permettent une nouvelle formulation de laction
publique locale.

Reste cependant voir si ces politiques de dveloppement durable se dveloppent hors des
collectivits habituelles "bons lves" dans les domaines de l'nergie ou de l'environnement,
et quels sont les rsultats de ces politiques. Car dans ce domaine, la plupart des acteurs sont
encore dans une phase d'apprentissage.


236
voir la lettre d'information correspondante : http://www.ecologie.gouv.fr/IMG/pdf/lettre1.pdf
237
le caractre local de ces politiques et actions fait qu'il est difficile de les recenser. Toutefois le RARE propose
un recensement des initiatives d'agendas 21 locaux au 1
er
septembre 2004 (au total ils comptabilisaient alors 109
agendas 21 locaux (en mtropole) de villes (52), groupements de ville (33), dpartements (16) ou rgions (8), ce
qui couvre au total un territoire de prs de 39 millions d'habitants)
cf. http://www.rare.asso.fr/images/annexesDD/Carte_Agendas21_04.pdf
Annexe B.1.3 Quel rle de l'chelon local dans les politiques nergtiques ?
126
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006

Initiatives lies l'nergie, rseaux d'acteurs et changes
d'exprience

Dans ce que Bouvier appelle la nbuleuse nergtique locale, il est possible de dgager une
tendance forte : la constitution de rseaux d'acteurs.

Ces rseaux ont le plus souvent deux motivations principales : constituer une force de repr-
sentation et de proposition (lobbying) et faciliter les changes d'exprience pour diffuser les
bonnes pratiques. Leur objectif final est le plus souvent d'encourager le dveloppement de
politiques nergtiques locales.

Parmi ces rseaux, nous pouvons citer entre autres AMORCE, Energie-Cits, RARE (Rseau
des Agences Rgionales de l'Energie), FLAME (Fdration pour Les Agences locales de Ma-
trise de l'Energie).
238


Dans un mme tat d'esprit, l'initiative d'abord suisse et aujourd'hui europenne des Euro-
pean Energy Awards est aussi trs intressante. Les communes qui souhaitent s'engager dans
cette dmarche voient leur politique de gestion de l'nergie value selon un certain nombre
de critres qui permettent ensuite de "noter" le niveau de cette gestion dans l'optique d'un affi-
chage un peu l'image des villes fleuries. Le but est d'encourager les communes progresser
dans leurs pratiques de gestion de l'nergie. Cette initiative a rencontr un succs important
en Suisse et arrive tout doucement en France
239
.

Toutes ces initiatives montrent que les dmarches de dveloppement de politiques nergti-
ques locales cherchent se structurer. Ce qui fait ressortir un besoin trs important de la part
des acteurs concerns, celui d'changer les expriences pour mieux avancer dans ce qui reste
encore un processus d'apprentissage.


Des perspectives intressantes lies la complmentarit
MDE EnR pour un essor de la production dcentrali-
se d'nergies

Dans une tude concernant la Corse, Notton et Muselli [1998] ont montr l'intrt de combi-
ner l'utilisation rationnelle de l'nergie et les nergies renouvelables pour rpondre des
contraintes nergtiques locales tout en optimisant le service rendu.

Plus rcemment, le dossier du Monde Economie du 21 fvrier 2006 titrait Electricit : la
plante contrainte de changer de modle pour relater la volont de la Commission euro-
penne de runir oprateurs et Etats europens autour d'une stratgie commune de produc-
tion dcentralise, et ce notamment pour favoriser le recours aux nergies renouvelables
accompagnes d'une meilleure matrise des consommations.

Compte-tenu de la forte culture centralisatrice franaise, cette dmarche aura sans doute plus
de mal s'imposer en France qu'en Grande-Bretagne et au Danemark o le succs rencontr
par les premires expriences ralises a confort la Commission europenne dans ses
orientations.

238
cf. respectivement www.amorce.asso.fr, www.energie-cites.org, www.rare.asso.fr, www.federation-flame.org
239
cf. l'article Des politiques nergtiques communales intelligentes du numro 349 du 1
er
juillet 2005 de la
revue Energie Plus (pp.10-12)
Annexe B.1.3 Quel rle de l'chelon local dans les politiques nergtiques ?
127
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
tations.



Au final, l'ensemble des points voqus dans cette section permet de montrer que les collecti-
vits locales sont de plus en plus intresses par le dveloppement de politiques nergtiques
locales. Cependant, nous avons vu que si ce mouvement peut s'appuyer sur un rseau aujour-
d'hui bien structur de collectivits "militantes" et exprimentes, il est encore nouveau pour
bon nombre d'acteurs qui peroivent l'intrt de s'y engager. Dans ce processus d'apprentis-
sage et d'changes d'exprience, l'valuation ex-post a un rle important jouer.





128
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Annexe B.1.4 Les principaux acteurs des oprations locales de MDE et leur
rapport l'valuation


Nous ne prtendons pas ici fournir une revue exhaustive des acteurs des politiques nergti-
ques locales. Nous cherchons faire ressortir les principaux acteurs, aux vues de leur implica-
tion dans les actions ralises et de leur rle par rapport l'valuation de ces actions.

La "slection" de ces acteurs s'est faite d'une part par notre propre exprience (ralisation d'un
inventaire des oprations locales de MDE (cf. sous-partie II.2.1), participation des collo-
ques, etc.), et d'autre part partir des listes des parties prenantes aux Observatoires Rgionaux
de l'Energie.

Cette "slection" se voit confirme a posteriori par le fait qu'elle est cohrente avec la liste des
acteurs dresses par Bouvier, dont nous recommandons la lecture de l'analyse gopolitique
des jeux d'acteurs des politiques nergtiques locales [Bouvier 2005 pp.238-258]. Son tude
est trs clairante sur cette composante du contexte des politiques nergtiques locales.


B.1.4.1 EDF, un acteur central de l'nergie avec un rseau local historiquement implant


En ce qui concerne les producteurs et fournisseurs d'nergie, nous avons choisi de prsenter
leur rapport l'valuation par le biais d'EDF. En effet les dmarches de ses principaux
concurrents sont similaires (cf. Suez-Electrabel qui a co-financ avec l'ADEME la thse de
Gayral [Gayral 2005], ou encore les axes de recherches de GDF sur les politiques nergti-
ques locales, notamment menes par Gilles Bourgain). Et concernant les nouveaux entrants,
ils ne semblent pas que ceux-ci apportent de nouveauts concernant les activits de MDE et
leur valuation, car ils ne consacrent le plus souvent pas de moyens la recherche dans ce
domaine, et/ou qu'ils se concentrent sur la concurrence ct offre.


Oprateur historique franais en situation de monopole jusquen 2000, EDF est le principal
acteur de l'nergie lectrique en France. Suite son changement de statut en 2004, le prin-
cipe de spcialit est lev et EDF peut dsormais largir son champ d'actions aux autres ner-
gies et dvelopper ses services, ce qui en fait un des oprateurs nergtiques majeurs, en
France, mais aussi en Europe avec la constitution progressive d'un march europen de l'ner-
gie.

Le dveloppement d'EDF a t troitement li avec les politiques successives d'amnagement
des territoires. Sa cration en 1946 avait pour but de permettre l'accs l'lectricit pour tous,
sur l'ensemble du territoire et au mme prix (principe de prquation tarifaire). De fait EDF
est donc prsent partout avec un rseau fortement implant dagences locales. C'est donc aussi
un acteur majeur pour les politiques nergtiques locales (comme en tmoigne la thse de
Bouvier [2005] finance par EDF)
240
.


Rapport l'valuation : vision contractuelle, et nouveau

240
Voir aussi ce sujet l'intervention d'Yves Durrieu au colloque de Tours de 1982 relate dans [Bourjol 1984
pp.219-235]
Annexe B.1.4 Les principaux acteurs des oprations locales de MDE et leur rapport l'valuation
129
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
positionnement pour suivre les volutions de contexte

EDF participe bon nombre des oprations locales de matrise de la demande en lectricit,
directement ou par l'intermdiaire de ses dlgations rgionales, et souvent avec une implica-
tion financire. EDF fait donc partie des principaux commanditaires d'valuation, notam-
ment pour connatre les rsultats des actions qu'elle soutient financirement.

Toutefois, les pratiques d'EDF concernant l'valuation taient loin d'tre systmatiques (se
reporter la section II.3.1.1). Cela est d'autant plus vrai au niveau local. Des valuations ont
certes t ralises, mais de manire ponctuelle et avec des niveaux de dtails variables
(voir la section II.3.2 sur les tudes de cas ralises). Et nous avons pu constater qu'il tait
difficile d'en retrouver les traces.

Plus rcemment, le dveloppement de plans locaux de MDE ambitieux, notamment pour
viter de nouvelles lignes THT (Trs Haute Tension) (comme en PACA ou dans le Lot), ont
men EDF se reposer de manire accrue la question de l'valuation d'oprations locales de
MDE. Ce qui a donn lieu au contrat de recherche que nous avons ralis en collaboration
avec le Wuppertal Institute for Climate Environment and Energy. A partir d'une analyse des
principaux retours d'exprience dans ce domaine en France et en Europe [Broc 2005d], nous
avons ainsi propos EDF une mthodologie pour dfinir des mthodes oprationnelles
d'valuation [Broc 2005c]. Ce processus a ensuite t test sur des oprations du Plan Eco
Energie
241
, programme de MDE dans l'Est de la Rgion PACA [Broc 2005a].

Ce travail a t l'origine des rsultats prsents dans les Chapitre 3 et 4 de notre thse.

Par ailleurs, dans le cadre du futur dispositif des certificats d'conomies d'nergie, EDF est
un des principaux acteurs obligs. Elle doit ainsi raliser ou faire raliser des actions pour
atteindre un certain montant d'conomies d'nergie (cf. Dcret n2006-600 du 23 mai 2006).
Ce dispositif aura certes son propre systme d'valuation, mais celui-ci est minimum, plus
proche du contrle que de l'valuation (cf. section II.3.1.4). Les acteurs obligs ont donc int-
rt mener leurs propres valuations, d'une part pour capitaliser leurs expriences, et d'autre
part pour rechercher les actions les plus efficaces, notamment en terme de rentabilit.

L'apparition des certificats d'conomie d'nergie s'est prcise alors que notre contrat de re-
cherche avec EDF tait dj amorc. Ce nouveau dispositif n'en tait donc pas la raison pre-
mire, mais il en a ensuite influenc certaines orientations, et a renforc l'intrt d'EDF dans
le dveloppement de mthodes d'valuation.

Cette dmarche se poursuit aujourd'hui sous l'impulsion de la nouvelle Directive europenne
EESE (Directive 2006/32/CE, cf. section I.2.4.2) qui a suscit la proposition d'un projet euro-
pen coordonne par le Wuppertal Institute et laquelle nous prenons part ainsi qu'EDF. Ce
projet a t retenu par la Commission europenne, et pourrait dmarrait d'ici la fin 2006. Il a
pour but d'pauler le comit d'experts constitu par la Commission pour dfinir les mthodes
d'valuation qui serviront suivre l'application de la Directive, et notamment valuer les
Plans d'Action d'Efficacit Energtique soumis par les Etats-membres la Commission (cf.
section I.2.4.2).


B.1.4.2 Le Dlgations Rgionales de lADEME, une source importante dinformations et un

241
www.planecoenergie.org
Annexe B.1.4 Les principaux acteurs des oprations locales de MDE et leur rapport l'valuation
130
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
exemple de dispositif de suivi


Relais rgionaux de lADEME existants depuis 1983
242
, les DR-ADEME ont pour mission de
favoriser les approches de proximit et le montage de projets adapts aux contextes locaux.
En ce sens elles centralisent la majorit des actions entreprises dans le domaine de la matrise
de lnergie, ne serait-ce que par la comptabilisation des aides quelles accordent (notamment
avec l'outil LISA, cf. section II.3.1.3). Elles constituent donc une source privilgie
dinformation (cf. contacts pris pour le recensement).


Un nouveau dispositif de suivi

Du fait du contrat de Plan Etat-ADEME 2000-2006, l'ADEME a revu ses procdures de suivi
et d'valuation des actions qu'elle finance. Le nouveau dispositif mis en place est dcrit dans
la section II.3.1.3.

Il vient notamment amliorer les procdures et pratiques de l'ADEME suite aux constats faits
par le rapport d'audit ralis par l'Inspection Gnrale des Finances en 1999-2000 : La mise
en place dun vritable outil de gestion de projet aurait du reste des consquences bnfi-
ques galement en matire de gestion des ressources humaines : elle permettrait en effet, de
faon complmentaire loutil de suivi de lactivit, de mieux apprhender la ralit du tra-
vail des agents de lADEME et de prserver une mmoire des dossiers mme si la mobili-
t interne augmente. [De Gouyon 2000 p.24]

En parallle la refonte du dispositif de suivi, des formations sont proposes aux chargs de
mission des Dlgations Rgionales pour qu'ils mettent au mieux profit ces nouveaux outils.
Ce processus tant en cours, il est trop tt pour en analyser l'impact sur les pratiques d'valua-
tion des DR-ADEME. Mais il est clair que le suivi et l'valuation de l'activit des DR-
ADEME reprsentent dsormais un enjeu stratgique pour l'ADEME dans ses relations avec
ses autorits de tutelle (Ministres chargs de l'Environnement, de l'Industrie et de la Recher-
che).


Rapport lvaluation : vers la structuration de plans
d'valuation

Tout comme EDF, l'ADEME est un des principaux financeurs des activits de MDE, et ce
titre un des principaux commanditaires d'valuation, ne serait-ce que pour en suivre les
rsultats. Mais tout comme EDF, ses pratiques d'valuation taient loin d'tre systmatiques
(ce qui a t notamment soulign par [Martin 1998] puis [De Gouyon 2000], se reporter la
section II.3.1.1).

Dans la section II.3.1.1, nous avons mis en vidence les principales raisons des difficults de
l'ADEME intgrer l'valuation dans ses pratiques : manque de moyens (financiers et sur-
tout humains), perception ngative de l'valuation, variations budgtaires et comptes rendre
qui incitent une gestion au jour le jour.

Ces raisons se retrouvent encore plus au niveau local. Mais comme nous l'avons signal dans

242
Anne de cration des Dlgations Rgionales de l'AFME, agence prdcesseuse de l'ADEME
Annexe B.1.4 Les principaux acteurs des oprations locales de MDE et leur rapport l'valuation
131
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
la section II.3.1.1, cela ne doit cependant pas occulter que les chargs de mission de
l'ADEME ont tout de mme russi produire de nombreux guides et recueil de bonnes pra-
tiques.

Toutefois, comme pour EDF, les travaux d'valuation n'taient pas rellement structurs et
restaient ponctuels avec des niveaux de dtails variables
243
.

Suite au contrat de Plan Etat-ADEME 2000-2006, l'ADEME cherche dsormais dfinir de
vritables plans d'valuation avec comme objectif inscrit dans le plan que d'ici 2006 la moi-
ti des programmes fasse l'objet d'valuation.


Deux niveaux d'valuation : les tudes gres au niveau
national et les pratiques locales en lien avec les bureaux
d'tudes spcialiss

Dans ce cadre, lADEME lance des appels doffre pour lvaluation, en particulier pour les
actions transversales et les oprations pilotes, ce qui permet de constituer des retours
dexpriences. Mais les bilans concernent surtout les oprations dans leur ensemble. Ce qui
correspond plus lvaluation dun programme, que dune opration. Le plan d'valuation
apparat donc principalement comme un outil utilis au niveau national et gr par le Service
d'Evaluation situ au sige national d'Angers.

Cependant, pour les OPATB par exemple (cf. section B.1.6.2), une valuation locale au
niveau des projets est prvue. De mme, ponctuellement, les DR-ADEME peuvent com-
mander des valuations sur certaines oprations. Ces dmarches associes aux formations des
chargs de mission au nouveau dispositif de suivi devraient accrotre la culture pratique
d'valuation des DR-ADEME.

Les tudes commandes permettent d'assurer une activit des bureaux d'tudes spcialiss
qui se rvlent les vritables "dtenteurs de l'expertise" dans ce domaine (cf. section
B.1.4.6). Ces mmes experts participent d'ailleurs souvent aux tudes ralises pour l'Agence
au niveau national.


Nouveaux enjeux et nouveaux rles

Tout comme EDF, l'ADEME suit aussi les volutions du contexte des activits de MDE.

Ainsi tout comme EDF, l'ADEME a command une tude concernant l'valuation des opra-
tions locales de MDE suite aux dveloppements de plans locaux de MDE, et notamment du
Plan Eco Energie en PACA. Cette tude intitule Elaboration d'un guide pratique et d'outils
d'valuation de programmes territoriaux d'actions de ME et de PDE est ralise par des bu-
reaux d'tudes spcialiss (FR2E, le SERT et Energies Demain, cf. section B.1.4.6)
244
.

243
Se reporter la thse de Franck Trouslot [1995] prsente dans l'Annexe B.3.7, qui a ralis une valuation trs
dtaille des actions de l'ADEME Poitou-Charente entre 1983 et 1993, sous l'angle de l'valuation des politiques
publiques (domaine des sciences conomiques).
244
Dans un premier temps, EDF et l'ADEME avaient recherch raliser une tude en commun, mais ils n'ont
pu s'accorder (notamment sur les conditions de diffusion des rsultats de l'tude). Toutefois, nous avons t mis
en contact avec l'quipe de l'tude finance par l'ADEME. Nous en avons suivi les dbuts, mais il semble qu'ils
aient pris du retard, et nous n'avons plus eu d'information depuis juin 2005 et ne sommes donc pas au courant des
Annexe B.1.4 Les principaux acteurs des oprations locales de MDE et leur rapport l'valuation
132
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006

Par ailleurs l'arrive des certificats d'conomies d'nergie apporte un changement significa-
tif dans les approches de MDE, la fois pour obtenir un changement d'chelle, mais aussi
parce qu'ils vont modifier le rle de l'ADEME [Bal 2006]
245
. En ce qui concerne le disposi-
tif des certificats, Bal rsume le rle de l'ADEME en trois points :

- expertise technique pour le processus d'laboration des fiches sur les actions standardi-
ses : c'est une approche d'valuation ex-ante, pour laquelle l'ADEME dispose d'une large
exprience. La nouveaut de ce processus est qu'il repose sur l'accord entre les experts de
l'ADEME et les acteurs du march regroups au sein de l'ATEE.

- accompagnement et conseil pour les porteurs de projets (information, tude de faisabi-
lit, guide mthodologique, animation de rseaux d'acteurs et pour la concertation au ni-
veau rgional) : cet aspect correspond la mission "classique" de l'ADEME d'information
/ conseil. Son lien avec l'valuation est la dmarche de capitalisation d'expriences.

- valuation du dispositif avec d'une part un suivi macro-conomique et d'autre part une
valuation ex-post d'un panel d'actions pour estimer les conomies d'nergie "relles" et
ajuster les fiches d'une priode l'autre (le dispositif est dfini pour des priodes de trois
ans)

(pour plus de dtails sur les certificats d'conomies d'nergie au niveau local, se reporter la
section B.1.5.5)


B.1.4.3 Les Espaces Info Energie et/ou Agences Locales de l'Energie


Les Espaces Info Energie : des relais de proximit

Les Espaces Info Energie (EIE) ont pour mission la sensibilisation, linformation, et le conseil
sur la matrise de lnergie et les comportements conomes pour les particuliers. Lactivit
dun EIE, service d'information et de conseil, indpendant
246
et gratuit, est double :
- rpondre la demande dinformation et de conseils personnaliss dans le cadre de perma-
nence daccueil du public
- mettre en place des actions danimation permettant daller au devant du public pour le
sensibiliser

Les Espaces Info Energie constituent la principale mesure du Plan national damlioration
de lefficacit nergtique (lanc en dcembre 2000) par le ministre de lEnvironnement
destine faire voluer la demande des mnages [Bouvier 2005 p.247].


rsultats finals de cette tude. Nous pensons cependant qu'il a t profitable que deux tudes aient t ralises,
celle de l'ADEME avec un point de vue d'experts de terrain (bureaux d'tude), et celle d'EDF avec un point de
vue plus acadmique. Nous esprons que les rsultats de ces deux tudes pourront tre mis en commun afin d'en
tirer le meilleur profit.
245
voir aussi le rle des DR-ADEME tel que prvu par la circulaire du 18 juillet 2006 relative la dlivrance des
certificats dconomies dnergie
246
Cette indpendance est suppose dans les statuts des EIE. Cependant Bouvier [2005 p.248] souligne que les
structures d'accueil ces EIE sont parfois des associations, dont les prises de position politique ne sont pas neu-
tres, notamment par rapport au nuclaire.
Annexe B.1.4 Les principaux acteurs des oprations locales de MDE et leur rapport l'valuation
133
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Ils sont un moyen de tisser un maillage de relais de proximit et de mettre en commun les
efforts des DR-ADEME, des collectivits et des associations locales pour diffuser l'informa-
tion au plus prs des consommateurs.

En outre, l'ADEME a dvelopp un rseau extranet pour mettre en contact les diffrents EIE
et organise rgulirement des sessions de formation pour ses conseillers. Ce qui doit permettre
d'assurer leur niveau de comptence et donc la qualit des conseils fournis. C'est un l-
ment important de la professionnalisation de ce domaine souligne par Bouvier [2005].


Suivi et valuation de lactivit des EIE

Chaque espace ralise un suivi de ses actions en terme dactivits : nombre et dure des
contacts personnaliss (avec la rpartition selon les types de conseils demands et le type de
demandeur (particulier, entreprise, etc.)), participation des vnements (foires, expositions,
congrs, etc.), etc. Lindicateur principal est ici le nombre de personnes touches (sensibili-
ses et/ou informes) par ces diverses activits.

En parallle, des valuations du dispositif des EIE sont organises au niveau national. La
premire ralise portait sur la priode 2002-2003, et avant tout sur la mission de conseil et
dinformation des EIE (volume et type de contacts raliss, satisfaction des usagers quant aux
EIE, % des contacts ayant ralis ou envisageant un investissement engendrant des conomies
dnergie, etc.).

Il na pas t possible de rcuprer le rapport dvaluation des EIE, mais daprs le communi-
qu de presse de lADEME du 4 mai 2004, chaque action ralise suite un contact avec un
conseill conduit en moyenne une conomie dnergie de 0,63 tep pour le mnage concern
(20% de la consommation moyenne d'un mnage) soit des missions vites pour 1,1 tonne
quivalent CO
2
.

Plus de dtails sur cette valuation sont fournis dans la fiche sur la France du guide d'valua-
tion de l'AIE [Vreuls 2005b pp.110-113]. L'valuation a t ralise par un bureau d'tudes
247

et tait base sur l'analyse dtaille de l'activit d'un panel de 16 EIE supposs reprsenta-
tifs de l'ensemble du rseau, avec une analyse des donnes de suivi des 16 EIE, des entretiens
avec les conseillers de ces 16 EIE et un sondage tlphonique auprs de 644 personnes (parti-
culiers et professionnels du priv et du public) ayant consult ces EIE

Selon cette valuation, les informations et conseils fournis par les EIE ont t l'lment cl
pour dcider de raliser une action dans 70% des cas pour les particuliers et dans 50% des cas
pour les professionnels. Ce rsultat vient conforter l'apprciation trs positive sur les EIE,
notamment du fait de leur forte croissance d'activit et du trs bon niveau de satisfaction des
personnes ayant contact les EIE.

Cette valuation avait aussi pour but de dfinir une mthodologie d'valuation que les DR-
ADEME pourraient appliquer pour superviser les EIE. Nous n'avons pu avoir plus d'informa-
tion ce sujet.


Une source de retours dexprience dactions de

247
IDE Environnement, cf. www.ide-environnement.com
Annexe B.1.4 Les principaux acteurs des oprations locales de MDE et leur rapport l'valuation
134
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
sensibilisation / information / conseil

Le suivi et lvaluation raliss pour les activits dEIE devraient pouvoir constituer terme
une capitalisation importante de retours dexprience pour des actions de type sensibilisa-
tion / information / conseil. Il est donc intressant de suivre les mthodes utilises et les rsul-
tats obtenus qui constitueront une des rfrences dans ce domaine (pour la France). Mais pour
l'instant, il reste difficile d'obtenir des dtails sur les valuations dj ralises et les procdu-
res mises en place par l'ADEME.


Les Agences Locales de Matrise de lEnergie : le soutien
de la Commission europenne aux initiatives locales

Cres sur linitiative de collectivits locales avec le soutien, entre autres, de la Commission
Europenne (DG TREN et programme SAVE), les Agences Locales de Matrise de lEnergie
(ALE) ont une mission similaire aux EIE (la plupart des ALE ont dailleurs la double cas-
quette), avec une composante plus forte d'animation de rseaux d'acteurs et d'accompagne-
ments de projets pour des acteurs professionnels (publics et privs). Les ALE sont regroupes
au sein du rseau FLAME (Fdration pour les Agences Locales de la Matrise de lEnergie
avec 14 ALE en France
248
).


L'valuation pour la mise en rseau des expriences

Leur suivi / valuation est semblable aux EIE, cibl sur le nombre de personnes touches par
les activits des ALE. Mais il est ralis au niveau des agences. Certaines agences ralisent en
plus une valuation particulire pour certaines de leurs actions (cf. sous-partie II.3.2).

Ces valuations permettent d'changer les expriences au sein du rseau FLAME. Ainsi le
retour d'exprience sur l'opration de promotion des LBC ralise par l'ADUHME (ALE de
Clermont-Ferrand) en 1999 a t utilis par les ALE de Bretagne pour raliser une opration
similaire en 2002 (cf. section II.3.2.2).

Par ailleurs, les ALE participent parfois des dmarches de planification nergtique locale,
comme par exemple l'ALE de Grenoble ou les ALE de Bretagne.

Les ALE se sont aussi montres actives par rapport aux certificats d'conomies d'nergie. Par
exemple, l'ALE de Grenoble participe au groupe de travail de l'ATEE concernant les collecti-
vits locales.


B.1.4.4 Les Agences Rgionales de lEnergie et de lEnvironnement (ARENE) et les Observa-
toires Rgionaux de lEnergie (ORE)


Les ARENE : les moteurs des politiques nergtiques
rgionales


248
cf. www.federation-flame.org (voir http://www.federation-flame.org/fiches/ficheale_3.pdf pour le rle des
ALE dans les dmarches de planification nergtique locale)
Annexe B.1.4 Les principaux acteurs des oprations locales de MDE et leur rapport l'valuation
135
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Une ARENE est cre sur initiative du Conseil Rgional. Cest un espace de concertation et
dinitiative pour les acteurs locaux. Elle a pour rle lanimation territoriale, la sensibilisation
et lobservation dans le domaine de lnergie. Sa mission principale est de faciliter la mise en
uvre de politiques nergtiques rgionales. Elle doit donc permettre la mise en relation
des diffrents acteurs.

Tout comme les ALE, les ARENE forment un rseau, le RARE
249
.

Les Rgions disposant d'une ARENE sont parmi les plus dynamiques et celles ayant le plus
d'exprience dans le domaine des politiques nergtiques locales.

Ces agences ont souvent des moyens consquents et ont un volume d'activit important. Tout
comme les DR-ADEME, elles privilgiaient plutt l'action l'valuation. Mais elles accordent
aujourd'hui de plus en plus d'importance l'valuation, notamment du fait des Contrats de
Plan Etat-Rgion et sous l'impulsion de la Commission europenne.

Par exemple, Rhne-Alpes Energie Environnement
250
participe au projet europen INTEREB
pour une approche intgre de l'efficacit nergtique dans les btiments (dans laquelle l'va-
luation a un rle important).

Les questions d'valuation sont galement au centre des dmarches de planification nerg-
tique rgionale et du dveloppement des Observatoires Rgionaux de l'Energie.


Les ORE : mieux connatre pour mieux agir

Les ORE dcoulent du SSCE (Schma de Services Collectifs de lEnergie) mis en place par la
Loi de 1999 sur l'Amngagement et le Dveloppement Durable des Territoires (LOADDT)
(voir aussi la section Annexe B.1.6). Seulement 8 rgions ont pour le moment mis en place
une telle structure, mais d'autres rgions travaillent actuellement sur la cration d'ORE ou de
structures similaires.

Leurs missions sarticulent autour de deux grands axes : connaissance communication
animation, et valuation proposition.

Pour la plupart, les ORE en sont ltape de ralisation de bilans nergtiques rgionaux, et
de prenniser cette activit, notamment en assurant un accs suffisant aux donnes par une
bonne concertation des acteurs concerns.

Mais plus long terme les objectifs des ORE sont, au-del du rle de suivi des consomma-
tions rgionales, de proposer des plans daction rgionaux (ou du moins dpauler les acteurs
locaux dans ce sens) et par la suite dvaluer les politiques nergtiques rgionales. Car leur
principale mission est damliorer la connaissance de la situation nergtique rgionale et
infra-rgionale, et de lanalyser afin de suivre et dvaluer leurs impacts en termes environ-
nemental, social et conomique.

Dans cette optique, les ORE auraient donc un rle majeur jouer pour lvaluation
doprations locales, la fois fournisseur de donnes ( partir des bilans raliss), mais aussi

249
cf. www.rare.asso.fr
250
cf. www.raee.org
Annexe B.1.4 Les principaux acteurs des oprations locales de MDE et leur rapport l'valuation
136
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
comme organisme centralisateur des valuations ponctuelles. Par ailleurs les ORE ont
aussi pour objectif moyen terme de dvelopper des outils aussi bien dobservation que
dvaluation.

Le RARE et l'ADEME avec le soutien de la MIES de l'Observatoire (national) de l'Energie
ont ralis trois cahiers techniques
251
pour aider les ORE raliser des bilans nergtiques
rgionaux (cahier n1), des bilans rgionaux d'missions de GES (cahier n2) et dfinir des
indicateurs pour suivre les effets des politiques rgionales (cahier n3).


B.1.4.5 Autorits concdantes, syndicats dlectrification et GRD


Les autorits concdantes et les syndicats
dlectrification

Les communes sont les autorits concdantes des rseaux de distribution de llectricit. Pour
mieux assurer cette responsabilit, elles se sont souvent regroupes en structure intercom-
munale charge de les reprsenter et de grer pour leur compte les relations avec EDF et l'en-
semble des fournisseurs d'nergie.

Les autorits concdantes doivent notamment veiller la bonne ralisation de certaines mis-
sions de service public de llectricit (accs llectricit pour tous, lutte contre la prcarit
nergtique, etc.). A ce titre les syndicats dlectrification peuvent assurer un suivi des ac-
tions d'EDF destination de ses clients, entreprises comme particuliers.

Les autorits concdantes sont les propritaires des rseaux de distribution, et donc les matres
douvrages pour leur ventuel renforcement ou extension. Pour limiter ce type
dinvestissement parfois lourd (par ex. cas de llectrification rurale) ou pour aider leurs
membres rduire leurs factures nergtiques, elles peuvent aussi tre lorigine dactions
de matrise de la demande.

Les oprations dalternatives au renforcement de rseau restent peu nombreuses, mais ont
souvent fait lobjet dune valuation assez dtaille (cf. section II.3.2.1), notamment dans le
cadre des demandes daides au FAC (Fonds dAmortissement des Charges dlectrification,
cf. section B.1.5.2).

Par ailleurs, nombreux des syndicats d'lectrification se sont rcemment transforms en syn-
dicats d'nergie. Nous avons analys le repositionnement de ces syndicats dans la section
II.1.3.2. Certains d'entre eux se montrent trs actifs dans le domaine des activits de MDE (en
particulier le syndicat de la Loire
252
a particip la cration d'une Agence Dpartementale de
l'Energie, membre du rseau FLAME des ALE, cf. section B.1.4.3).

Nous avons aussi pu constater l'intrt de ces syndicats pour les actions de MDE lors d'une
intervention que nous avons ralise leur sminaire annuelle en 2005 [Bourges 2005], et o
les questions sur l'valuation et les retours d'exprience ont pris une place importante.



251
cf. http://www.rare.asso.fr/doc.htm
252
Le SIEL 42, cf. www.siel42.fr
Annexe B.1.4 Les principaux acteurs des oprations locales de MDE et leur rapport l'valuation
137
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Les GRD (Gestionnaires des Rseaux de Distribution de
llectricit)

La gestion des rseaux de distribution de llectricit est concde par 95% des communes
EDF Distribution
253
et pour les 5% restant des distributeurs non nationaliss (rgies muni-
cipales regroupes au sein de la FNCCR (Fdration Nationale des Collectivits Concdantes
et Rgies
254
). Les GRD peuvent, au mme titre que les syndicats dlectrification, entrepren-
dre des actions de matrise de la demande. Mais dans une optique dvaluation, ils intervien-
nent surtout comme dtenteurs de donnes. Suivant les donnes recherches, RTE (Rseau
de Transport d'Electricit
255
) peut aussi avoir ce rle.


B.1.4.6 Autres

Dautres acteurs peuvent intervenir, soit parce quils peuvent avoir des motivations raliser
des actions de matrise de la demande, soit parce quils peuvent avoir un rle pour
lvaluation.


LANAH et les CAH

LAgence Nationale pour lAmlioration de lHabitat (ANAH) a pour but lamlioration des
logements privs. Dans ce cadre elle accorde des subventions, notamment dans le cadre
dOPAH (Oprations Programmes dAmlioration de lHabitat) ou dOPATB (Oprations
Programmes dAmlioration Thermique et nergtique des Btiments). En ce sens elle cons-
titue une source de financements pour lamlioration de la performance nergtique des b-
timents.

Les demandes de subventions faites lANAH sont traites au niveau dpartemental par les
Commissions dAmlioration de lHabitat (CAH). Dans le cadre de linstruction des dossiers,
sont demandes des pices justificatives : factures des travaux raliss et attestation sur
lhonneur des professionnels les ayant raliss sur le respect des niveaux de qualit exigs.

Depuis 2003, la demande de la Cour des Comptes, les CAH assurent un contrle dune
partie des dossiers traits pour les propritaires-bailleurs :
- contrles systmatiques des dossiers enjeux (grosses subventions concernant des lo-
gements conventionns)
- contrles alatoires pour les autres dossiers

Pour exemple, en Loire-Atlantique en 2003, 20 dossiers (reprsentant environ 40 logements)
ont t contrls. Ce qui reprsente environ 3% des dossiers traits (environ 600 dossiers pour
1250 logements). Le contrle porte sur la bonne conformit des travaux prsents dans le
dossier instruit (visite sur site). En outre pour les logements avec chauffage lectrique, il est
demand un bilan de rnovation lectrique.

Concernant les dossiers des propritaires-occupants, les aides sont accordes aux personnes

253
cf. www.EDFdistribution.fr
254
cf. www.fnccr.asso.fr
255
cf. www.rte-france.com (voir notamment dans la rubrique "Nos activits", puis "Gestion des infrastructures
de transport" la partie "dveloppement du rseau" o est publi le bilan prvisionnel ralis tous les deux ans, qui
fait notamment ressortir les zones avec des problmes d'quilibre offre / demande d'lectricit)
Annexe B.1.4 Les principaux acteurs des oprations locales de MDE et leur rapport l'valuation
138
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
faible revenu. Des contrles sont prvus partir de 2005, mais ils seront moins exigeants au
niveau technique, car le but de ces travaux est plus la scurit ou le confort que la matrise
des consommations dnergie.


Les organismes de gestion de lhabitat social

Les OPAC, OPHLM, et autres, peuvent raliser des actions de MDE pour rduire les factures
nergtiques de leurs locataires, et ainsi limiter les augmentations du couple loyer-charges ou
lutter contre la prcarit nergtique et rduire les impays (cf. section B.3.5.2).

Pour une partie de ce parc de logements, le chauffage est collectif. Dans ce cas, les offices
HLM assurent un suivi des consommations de chauffage de leurs locataires, ainsi que de la
consommation dlectricit des parties communes. Ce suivi leur est en effet ncessaire pour
lestimation des charges. Ce qui permet ainsi une base pour un suivi voire une valuation des
ventuelles actions de MDE.

Par ailleurs, les Plans Stratgiques de Patrimoine (PSP) que doivent dfinir les bailleurs
sociaux depuis 2002 les incitent inscrire leurs politiques de gestion dans la dure. Certains
organismes dj actifs dans le domaine de l'nergie ont intgr une dimension "gestion de
l'nergie" voire "efficacit nergtique" dans leur PSP.

De nombreux projets vont dans ce sens, notamment pour changer les expriences et pour
crer des outils pour favoriser cette intgration des questions nergtiques dans les PSP
256
.


Les bureaux dtudes spcialiss

Ils peuvent intervenir toutes les phases dune action (conception, ralisation, valuation). Ils
ont leurs propres mthodes dvaluation. Certains les diffusent (comme ENERTECH),
dautres non (comme Explicit). La plupart sont plus orients vers des valuations ex-ante,
pour des comparaisons de scnarios (aide la conception) ou pour des estimations de rsultats
(avant ou aprs le projet) partir des donnes disponibles (factures, plans, etc.) avec ventuel-
lement quelques vrifications sur le terrain.

Ces bureaux d'tudes reprsentent le maillon oprationnel de l'valuation des activits de
MDE. Cependant pour l'instant, ils sont peu avoir une exprience dans le domaine de l'va-
luation ex-post. Les bureaux d'tudes spcialiss sont plus habitus travailler sur des tudes
ex-ante (prospectives, prparations de plans d'action, etc.).

De plus, selon la nature des valuations ex-post, certaines sont confies des bureaux d'tudes
spcialiss dans le marketing ou des instituts de sondage (par ex. IPSOS pour la campagne
de communication du Plan Eco Energie en PACA).

Avec l'essor des plans locaux de MDE comme en PACA ou dans le Lot, mais aussi avec les
certificats d'conomies d'nergie, cette branche d'activit devrait connatre une forte crois-

256
Voir par exemple le Rseau des Chargs de la Matrise des Charges et de la Qualit Environnementale
(CMCQE) en Rhne-Alpes (cf. www.raee.org) ou le projet europe ESAM (Energy Strategic Asset Management
in Social Housing Operators in Europe,
cf. http://ec.europa.eu/energy/intelligent/projects/doc/factsheets/esam.pdf)
Annexe B.1.4 Les principaux acteurs des oprations locales de MDE et leur rapport l'valuation
139
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
sance. Au-del des aspects conomiques, cela fait appel un besoin important de formation
de nouveaux professionnels dans ce domaine.


Les associations (pour lenvironnement ou de consom-
mateurs)

La souplesse de leurs structures leur permet dtre trs oprationnelles et ainsi elles peuvent
tre des partenaires actifs, parfois mme les matres duvre, dactions de MDE. Cependant,
leurs moyens sont souvent limits et concentrs sur l'action. Il leur est difficile de mener des
valuations consquentes, mais elles peuvent reprsenter une source d'informations intres-
sante.

140
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Annexe B.1.5 Les principaux cadres oprationnels et leur rapport l'valuation


(par cadre oprationnel, on entend ici cadre de management ou de financement des activits
de MDE)


B.1.5.1 Accord cadre EDF-ADEME


Cet accord participe aux missions de service public des deux partenaires et sinscrit dans les
politiques nergtiques et environnementales nationales (cf. PNLCC). La matrise de la de-
mande en lectricit (MDEc) est un des six domaines couverts par laccord, avec notamment
la matrise des dpenses nergtiques pour les personnes dfavorises. Accord triennal, il a t
renouvel pour la quatrime fois en avril 2004.


Un accord national avec des dclinaisons rgionales

Pour la priode 2000-2003, il tait stipul dans le communiqu de presse que les actions plus
oprationnelles seront dclines sur le terrain par les dlgations rgionales des deux orga-
nismes, en troite collaboration avec les Conseils Rgionaux et les autres collectivits loca-
les. Des oprations groupes sur des patrimoines ou des territoires homognes seront exp-
rimentes. Elles viseront mobiliser lensemble des dcideurs locaux (mnages, gestionnai-
res de btiments tertiaires, industriels, administrations locales ) en faveur de la matrise de
la demande dlectricit et de la promotion des nergies renouvelables.


Ouverture des marchs et poursuite de laccord

Les partenaires veilleront au respect des rgles de concurrence. Ainsi, les actions conduites
en commun viseront principalement les clients non ligibles dEDF. Ce principe prvaut
galement pour ce qui concerne les usages concurrentiels : le choix de lnergie sera alors
tabli sur la base dtudes pralables offrant des garanties suffisantes de neutralit. (com-
muniqu de presse pour laccord 2000-2003)

Dans le contexte de louverture des marchs, les rgles de cette convention et les modes
dintervention des deux acteurs ont t adapts de faon garantir sa neutralit par rapport
la concurrence.(communiqu de presse pour laccord 2004-2007)

Avec l'ouverture totale des marchs en 2007 (date de l'ouverture pour les particuliers), l'ave-
nir des accords EDF ADEME est incertain. Il a t jusqu'ici un des cadres les plus impor-
tants pour la MDEc, mais il se pourrait qu'il soit de fait remplacer par les obligations des certi-
ficats d'conomies d'nergie, avec un objectif de changement d'chelle.


Rapport lvaluation : cart entre la thorie et la
pratique

Les accords prvoyaient en thorie que les actions ralises soient values. Cependant nous
Annexe B.1.5 Les principaux cadres oprationnels et leur rapport l'valuation
141
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
avons vu (cf. section II.3.1) que dans la pratique cela tait loin d'tre toujours le cas. De plus,
mme lorsque des retours d'exprience ont t constitus, ils sont souvent difficiles rcup-
rer (cf. section II.3.2).

Une des explications sur le manque d'information sur les valuations ralises est que les ac-
teurs restaient souvent en dsaccord sur les mthodologies d'valuation, en particulier en
vue de l'affichage des rsultats. Menanteau et al. [1997 p.54] signalent ainsi propos d'une
opration ralise en Savoie en 1994-1995, qu'aucune valuation officielle des rsultats n'a
encore t tablie ce jour du fait d'un dsaccord portant la mthodologie d'valuation.


B.1.5.2 Le FAC


Cre en 1937 pour soutenir llectrification en zone rurale, le Fonds Amortissement des
Charges d'lectrification est une enveloppe financire alimente par des prlvements sur les
recettes des ventes dlectricit en basse tension (BT). Il permet une prquation de traitement
des usagers. Il a notamment pour vocation de financer les actions qui assurent llectrification
des zones rurales et des sites isols. Ainsi une enveloppe annuelle (15 millions deuros/an
depuis 1995) est mise en place pour financer des oprations alternatives aux extensions et
aux renforcements des rseaux BT lorsque celles-ci prsentent une justification conomique.

Cette enveloppe n'a jamais t utilise en entier et le recours aux EnR pour la PDE (Pro-
duction Dcentralise d'Electricit) a eu plus de succs que la MDEc. Aprs une premire
vague d'oprations pilotes (cf. [De Gouvello 1996]), le financement d'actions de MDEc dans
le cadre du FAC a failli tre arrt. Mais depuis 2000, sous l'impulsion de la nouvelle direc-
tion du FAC (notamment d'Yves Coeffe et de Bernard Fquant) et de Daniel Belon du SIEL
42 (syndicats d'nergies de la Loire), on assiste un nouvel essor d'oprations de MDEc pour
viter des renforcements de rseau de distribution d'lectricit (notamment dans la Loire et en
Bourgogne).

Ces actions de MDEc font lobjet dune valuation spcifique et dtaille pour que leur
financement dans le cadre du FAC soit valid. L'quipe du FAC accompagne dans ce sens
les porteurs de projet. Des bureaux d'tudes comme le SERT ou FR2E (cf. section II.3.2.1),
mais aussi le SIEL 42, ont une bonne exprience dans ce domaine.


B.1.5.3 Contrats de plan Etat-Rgion (CPER) (et Rgion-ADEME)


Les CPER existent depuis 1984. Le dernier programme de CPER (2000-2006) est cibl sur
l'amnagement durable du territoire, la cohsion sociale et l'emploi. Il peut par exemple
dboucher sur la cration dun fonds de soutien des actions de matrise de lnergie.
Conjointement, des accords-cadres ont t signs sur la mme priode pour chaque rgion
entre le Conseil Rgional, l'Etat et l'ADEME, accords dclins par une convention d'applica-
tion annuelle qui prcise les montants et les critres d'aides. Cet accord-cadre est le plus sou-
vent annex au CPER.

La Loi de 1999 sur l'Amnagement et le Dveloppement Durable des Territoires (LOADDT)
ayant donn aux rgions des comptences de planification, l'ADEME s'appuie sur les plans
rgionaux, le SSCE (Schma de Services Collectifs de lEnergie), pour dfinir les actions
Annexe B.1.5 Les principaux cadres oprationnels et leur rapport l'valuation
142
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
conjointes.


Rapport lvaluation : vers une mise en pratique de la
thorie ?

De mme que pour les accords EDF-ADEME, les CPER donnent un premier cadre de suivi
des actions. Il est par ailleurs rappel dans la partie sur lvaluation de la convention Etat-
ADEME 2000-2006, que les contrats de plan tatRgions sont assortis dune obligation
dvaluer. LADEME jouera un rle moteur dans la conception et la conduite de ces valua-
tions.

Cependant cette obligation thorique se retrouvait peu dans la pratique. Le nouveau disposi-
tif de suivi de l'ADEME (cf. section II.3.1.3) devrait peu peu combler ce manque, notam-
ment avec la formation des chargs de mission des DR-ADEME.


B.1.5.4 Les outils de l'ADEME pour l'efficacit nergtique au niveau local


Les OPATB : pour une approche territoriale de
l'efficacit nergtique dans les btiments

Les OPATB (Oprations Programmes dAmlioration Thermique et nergtique des Bti-
ments) font partie du PNAEE (Plan National dAmlioration de lEfficacit Energtique) et
sont aides par lEtat, lADEME et lANAH. Une OPATB est un programme d'animations
et de subventions pour raliser des travaux d'conomies d'nergie, favoriser la matrise de la
demande d'lectricit et l'utilisation d'nergies renouvelables. Elle concerne tous les btiments
(rsidentiels et tertiaires, publics et privs) dun territoire donn (quartier, PNR, etc.). Elle est
mene par une collectivit. Les OPATB sont bases sur une approche territoriale (cf. sec-
tion Annexe B.1.6).

L'ADEME assure la mise en rseau des expriences des OPATB par le biais d'une lettre
d'information ad hoc
257
et de l'organisation de rencontres nationales et de sessions de forma-
tion des chefs de projets. Un site Internet pour les acteurs concerns devait aussi tre ralis.


L'valuation des OPATB : un dispositif qui se structure
deux niveaux (national et local)

Prvues sur une dure de 4 5 ans, les OPATB sont values annuellement au vu de la d-
marche mise en place et des rsultats obtenus au plan local. Pour la plupart, elles viennent de
dbuter et lADEME devrait lancer prochainement un appel doffre concernant lvaluation
du programme dans son ensemble, chaque collectivit participante devant faire de mme pour
lvaluation de lopration quelle mne.

Au niveau national, l'valuation portera sur l'efficacit globale du programme OPATB et
sera a priori base surtout sur des entretiens avec les acteurs concerns (comme le fait dj
l'ADEME pour les programmes d'aide la dcision).

257
cf. http://www2.ADEME.fr/servlet/KBaseShow ?sort=-1&cid=96&m=3&catid=16908
Annexe B.1.5 Les principaux cadres oprationnels et leur rapport l'valuation
143
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006

Pour le niveau local, l'ADEME a publi en novembre 2004 un cahier des charges pour
l'valuation locale des OPATB
258
. Ce cahier des charges a pour but de servir de base pour
l'appel d'offres que devront passer les collectivits qui mnent des OPATB pour les faire va-
luer par un bureau d'tudes ou un organisme indpendant. L'ADEME apportera un soutien
financier aux collectivits pour financer ces tudes.

Cette valuation doit se raliser en parallle et en coopration avec l'animation et le suivi de
l'OPATB raliss par les collectivits concernes avec le soutien de l'ADEME. Ce qui doit
notamment faciliter la collecte des informations.

Les objectifs de l'valuation fixs dans ce cahier des charges sont la fois de vrifier si les
objectifs ont t atteints, de quantifier les impacts des actions entreprises, et d'analyser la
stratgie d'action et les choix, notamment pour dtecter les possibilits d'amliorations.

La dfinition de ce cahier des charges par l'ADEME permet d'assurer la transparence du
processus d'valuation des OPATB. D'une part les collectivits peuvent ainsi savoir les points
sur lesquels leur projet sera valu. D'autre part il fixe les tches de l'valuateur externe. Enfin
il doit permettre d'assurer la comparaison des rsultats des diffrentes OPATB.

Mais si le cahier des charges dtaille les points traiter et les tches raliser, il est moins
prcis sur les informations collecter et ne donne pas d'lments sur les mthodes d'ana-
lyse et de calcul utiliser.

La dmarche affiche pour l'valuation des OPTAB apparat donc idale en thorie, avec un
dispositif structur sur les deux niveaux national et local, et des documents incitant prvoir
l'valuation ds le dbut des oprations et impliquant les acteurs concerns dans le proces-
sus d'valuation. Mais cette dmarche est nouvelle et les acteurs entrent dans une phase
d'apprentissage avec des points qui restent dterminer (mthodes d'analyse utilises, garan-
ties sur la fiabilit et la qualit des valuations ralises).

Il sera donc intressant de suivre comment se met en place dans la pratique le dispositif d'va-
luation des OPATB, qui constitue un outil exemplaire pour dvelopper une culture prati-
que de l'valuation au niveau local.


Les contrats ATEnEE : une approche territoriale et
transversale

Le contrat ATEnEE (Actions Territoriales pour l'Environnement et l'Efficacit Energtique) a
t labor en mars 2002 sur linitiative du ministre en charge de l'environnement, lADEME
et la DATAR. L'objectif est d'accompagner les agglomrations, les pays et les parcs naturels
rgionaux pour une meilleure prise en compte de l'environnement, de l'efficacit nergtique
et de la rduction des missions de gaz effet de serre dans les projets de territoire.

Cest un cadre partenarial pour dfinir un plan daction suivant une approche globale et
transversale et pour favoriser la dynamique territoriale.

Une des composantes des contrats ATEnEE est de mettre en place un dispositif de suivi et

258
cf. http://www2.ADEME.fr/servlet/KBaseShow ?sort=-1&cid=96&m=3&catid=16911
Annexe B.1.5 Les principaux cadres oprationnels et leur rapport l'valuation
144
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
dvaluation des actions entreprises sur le territoire concern. Ces contrats nen sont quau
dbut, mais ils devraient dboucher sur des retours dexpriences intressants.

Parmi les dmarches envisages, RESPECT (Rfrentiel d'Evaluation et de Suivi des Politi-
ques Environnementales de Collectivits Territoriales)
259
propose une mthodologie pour la
cration d'un tableau de bord permettant de raliser un diagnostic de l'tat de l'environne-
ment dans la collectivit, le suivi et l'valuation de la politique et des actions, une initiation au
management environnemental. Il propose galement un manuel d'utilisation, 73 indicateurs et
un logiciel.

Tout comme pour les OPTAB, les contrats ATEnEE reprsentent une dmarche intressante
qui devrait participer au dveloppement d'une culture pratique de l'valuation au niveau local.
Ils en sont encore leurs dbuts, et il est donc encore trop tt pour avoir du recul sur ces exp-
riences. Elles constitueront sans doute des retours d'exprience trs intressants. Il peut d'ores
et dj tre remarqu que les quipes de projet ont constitu des groupes de travail et des
comits de pilotage afin de prvoir ces valuations, qui, dans les textes, font partie int-
grante de la dmarche de dveloppement durable (amlioration continue, transparence).


Oprations exemplaires : des valuations dtailles pour
produire des retours d'exprience

En 2002-2003, dans le cadre du PNAEE et du Plan National Habitat Construction et Dve-
loppement Durable, l'ADEME a lanc un appel projets de couverture nationale pour des
oprations exemplaires intitules efficacit nergtique pour le dveloppement durable dans
les btiments et les collectivits. Les DR-ADEME ont la charge d'identifier et de suivre la
mise en uvre des oprations exemplaires.

Ces oprations visent tester des technologies, des pratiques ou modes dorganisation et den
tirer un maximum denseignements en vue de leur diffusion plus large.

Dans sa prsentation du programme, lADEME prcise que les rsultats devront tre mesurs
puis systmatiquement exploits. Pour contribuer l'impact des oprations et l'effet d'en-
tranement attendu, l'ADEME, en liaison avec ses partenaires, veillera valoriser plus parti-
culirement les rsultats des meilleures oprations identifies dans le cadre de cet appel pro-
jets, travers des actions de communication qu'elle pourra mener directement. Par ailleurs ces
actions doivent aussi mettre laccent sur une problmatique territoriale.

Lvaluation est donc centrale dans ces oprations puisque le but est de pouvoir ensuite re-
produire les meilleures expriences. Les mthodes dvaluation utilises ne peuvent proba-
blement pas servir hors de ce contexte car les moyens dvaluation sont ici importants du fait
du caractre exprimental. Cependant les rsultats obtenus seront sans doute riches
denseignements.

Cette approche d'valuation est gnrale pour tous les programmes d'oprations exemplaires.


B.1.5.5 Les certificats dconomies dnergie


259
cf. www.respect.asso.fr
Annexe B.1.5 Les principaux cadres oprationnels et leur rapport l'valuation
145
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006

Le dispositif des certificats d'conomies d'nergie est prsent pour son principe dans la sec-
tion II.3.1.4 et pour son rapport global l'valuation dans la section II.3.1.4. Nous tudions ici
plus en dtails ce qu'il apporte au niveau local.

L'intrt des acteurs locaux pour ce nouveau dispositif est manifeste. En tmoigne le groupe
de travail de l'ATEE spcifique aux collectivits locales et l'atelier collectivits territoriales
et transport du sminaire organis par l'ATEE sur les certificats d'conomies d'nergie :
mode d'emploi le 26 avril 2006 Paris.

Les questions poses ce sminaire de l'ATEE tmoignent que le dispositif des certificats
reste encore confus pour les acteurs locaux.

Par exemple, ces acteurs sont souvent habitus travailler avec l'ADEME et rechercher des
financements auprs de l'ADEME ou d'autres (par ex. Commission europenne). Certains
assimilent donc les certificats un nouveau mode de financement et demandaient quel allait
tre le prix des certificats. Or l'approche des certificats n'est pas celle d'un financement.
Ce ne sont pas des subventions, mais une sorte de monnaie d'change qui obit aux lois du
march (offre/demande).

Pour l'instant, de nombreuses incertitudes demeurent sur ce que sera ce march. Les avis
divergent sur le niveau de contrainte pour les acteurs obligs (vont-ils russir remplir faci-
lement leurs obligations ou non ?). Un fonds pourrait tre cre pour racheter les certificats qui
ne trouveraient pas preneurs pour palier un ventuel manque de demande.

Il est donc difficile de dire si les certificats auront un effet de levier pour les actions au niveau
local. Pour le moment les acteurs locaux sont plutt sceptiques sur le fait de pouvoir trouver
des acheteurs leurs ventuels certificats. Toutefois, s'il n'est pas sr que les certificats soient
des dclencheurs d'actions, les acteurs sont conscients qu'ils pourraient tre un plus pour des
actions prvues par ailleurs.

En outre, les certificats peuvent permettre de rendre plus visibles les activits de MDE.

La circulaire du 18 juillet 2006 relative la dlivrance des certificats dconomies dnergie
prcise par ailleurs les rles des DRIRE et DR-ADEME dans le dispositif, et notamment
qu'il est utile que puisse tre organise une action dinformation et danimation sur le sujet
en rgion. Et de poursuivre, les dlgations rgionales de lADEME pourront apporter leur
appui aux DRIRE en matire dinformation et daccompagnement pour les porteurs de projet
ainsi que danimation du dispositif au niveau local
260
.


Un apport important pour l'valuation, mais utiliser
avec prcaution

Au-del du caractre incertain de linfluence des certificats sur le dveloppement doprations
locales, ce dispositif aura un effet prescripteur en terme dvaluation (cf. section II.3.1.4).
Les actions devront suivre un processus de certification, avec un enregistrement auprs des
DRIRE (Directions Rgionales de l'Industrie et de la Recherche).

260
Voir aussi le detail du rle des DR-ADEME pour le dispositif des CEE dans la section B.1.4.2 de l'Annexe
B.1.4.
Annexe B.1.5 Les principaux cadres oprationnels et leur rapport l'valuation
146
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006

Cet enregistrement systmatique des actions devrait permettre d'avoir une meilleure
connaissance des oprations locales, mme s'il sera limit aux actions dpassant un certain
seuil d'conomies d'nergie et correspondant des types d'actions standardises.

Les mthodes de calculs, valuations ex-ante, seront officielles et partages par tous les ac-
teurs concerns. Elles simposeront donc comme une rfrence. Toutefois elles correspondent
un objectif particulier, la certification dactions, afin d'assurer une crdibilit suffisante
tout en minimisant les cots d'administration et donc d'instruction des dossiers.

Cette validation ex-ante permettra aux acteurs de pouvoir prsenter des rsultats quantitatifs
certifis, donc lisibles et par consquent plus visibles. Ce systme commun devrait aussi per-
mettre une meilleure comparaison des actions de mme type entre elles, et assurer une comp-
tabilit reconnue de tous.

Mais cette comptabilit se base sur des valeurs moyennes, qui sont suffisantes pour le suivi
des actions au niveau global, mais qui ne renseignent pas sur les rsultats d'une action en par-
ticulier (les carts la moyenne pouvant tre trs importants, voir l'exemple des LBC discut
dans l'Annexe D.1.7).

Ainsi les certificats d'conomies d'nergie ne rsolvent pas d'un coup toutes les questions
d'valuation. Ils pourraient mme reprsenter un cueil si les valeurs moyennes taient mal
utilises.

Cependant les travaux importants raliss dans les groupes de travail de l'ATEE et par les
experts mobiliss l'ADEME mettront au fur et mesure disposition de plus en plus d'in-
formations de rfrence qui seront utiles l'amlioration de l'valuation ex-post des actions
(et rciproquement). Les DR-ADEME devraient avoir un rle important jouer pour assurer
la bonne circulation et utilisation des informations.


B.1.5.6 Conventions spcifiques un territoire


Rcemment, de nouveaux cadres oprationnels se sont dvelopps pour structurer et financer
des plans locaux de MDE relativement ambitieux en PACA
261
et dans le dpartement du
Lot
262
. Ce sont des conventions spcifiques un territoire qui regroupent les collectivits lo-
cales concernes, l'ADEME et EDF.

Elles viennent d'une certaine manire suppler les accords EDF-ADEME sur des questions
de territoires en contrainte par rapport au rseau national de transport d'lectricit.

Des moyens importants sont mis en jeu. L'valuation des oprations ralises dans ces cadres
sera trs importante pour juger de la pertinence de telles alternatives des nouvelles lignes
Trs Haute Tension.

L'valuation de ces programmes reprsente des problmatiques nouvelles qui ont amen

261
cf. www.planecoenergie.org
262
cf. http://www.arpe-mip.com/html/1-5610-Programme-MDE-du-Lot.php et
http://www.lot.pref.gouv.fr/MDE/accord_cadre_2003_12_09.pdf
Annexe B.1.5 Les principaux cadres oprationnels et leur rapport l'valuation
147
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
EDF commander un travail de recherche sur la question pour le cas de PACA. En ce qui
concerne le programme dans le Lot, il donne lieu actuellement une thse ralise par Nazim
Pigenet
263
.

263
Thse CIFRE la Fdration Dpartementale d'Electricit du Lot, intitule "Mise en place des outils de suivi
et de prdiction de la consommation lectrique l'chelle dpartementale : application dans le dpartement du
Lot", cf. http://www.cpat.ups-tlse.fr/operations/operation_07/oper07_fr.html

148
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Annexe B.1.6 Exemples de cadres de dveloppement de politiques nergtiques
locales


Schmatiser les politiques nergtiques locales se rvle assez complexe du fait de la diversi-
t des acteurs impliqus et de leurs comptences (au sens juridique du terme), de l'articula-
tion entre les diffrents chelles territoriales (europenne, nationale, rgionale, etc.) et de la
superposition de leurs lgislations et programmes, et des interactions des politiques nerg-
tiques avec d'autres politiques publiques (sociale, logement, urbanisme, etc.).

Nous proposons ci-dessous deux reprsentations de cadre de dveloppement de politiques
nergtiques locales, qui permettent aussi de mieux comprendre comment la dimension locale
peut intervenir dans l'organisation des actions.


B.1.6.1 Le SSCE : une tentative avorte ?


La premire reprsentation concerne les politiques nergtiques rgionales, telles qu'elles de-
vraient se dvelopper si le processus du Schma de Services collectifs de l'Energie tait rel-
lement appliqu (cf. Figure 26 ci-dessous).

Pour plus de dtails sur l'laboration du premier SSCE (de 1999 2002), se reporter [Bailly
2000, Bailly 2001].

Dans la pratique, les contributions rgionales au SSCE puis les effets du SSCE sur les politi-
ques rgionales (par ex. cration d'un ORE) sont trs variables d'une rgion l'autre. Il semble
en effet que le SSCE ait renforc les politiques rgionales dans les rgions dynamiques avec
des rseaux d'acteurs dj actifs, et qu'il soit rest un exercice administratif coordonn par la
DRIRE dans les rgions o les acteurs locaux s'taient peu investis dans les questions nerg-
tiques auparavant. En ce sens, le SSCE aura surtout t un rvlateur des disparits rgiona-
les.

En 2005, le SSCE devait tre rvis pour prparer les ngociations des nouveaux Contrats de
Plan Etat-Rgion pour la priode 2006-2012. Ce qui devait tre en outre l'occasion pour les
Rgions de prsenter leurs plans concernant les EnR et les activits de MDE.

Mais les administrations se sont rendues compte de la lourdeur d'un tel dispositif (la pre-
mire rdaction du SSCE a pris prs de trois ans), et l'article 61 de la loi n 2004-1343 du 9
dcembre 2004 de simplification du droit stipule que le Gouvernement est autoris prendre
par ordonnance les dispositions ncessaires pour allger les procdures d'adoption et de r-
vision des schmas de services collectifs, prvus par la loi n 95-115 du 4 fvrier 1995
d'orientation pour l'amnagement et le dveloppement du territoire. Ce qui fut fait par l'or-
donnance n2005-654 du 8 juin 2005, selon laquelle il est conserv une procdure en deux
phases : une phase de concertation au niveau rgional puis une phase de consultation sim-
plifie mais formalise des organismes nationaux concerns.

Concrtement concernant la mise jour du SSCE, aucune information n'est actuellement dis-
ponible ce jour. Ainsi, s'il semblait en thorie un outil intressant pour structurer les politi-
ques nergtiques au niveau rgional et assurer la concertation entre les niveaux national et
Annexe B.1.6 Exemples de cadres de dveloppement de politiques nergtiques locales
149
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
rgional, la procdure s'est rvle lourde appliquer, et avec une efficacit dpendante des
dynamiques dj existantes. Au final il semble qu'aujourd'hui le SSCE ne soit plus relle-
ment d'actualit.

Figure 26 - cadre suppos pour le dveloppement de politiques nergtiques rgionales
en suivant le processus d'laboration du SSCE


B.1.6.2 Les OPATB : un exemple de croisement de cadre sectoriel et d'approche territoriale


Nous compltons ici la prsentation des OPATB faite dans la section B.1.5.4 de l'Annexe
B.1.5 avec une schmatisation de son fonctionnement suppos (cf. Figure 27 ci-dessous).

Lanc en fvrier 2002, le programme des OPATB compte aujourd'hui 15 collectivits partici-
pantes, retenues suite des appels projet successifs. Les OPATB ncessitent un travail pr-
alable important, et notamment une tude pr-oprationnelle, avant que les conventions
puissent tre signes et que les OPATB entrent rellement dans leur phase oprationnelle.

PRFECTURE
CONSEIL
RGIONAL
DRIRE
DR-ADEME
RESEAUX D'AC-
TEURS (fournis-
seurs d'nergie, as-
sociations, etc.)
AGENCE REGIO-
NALE DE L'ENER-
OBSERVATOIRE RE-
GIONAL DE L'ENERGIE
CPER
SSCE
dfinition de
la contribu-
tion rgionale
contributions (donnes techniques,
tudes, propositions, valuations)
Comit de
pilotage
Supervision
Supervision
ETAT
orientations
propositions de
plan daction
accord
Comit de
suivi
financements
Politiques
nergtiques
rgionales
Annexe B.1.6 Exemples de cadres de dveloppement de politiques nergtiques locales
150
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006

Figure 27 - schma de fonctionnement suppos des OPATB

5 OPATB sont dj en phase oprationnelle, et 4 autres ont fini leur tude pr-
oprationnelle
264
. D'aprs un communiqu de presse de l'ADEME du 30 juin 2005, le premier
bilan de la premire OPATB oprationnelle (fin 2003) fait ressortir des premiers rsultats
probants () plus de 4 millions d'euros de travaux raliss () prs de 2.000 MWh/an co-
nomiss soit 400 tonnes de CO2 vites par an.

Nous avons vu dans la section B.1.5.4 de l'Annexe B.1.5 que le programme des OPATB s'ac-
compagnait d'un dispositif structur d'valuation. Toutefois nous ne disposons pour l'instant
pas de plus d'information concernant la mise en pratique des valuations (par exemple pour
savoir comment sont dtermins les rsultats prsents). Cette question sera au cur des pro-
chaines rencontres du rseau OPATB les 26-27 juin 2006 en Gironde (lieu de la premire
OPATB oprationnelle).









264
Informations du site de l'ADEME, cf. www.ADEME.fr puis onglet "Domaines d'intervention", rubrique "B-
timents" et enfin "OPATB"
institutions centrales ADEME ANAH
DR-ADEME CAH
aides finan-
cires
Bureaux
d'tudes aides techni-
ques et propo-
sitions
Dveloppement de dy-
namiques d'actions
Collectivits
locales
OPATB
appels
projets
propositions
slection des
projets
mne
mobiliser les propritaires,
faciliter les procdures,
renforcer les rseaux d'acteurs, etc.
cadre sectoriel
approche territoriale
institutions locales

151
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Annexes B.2 Complments l'tude des oprations locales de MDE en
France


Ces annexes reprennent les tapes auxquelles nous avons procd pour caractriser les opra-
tions locales de MDE en France.

Devant l'absence de source centralise d'information sur ces oprations, nous en avons d'abord
ralis un inventaire (Annexe B.2.1).

En parallle, nous avons recherch dcrire systmatiquement ces oprations, notamment
pour structurer les informations collectes. Pour ce faire, nous avons dfini des critres de
segmentation en nous appuyant sur une recherche bibliographique des typologies existantes
dans ce domaine (Annexe B.2.2).

Enfin, nous avons analys l'inventaire en utilisant la grille de lecture fournie par ces critres
de segmentation, d'une part en observant les modalits les plus frquentes pour chaque critre,
puis en recherchant les liens ventuels entre les modalits de critres diffrents (Annexe
B.2.3).



152
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Annexe B.2.1 Mthodes et rsultats de l'inventaire des oprations locales de
MDE en France


B.2.1.1 Mthode utilise pour l'inventaire


Lchelle choisie pour mener les recherches a t la rgion. Elle semble la plus pertinente,
car :
- cest le niveau de structuration locale pour les deux organismes principaux (EDF et
lADEME), et c'est aussi l'chelon dfini dans le SSCE pour coordonner les politiques
nergtiques locales
- le nombre de rgions (22 pour la France mtropolitaine et Corse) reste suffisamment
limit pour pouvoir toutes les passer en revue (compar la centaine de dpartements et
aux 36.000 communes)

Compte tenu de ltendue des recherches raliser et du temps limit, nous avons d'abord
concentr ce travail sur les informations disponibles par le biais dInternet. Pour chaque
rgion, les sources principales dinformations ont t les suivantes :
- fiche de suivi de la contribution rgionale au SSCE ralise par lADEME :
cf. http://www.ADEME.fr/travail/Ssc/default.htm
- site de la Dlgation Rgionale de lADEME (quand il existe) : cf. www.ADEME.fr
(onglet "L'ADEME en rgions")
- archives de La Lettre de lADEME (en utilisant les mmes mots-cls que pour google,
cf. ci-dessous) : cf. http://www.ADEME.fr/htdocs/publications/moteur.asp
- site de la DRIRE : cf. www.drire.gouv.fr
- site du Conseil Rgional (et ventuellement des Conseils Gnraux) :
cf. http://www.conseil-general.com/conseil-regional/conseils-regionaux.htm
- site de l'Agence Rgionale de l'Energie (et/ou de l'Environnement) (quand elle existe) :
cf. http://www.rare.asso.fr/AGENCES.HTM
- site des agences locales de lnergie et des autres organismes locaux actifs dans le do-
maine de la matrise de lnergie : cf. http://www.federation-flame.org/agences.htm pour
les ALE (les autres organismes locaux sont souvent rpertoris dans les liens des sites des
DR-ADEME ou des Conseils Rgionaux)
- site dEDF (site de la dlgation rgionale quand il existe) et des autres compagnies lec-
triques locales (ces sites ont t recherchs avec le moteur de recherche google)
- les expriences de villes prsentes sur le site d'Energie-Cits : cf. www.energie-
cites.org
265

- sites trouvs partir du moteur de recherche google en couplant le nom de la rgion (ou
du dpartement) avec les mots-cl suivants : matrise de la demande, matrise de
lnergie, efficacit nergtique, conomies dnergie

Nous avons de plus consult les recueils de bonnes pratiques des publications de l'ADEME
et d'Energie-Cits
266
(par exemple [Maurer 2000, Schilken 2001]), ainsi que celui ralis par
l'AIVF (Association des Ingnieurs des Villes de France) [AIVF 1999].

265
Mais sur les 133 expriences qui taient prsentes pour le domaine de l'efficacit nergtique en juillet 2004,
seules 14 provenaient de France
266
Il faut noter que dans les publications d'Energie-Cits ne concernant pas spcialement la France mais les ex-
priences en Europe ou l'internationale, il y a peu voire pas de bonnes pratiques issues de France (cf. [Cahn
2003, Energie-Cits 2002, Schilken 2000]).
Annexe B.2.1 Mthodes et rsultats de l'inventaire des oprations locales de MDE en France
153
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006


B.2.1.2 Rsultats de l'inventaire


Suite aux recherches faites partir dInternet pendant l't 2004, la richesse des informations
disponibles tait trs variable selon les rgions. Le manque dinformations vient souvent de
labsence de sites Internet prsentant les oprations locales (DR-ADEME, etc.). Mais il sem-
ble aussi que cela vienne des diffrences de dynamique locale en terme de MDE (certaines
rgions sont plus orientes sur le dveloppement des EnR que sur la MDE par exemple).

Suite cela courant septembre-dcembre 2004, des contacts ont t pris avec les DR-
ADEME (directement par email, puis ventuellement par tlphone) pour se procurer leurs
rapports dactivits
267
et les documents existants sur des oprations locales de MDE. Le cas
chant d'autres acteurs ont t contacts
268
.

Ce recensement nest pas exhaustif. Mais il parat trs difficile de raliser un inventaire qui le
soit rellement pour plusieurs raisons, notamment :

- de part leur caractre local et parfois trs ponctuel, les actions recherches ne font pas
toujours lobjet de communication

- la culture de capitalisation dexpriences est peu rpandue ( de rares exceptions
prs). Mme si des dispositifs existent (comme LISA l'ADEME) pour collecter les in-
formations, le plus souvent leur consultation n'est pas publique et leur utilisation au niveau
local est plus administrative qu'valuative (cf. section II.3.1.3). Les seules expriences
largement diffuses sont les cas d'cole (Montpellier, Grenoble, Besanon, etc.).

- au sein dune structure elle-mme, le processus de mmoire collective est souvent limi-
t : il est trs difficile dobtenir une liste des actions ralises, voire de trouver une per-
sonne au courant des actions passes dont on a trouv une trace (notamment en raison du
renouvellement parfois frquent de la personne en charge de ces questions, ou bien parce
ce domaine est trait par diffrents services sans qu'il soit identifi prcisment)

- il est aussi difficile de dfinir une frontire prcise pour ce que lon entend par actions
de matrise de la demande en nergie. Par exemple, les actions lies la dmarche HQE
ou au management environnemental en font-elles partie ? Comment prendre en compte la
partie nergie de projets suivant des dmarches environnementales globales ? (dans ce
travail d'inventaire, nous nous sommes concentrs sur les actions pour lesquelles la di-
mension nergie tait la principale)

Dans un premier temps nos recherches taient cibles sur les actions concernant l'lectricit
dans les secteurs rsidentiel et tertiaire (priv et public). Nous avons peu peu largi ce
champ aux autres nergies et au secteur industriel (le secteur des transports n'est pas trait
dans notre sujet).


267
Nous avons pu rcuprer les rapports d'activit de 2002 et 2003 pour la quasi-totalit des rgions, et parfois
ceux de 2000 et 2001, voire une version provisoire de celui de 2004.
268
Par exemple Yves Coeff et Bernard Fquant pour les actions concernant le FAC
Annexe B.2.1 Mthodes et rsultats de l'inventaire des oprations locales de MDE en France
154
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Au final 210 oprations
269
ont t recenses couvrant principalement la priode 2000-2004
et les 22 rgions de la France mtropolitaine et Corse (cf. extraits du fichier Excel corres-
pondant prsents en Annexe B.2.1). Ce premier rsultat montre que le nombre d'oprations
locales n'est pas ngligeable. Reste voir quoi elles correspondent.

Nous avons ainsi analys les informations collectes sous deux angles :
(1) au travers de la dfinition de critres de segmentation pour mieux caractriser les actions
(cf. section II.2.2)
(2) en se concentrant sur la dimension locale de ces actions, en particulier pour faire ressortir
ce qu'apporte le caractre local aux actions et quelles sont les tendances actuelles (cf. section
II.2.2.4)

La section suivante prsente un extrait de l'inventaire tel qu'il a t enregistr (sous la forme
d'une feuille Excel).

(pour plus de dtails sur les rsultats de cet inventaire, se reporter la publication ralise
ce sujet [Broc 2005b])



269
Comme nous ne disposions que de trs peu de donnes quantitatives sur les actions trouves, pour les dnom-
brer nous avons dfini notre propre "unit", l'opration. Ici, une opration correspond un groupe d'actions iden-
tiques dans un secteur et une rgion donns (exemple : les audits nergtiques dans l'industrie raliss dans une
rgion reprsente une opration)
Annexe B.2.1 Mthodes et rsultats de l'inventaire des oprations locales de MDE en France
155
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
B.2.1.3 extraits de l'inventaire ralis

Les tableaux ci-dessous sont extraits du fichier Excel utilis pour rpertorier les 210 actions trouves lors de notre inventaire (cf. section II.2.1).
Ils correspondent aux 5 premiers enregistrements de l'inventaire (class par ordre alphabtique de rgion).

REGION SOURCE NOM DESCRIPTION DATES INSTRUMENT
source
2
0
0
0

e
t

a
v
a
n
t
2
0
0
1
2
0
0
2
2
0
0
3
2
0
0
4

e
t

a
p
r

s
I
N
C
I
T
A
T
I
O
N
C
O
N
S
E
I
L
S
E
N
S
I
B
I
L
I
S
A
T
I
O
N
1 Alsace
rapport d'activit DR-
ADEME 2000
sous-groupe de travail sur
la MDEc
suite au travail ralis pour le SSCE, les acteurs ont
souhait poursuivre les rflexions dans un sous-groupe
sur la MDEc 1 1
2 Alsace
rapport d'activit DR-
ADEME 2000 pr-diagnostic nergie
financement 90% de l'ADEME pour la ralisation d'un
pr-diagnostic nergie pour entreprise, collectivit,
bailleurs 1 1
3 Alsace
compte-rendu de
runion du GEA du
05/09/01
Programme de
sensibilisation aux veilles
projet d'actions d'information sur les consommations
d'nergie lies aux veilles 1
4 Alsace
rapport dactivit DR-
ADEME 2002 Rseau conomes de flux
recrutement d'emplois-jeunes par les collectivits pour
amliorer leur gestion de l'nergie 1 1 1 1 1 1
5 Alsace
rapport dactivit DR-
ADEME 2002
amlioration des systmes
dair comprim
action du partenariat ADEME - Electricit de Strasbourg
portant sur les diagnostics nergie dans l'industrie (et
surtout sur l'air comprim) 1 1

Annexe B.2.1 Mthodes et rsultats de l'inventaire des oprations locales de MDE en France
156
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006

TS d'INTERVENTION USAGE CIBLE TECHNIQUE PUBLIC / SECTEUR VISE MOTIVATION
dtails (instrument -
niveau 2)
E
L
E
C
T
R
I
C
I
T
E
H
V
A
C
dtails (usage cible -
niveau 2)
(technique
performante
utilise)
R

s
i
d
e
n
t
i
e
l
R

s
i
d
e
n
t
i
e
l

s
o
c
i
a
l
I
n
d
u
s
t
r
i
e
T
e
r
t
i
a
i
r
e

(
p
r
i
v

)
S
e
c
t
e
u
r

p
u
b
l
i
c
C
i
b
l
e
s

s
p

c
i
a
l
e
s
a
c
t
i
o
n
s

t
r
a
n
s
v
e
r
s
a
l
e
s
dtails (secteur vis)
rseau d'acteurs 1
tous usages de
l'lectricit 1 1 1 1 4
tude sur le potentiel rgional
en matire de MDEc
diagnostic divers 1 1 1 3
identifier les gisements
d'nergie possibles
info 1
veille des appareils hifi
et lectromnager 1 1
gisement dconomies
dnergie identifi
rseau d'acteurs,
diagnostic, info,
formation divers 1 1 1 2
conomes de flux,
collectivits
crer des emplois-jeunes
nergie et un rseau de
proximit, informer le grand
public
diagnostic 1 air comprim
air comprim
performant 1 1
accords ADEME - Electricit
de Strasbourg et ADEME -
EDF


Annexe B.2.1 Mthodes et rsultats de l'inventaire des oprations locales de MDE en France
157
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006

OBJECTIFS
OPERATIONNELS
CADRE(S) DE
PARTENARIAT /
FINANCEMENT
ACTEURS
dtails (cadre de financement)
C
P
E
R
E
D
F
-
A
D
E
M
E
E
D
F
-
A
D
E
M
E
-
R

g
i
o
n
A
D
E
M
E

s
e
u
l
e
F
A
C
E
A
u
t
r
e
s
organisme(s) responsable(s) autres partenaires
R
E
G
I
O
N
D
E
P
A
R
T
E
M
E
N
T
C
O
M
M
U
N
E
(
S
)
P
O
N
C
T
U
E
L
dtails (territoire)
(attention : ici Rgion
diffrent de Conseil
Rgional, etc.)
prparer le lancement
d'oprations spcifiques 1 DR-ADEME membres du GEA 1 Rgion
dresser une liste de
propositions
d'amliorations DR-ADEME 1 DR-ADEME 1 Rgion
rduire les
consommations lies aux
veilles 1
Chambre de Consommation
dAlsace
(http://www.cca.asso.fr/) et
Alter Alsace Energie
(http://www.alteralsace.org/)
tude du potentiel rgional
dconomies dnergie par
lINESTENE suite au SSCE, pilote
par le GEA et finance par
lADEME 1 Rgion
rduire les
consommations des
collectivits emplois-jeunes 1
Alter Alsace Energie
(http://www.alteralsace.org/)
initiative de lADEME
collectivits 1 Rgion/commune
amliorer lefficacit
nergtique des systmes
dair comprim
partenariat ADEME - Electricit
de Strasbourg 1 DR-ADEME entreprises 1 Rgion
ECHELLE TERRITORIALE







Annexe B.2.1 Mthodes et rsultats de l'inventaire des oprations locales de MDE en France
158
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006

EVALUATIO
N
ELEMENTS D'EVALUATION OU DE RESULTATS
G
e
s
t
i
o
n

p
u
b
l
i
q
u
e
R
e
l
a
i
s
I
n
i
t
i
a
t
i
v
e

l
o
c
a
l
e
C
o
n
t
e
x
t
e

l
o
c
a
l
dtails (implication locale)
P
A
S

D
E

R
O
L
E
C
O
N
S
O
M
M
A
T
R
I
C
E
D
I
S
T
R
I
B
U
T
R
I
C
E
A
N
I
M
A
T
R
I
C
E
oui/non Et documents lis disponibles
1 1 1
Suites du travail engag pour la
contribution rgionale au SSCE. Etude
du potentiel rgional de MDEc. 1
1
Relais local des missions nationales de
l'ADEME 1 42 pr-diagnostics dans le btiment et 5 dans l'industrie
1 1
Prise en compte d'un gisement local et
dfinition d'un plan d'actions cible suite
au SSCE 1 Suivi considr comme difficile par les acteurs concerns
1 1 1
Constitution d'un rseau d'acteurs locaux.
Gestion du patrimoine communal. Relais
d'information 1 1
Estimation de la population touche par le rseau (283.000
hab. soit 14% de la population alsacienne)
1 1
Relais local des missions nationales de
l'ADEME 1 valuation ex-ante (9 diagnostics)
NIVEAU d'IMPLICATION LOCALE
ROLE DES
COLLEC-
TIVITES LOCALES



159
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Annexe B.2.2 Exemples de typologies utilises pour les activits de MDE


B.2.2.1 Typologies utilises pour des bases de donnes d'actions ou de programmes


Base de donnes d'Energie-Cits

(cf. www.energie-cites.org, onglet "Expriences de villes")

Les fiches d'tudes de cas d'Energie-Cits sont classes avec une arborescence sur deux ni-
veaux : grands domaines d'actions puis types d'action au sein d'un domaine.

Les quatre grands domaines d'actions utiliss correspondent aux axes de politiques nergti-
ques traits par Energie-Cits :
nergies renouvelables
mobilit urbaine
efficacit nergtique actions intgres
(actions transversales)

Pour le domaine des actions intgres, les types d'action correspondent des outils ou des
approches d'actions intgres. Ces types sont proches d'une classification base sur un critre
d'objectifs de politiques. Les dix types d'action de ce domaine sont :
planification nergtique durable agenda 21 local qualit de l'air
information / sensibilisation / ducation changement climatique gestion des dchets
agences locales de l'nergie co-management municipal urbanisme durable
impact local de la libralisation des marchs nergtiques

Pour le domaine de l'efficacit nergtique, les types d'action correspondent deux critres de
segmentation : soit la cible technique ou rsidentielle, soit l'approche d'intervention. Les
six types d'action ainsi dfinis sont :
types d'action correspondant un critre de cible technique ou sectorielle
btiments et quipements municipaux clairage public habitat
types d'action correspondant un critre d'approche d'intervention
relations contractuelles public-priv matrise de la demande services nergtiques

Par ailleurs, trois autres entres peuvent tre utilises pour rechercher une tude de cas : par
ville, par pays et/ou par recueil de bonnes pratiques.

Energie-Cits ralise rgulirement des recueils de bonnes pratiques, notamment pour
l'ADEME. Cette dernire entre par recueil y fait rfrence, et correspond de fait une entre
par grandes problmatiques (qui se recoupent le plus souvent avec les types d'actions dfinis
dans l'arborescence gnrale). Elles sont classes par anne, ce qui permet en outre de suivre
l'volution des questionnements.

Il faut noter que pour toutes les entres, les choix sont prdfinis. Ce qui permet d'un ct de
guider et faciliter la recherche, mais qui d'un autre ct limite les possibilits de recherche aux
entres prdfinies.

La prsentation des fiches suit une forme assez gnrale, sans tre trop stricte sur les dtails
fournis. Les grandes parties d'une fiche sont le plus souvent les aspects gnraux (courte pr-
Annexe B.2.2 Exemples de typologies utilises pour les activits de MDE
160
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
sentation de la ville concerne), le contexte (politiques gnrales menes par la ville), une
description des actions tudies (avec un niveau de dtail variable), une rubrique "valuation
et/ou perspectives" (qui donne en gnral quelques lments de rsultats assez grossiers, des
lments des budgets engags et des informations sur les ventuelles suites du projet), et une
rubrique "pour aller plus loin", avec les coordonnes d'un contact "local" pour la fiche.

Les fiches rentrent rarement dans les dtails techniques des oprations, mais permettent
d'avoir un bon aperu des actions ralises. Le contact fourni doit permettre d'obtenir de plus
amples informations si le lecteur est intress.


La base de donnes amricaine DEEP (Database for the
Energy Efficiency Programs)

(cf. http://www.aceee.org/new/eedb.htm)

Cette base de donne est gre par l'ACEEE (American Council for an Energy Efficient
Economy) pour le US-DOE (Department Of Energy, service EIA Energy Information
Administration).

Elle propose une fiche synthtique des programmes d'efficacit nergtique financs par les
mcanismes de compensations publiques (par ex. taxe sur l'lectricit) mis en place dans 20
Etats des USA.

La base est structure gographiquement (par Etat, puis par entits administratives au sein de
chaque Etat). Chaque programme est par ailleurs associ deux codes
270
qui correspondent sa
cible (un code pour la cible sectorielle et un pour la cible d'usage final).

La cible sectorielle est dfinie partir d'une arborescence sur trois niveaux : grands secteurs
(niveau 1) puis secteurs spcifiques (niveau 2) puis instrument d'intervention principal.

Secteur : Instrument d'intervention :
Niveau 1 : Niveau 2 : Audit
Gnral Installation directe
Bas salaires Weatherization Rsidentiel
multifamilial Rabais (rebate)
Gnral Remise (rate discount)
Petits commerces Financement
Ecoles Turn-in (appareils)
Gouvernement / public Construction (neuf)
Non lucratif Education
Tertiaire
Agriculture Economies partages
Industrie Offre standard
(pour chaque niveau 2 sectoriel, on retrouve la mme liste d'instruments d'interven-
tion)
Tableau 40 - arborescence sectorielle dans DEEP


270
cf. http://www.aceee.org/new/eedbcode.pdf
Annexe B.2.2 Exemples de typologies utilises pour les activits de MDE
161
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
La cible d'usage final suit une arborescence deux niveaux : grands secteurs puis type d'usage
final.

Secteur Usage final Secteur Usage final
clairage Eclairage
Climatisation HVAC
Chauffage Cuisson
Infiltration / Conduites ECS
Action globale (tous usages) Lavage (vaisselle)
Lavage / schage (linge) Rfrigration
Eau Chaude Sanitaire Moteurs (ASD)
Lave-vaisselle Btiment (parois)
Rfrigration Btiment (contrle)
Isolation / fentre Btiment (complet)
Rsidentiel
Ensemble du logement
Tertiaire
Action globale

Eclairage
HVAC / pompe chaleur
Rfrigration
Moteur (ASD)
Air comprim
Process industriels
Usage spcial
Industrie
Action globale

Tableau 41 - arborescence des usages finals dans DEEP

Les programmes sont ensuite prsents dans un tableau de la forme suivante :

Programme Description du programme
Site web du programme
Responsable du
programme (et
site web)
Code du programme (secteur/approche)
Secteur cible (niveau 1)
Secteur cible (niveau 2)
Approche
Code usage final cible
Usage final cible
Financement annuel
Dure

Contact

Tableau 42 - format de prsentation des programmes dans DEEP
Pour plus d'informations, les personnes intresses peuvent se reporter au site web du pro-
gramme et/ou contacter son responsable.


La base de donnes INDEEP ((International Database
for the Energy Efficiency Programs)

Annexe B.2.2 Exemples de typologies utilises pour les activits de MDE
162
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
(cf. dsm.iea.org/INDEEP )

Cette base de donnes a t constitue dans le cadre de la tche I de l'accord d'implmentation
sur la matrise de la demande en nergie de l'AIE (DSM implementation agreement task I).
Son but est de favoriser les changes d'expriences entre les pays membres de l'AIE et les
comparaisons entre programmes (notamment pour les valuer).

L'objectif initial fix en 1994 de cette tche I tait de dvelopper INDEEP et d'analyser les
donnes ainsi collecter (cf. [Van der Laar, Evert 2004, Vine 1996, Vreuls 1997]). Puis le pro-
jet a t tendu au dveloppement d'un guide d'valuation des impacts des programmes de
DSM et d'efficacit nergtique en lien avec les objectifs de rduction des missions de GES
(Gaz Effet de Serre) fixs par le protocole de Kyoto (cf. section A.3.1.2).

La recherche d'un programme peut se faire selon trois modes : simple, avanc et libre.

Pour le mode "recherche simple", les entres sont les suivantes :
- nom d'un programme
- pays (seuls 4 programmes sont rpertoris pour la France)
- numro DCI (rfrence donne au programme sous la forme de deux initiales pour le pays
et d'un numro, attribu chronologiquement par l'expert relais dans chaque pays)
- code technique (qui correspond aux codes associs aux solutions technologiques perfor-
mantes rpertories)

Pour le mode "recherche avance", les entres correspondent aux principales caractristiques
renseignes pour chaque programme, et classes par groupe d'information :

- groupe I gnral :
- pays (choix parmi les pays ayant dj entr au moins un programme)
- type d'organisme ralisateur : entreprise nergtique / gouvernement central / gou-
vernement rgional / gouvernement local / organisation locale / autre
- nom du programme (entre libre)
- avancement du programme : pilote (dmonstration) / complt au niveau national /
complt au niveau rgional / en phase finale
- avancement de l'valuation : termine / en cours / planifie
- en cours / termin

- groupe II en relation l'nergie :
- objectifs nergtiques : efficacit nergtique / optimisation de la courbe de charge
/ substitution de combustible
- sources nergtiques touches : lectricit / gaz / fioul / rseau de chaleur
- conomies d'nergie (entre libre)

- groupe III en relation au marketing :
- taux de participation (entre libre)

- clients rsidentiels viss : tous / logements individuels ou collectifs + chauffage
individuel ou collectif ou rseau de chaleur + avec ou sans chauffage lectrique /
autre


Annexe B.2.2 Exemples de typologies utilises pour les activits de MDE
163
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
- autres publics viss : propritaires de btiments / dtaillants / grossistes / fabricants
/ constructeurs / promoteurs immobiliers / architectes et ingnieurs / gestionnaires
et administrateurs de btiments / oprateurs d'quipements / ESCo / autre

- instrument de marketing : financements, prts et leasing / installation directe / r-
ductions de facture / achats groups / cadeaux et bonus / coupons / autre

- mthodes de marketing : courriers directs / publicit / audits nergtiques /
contacts personnels / autre

- raisons pour choisir cette activit de MDE : impulsion du rgulateur / lgislation
impts / pressions politiques / image publique / rsultat d'un processus d'valuation
/ rsultat d'autres analyses de la concurrence / dveloppement conomique / oppor-
tunits du march / option de ressource long terme / transformation de march /
qualit de service / fidlisation des clients / rduction des missions de GES / autre

- groupe IV autres
- type de programme : information gnrale / information spcifique / installation
directe d'quipements performants / opration et maintenance / contrle de charges
/ frais de raccordement / ducation formation / R&D / normes de construction et
labellisation / normes pour les quipements et labellisation

La recherche peut aussi tre faite de manire libre (l'utilisateur peut faire une requte partir
de ses propres mots-cls).

Les fiches des programmes reprennent les champs dcrits ci-dessus pour la recherche en mode
avanc, avec pour chaque critre une liste de cases cocher.

Les autres informations sont les suivantes :

- dates du programme (dbut et fin) (entre libre)

- champs d'valuation ex-post du programme : processus du programme / impacts sur la
charge et conomies d'nergie / satisfaction du public vis / tests de rentabilit / efficacit
du marketing / impacts de transformation de march / persistance des actions / autre

- march concern : neuf / existant (remplacement rnovation)

- dtails sur les objectifs (conomies d'nergie / impacts sur la charge / participation / ventes
/ autres)

- donnes utilises pour estimer les conomies d'nergie : donnes techniques standard (en-
gineering data) / donnes de facturation / mesures sur le terrain / courbes de charge du b-
timent / donnes spcifiques aux btiments / courbe de charge de l'usage final / donnes
de ventes / caractristiques des quipements / autres

- participation : nombre de participants, de clients ligibles et taux de participation par an
et/ou en cumul

- cots du programme : cots totaux pour les organisateurs, pour les autres acteurs et en
Annexe B.2.2 Exemples de typologies utilises pour les activits de MDE
164
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
total ; part de ces cots lis aux incitations fournies aux publics viss

- conomies d'nergie (et de combustibles) et rduction de la puissance appele

- ventes additionnelles d'quipements performants

- cots du programme sur son cycle de vie (cots actualiss du MWh ou du kW vit, sur la
base du TRC (Total Resource Cost test) et du Societal Test, cf. Tableau 1) et ratios cots /
bnfices selon les diffrents points de vue (organisateur, participant, non-participant,
contribuable, socit)

- leons tires de cette exprience (entre libre)

Pour plus d'informations, les personnes intresses peuvent se rapporter aux contacts fournis
en dbut de fiche.


B.2.2.2 Typologies dfinies dans les guides de rfrence


Nous reprenons ici les guides de rfrence tels que choisis dans lAnnexe A.3.2 :
- l'IPMVP [DOE 2001]
- le guide MERVC
271
[Vine 1999a]
- le guide europen coordonn par SRCI [SRCI 2001]
- le guide d'valuation californien coordonn par TecMarket Works [2004]
- le guide de l'AIE coordonn par Vreuls [2005a]


Typologie dfinie par l'IPMVP

L'IPMVP ne dfinit pas explicitement de typologie des actions. Implicitement, les diffrentes
options d'valuation proposes font ressortir les critres de segmentation suivants :
- parc concern : neuf / existant
- usage concern : usages thermiques ou non ; charge constante ou variable ; quipements
ou enveloppe des btiments

L'IPMVP se concentre sur les aspects techniques et n'abordent pas les caractristiques du pro-
gramme autres que celle de sa cible technique (usage final et solution performante associe).


Typologie dfinie par le guide MERVC

Le guide MERVC a galement une approche centre sur la cible technique des actions. Les
auteurs dfinissent une typologie base sur le critre de l'usage final cibl (pour la liste faite
de ces usages finals, se reporter [Vine 1999a p.13]).

De mme que l'IPMVP, le guide considre aussi les critres suivants car ils ont une influence
sur les mthodes possibles pour l'valuation :

271
MERVC : Monitoring, Evaluation, Reporting, Verification and Certification
Annexe B.2.2 Exemples de typologies utilises pour les activits de MDE
165
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
- type de charge de l'usage final : constante / variable mais prvisible / variable non prvisi-
ble
- type d'utilisation : programme (dures d'utilisation connues) / alatoire


Typologies utilises par le guide europen

Les auteurs du guide europen dfinissent des grands types de programmes partir d'une ty-
pologie mixte :
- critre d'objectif (transformation de march, report de renforcements de rseau, rduction
des pics de charge, fidlisation des clients)
- critre de l'instrument d'intervention (information cible)
- critre du matre d'uvre (programmes des ESCo)

Par ailleurs, l'annexe C du guide propose un format standard pour prsenter des programmes
d'EE-DSM. Cette annexe reprend aussi deux autres formats de prsentation, celui d'INDEEP
(cf. section B.2.2.1) et le rsultat d'un prcdent projet europen (fiche synthtique en une
page).

Les auteurs soulignent que le niveau de dtails du format de prsentation dpend des objectifs
d'utilisation des futures fiches. Ils distinguent trois objectifs principaux :
- la comparaison et la reproduction de programmes et services (pour lesquelles un niveau de
dtail lev est ncessaire)
- fournir un aperu de ce qui s'est fait (un niveau de dtail bas est suffisant)
- fournir une liste de vrifications (pour la prparation de programmes)

Le guide propose au final deux formats : une fiche dtaille et une fiche synthtique.

La fiche dtaille comprend les rubriques suivantes :
- coordonnes du contact pour le programme
- contexte du programme : type de march (ouvert ou monopole) ; barrires principales ;
autres remarques
- aperu du programme : nom ; type (cf. ci-dessus) ; dates ; nergie vise ; objectifs ; barri-
res identifies que le programme est cens surmonter ; mcanismes de march ou rgle-
mentaires ; acteurs impliqus (et type d'organisme)
- cots et financements du programme (selon les acteurs concerns et en global)
- dtails de la cible du programme : usage final ; solutions performantes et actions ralises
; march ligible ; objectif de participation ; motivation pour les participants
- tapes d'valuation : planning d'valuation ; titre du rapport d'valuation ; objectifs /
champs d'valuation
- avancement de l'valuation et dates
- organisation (acteurs impliqus) et cots de l'valuation
- dtails sur l'valuation : points couverts et techniques ; mthode pour dfinir le rfrentiel
et sources de donnes associes ; indicateurs utiliss et sources de donnes associes ; le-
ons tires (sur le programme et sur son valuation)
- utilisation de l'valuation : mode de diffusion et destinataires
- rsultats de l'valuation : bnfices environnementaux (tCO2/an) ; conomies d'nergies
primaires (TJ/an) ; rduction de la pointe de charge (kW) ; cots vits de production
d'nergie (/an) ; impacts de transformation de march ; rsultats de suivi et vrification ;
autres rsultats ; effets indirects positifs et ngatifs ; confrontation objectifs / rsultats ;
Annexe B.2.2 Exemples de typologies utilises pour les activits de MDE
166
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
utilit de l'valuation ; pertinence des indicateurs utiliss

Parmi ces critres, trois font l'objet d'items prdfinis :

- les objectifs du programme :

objectifs finals
- rduction des importations d'nergie
- rduction des missions polluantes
- diversification de la fourniture nergtique
- maintien ou croissance des profits
- viter des besoins en capacit de production d'nergie
- rduction des prix de l'nergie
- cration d'emplois
- autres

objectifs intermdiaires
- efficacit nergtique des usages finals
- rduction de la pointe de charge
- substitution entre nergies
- fidlisation des clients
- amliorer l'image et les relations publiques de l'entreprise
- dvelopper de nouveaux services
- promouvoir des amliorations technologiques
- autres

- les objectifs / champs d'valuation :
- impacts sur la demande (conomies d'nergie et/ou impacts sur la charge)
- impacts de transformation de march
- analyse de la logique d'intervention et du processus du programme
- autres

- les points couverts et les techniques d'valuation :
- prise en compte des facteurs d'ajustement : effet d'aubaine ; effet d'entrane-
ment ; effet rebond ; effet de persistance (ralisation effective et dans la dure)
- analyse du processus du programme : observations ; enqutes ; entretiens indi-
viduels ; entretiens de groupe ; autre
- analyse du march : statistiques de ventes ; volutions d'indicateurs ; groupe
tmoin ; entretiens ; enqutes ; autres


Typologies utilises par le guide californien

Le guide californien utilise une approche systmatique, et non pas par type de programme.
Son approche est dfinie partir des champs que doit couvrir l'valuation :
- impacts finals (conomies d'nergie, etc.)
- impacts sur le march
- impacts en termes d'information / sensibilisation
- impacts non nergtiques (activits conomiques, etc.)
- analyse du processus et de la logique d'intervention
Annexe B.2.2 Exemples de typologies utilises pour les activits de MDE
167
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
- analyse conomique

Par ailleurs, l'annexe C du guide fournit des conseils pour prparer une valuation [TecMarket
Works 2004 pp.465-487]. Ces conseils sont structurs en suivant un plan qui pourrait tre un
plan de rapport d'valuation, et qui renseigne un certain nombre de critres :
- type de programme : taille de programme ; stratgies ; segments et type de march ; usage
final et public vis
- objectifs d'valuation
- mthodes pour l'valuation des impacts
- critres d'chantillonnage
- donnes utilises

Voici les modalits proposes pour les critres qui sont dtaills :

- stratgies de programme : audits ; codes et normes ; opration et maintenance ; aide la
conception ; installation directe ; ducation formation information ; aide au finance-
ment ; transformation de march ; remises sur mesure ; remises standardises ; contrat de
performance ; programmes amont ; autre

- segments de march : agricole ; tertiaire ; industriel ; rsidentiel ; transversal

- type de march : neuf ; existant

- usage final : appareils lectromnager ; global ; enveloppe des btiments ; cuisine ; HVAC
; clairage ; moteurs ; procds ; rfrigration ; ECS ; pompage et traitement de l'eau ; au-
tre

- objectifs d'valuation : conomies d'nergie, rduction de la charge, rentabilit, analyse
des volutions du march amont, retour et recommandations pour les responsables du
programme, indicateurs d'efficacit rentabilit et analyse de la logique d'intervention,
niveau global de performance et facteurs de succs du programme, dcision sur la com-
pensation et le paiement final du programme


Typologie utilise par le guide de lAIE

Dans le guide de lAIE, les grands types de programme sont dfinis partir du critre
dinstrument d'intervention (avec une arborescence en deux niveaux) :
- les mesures rglementaires :
- codes du btiment (rglements thermiques)
- standards de performance minimum pour les quipements consommant de
lnergie
- les programmes d'information :
- information gnrale
- labellisation, tiquette nergie
- centres dinformation
- audits nergtiques
- ducation et formation
- dmonstration
- donner lexemple
Annexe B.2.2 Exemples de typologies utilises pour les activits de MDE
168
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
- les programmes d'incitations financires :
- promotions (remises)
- taxes cibles, crdits dimpts, exemption de taxes
- garanties de financement
- financement par une tirce partie
- prts taux rduits
- achats groups
- subventions
- garantie de dbouchs par commandes groupes (technology procurement)
- systme dchanges de certificats
- les accords volontaires :
- dans le secteur industriel
- pour les compagnies nergtiques (production, transport, distribution)
- dans le secteur tertiaire (public et/ou priv)
- les programmes combins (qui utilisent plusieurs des quatre types de programmes ci-
dessus)

Les auteurs donnent de plus une dfinition de chacun des instruments lists [Vreuls 2005a
pp.16-19].


B.2.2.3 Typologies dfinies dans dautres publications


Parmi les trs nombreuses publications sur les activits de MDE, nous en avons slectionn
deux du fait que leurs dmarches d'analyses taient les plus proches de celle que nous avons
utilis pour analyser l'inventaire des oprations locales en France.


Typologie pour l'analyse comparative de programmes
d'conomies d'nergie de diffrents pays

Joerges et Mller [1983] prsentent le travail d'une quipe de scientifiques de huit pays visant
comparer les programmes de ces pays dans le but de mieux comprendre comment assurer
l'efficacit de programmes d'conomies d'nergie dans le secteur rsidentiel. Cette tude est
particulirement intressante par rapport notre thse car elle mettait l'accent sur l'organisa-
tion du programme entre le niveau central (national) et le niveau local.

Afin de coordonner et de pouvoir comparer le travail de ces huit quipes, la premire tape fut
de dfinir une grille d'analyse.

Cette grille repose sur une reprsentation schmatique de la logique gnrale d'interven-
tion des programmes et des interactions entre les acteurs du programme et le public vis, et
sur la dfinition d'une typologie des actions.

Les types de programme sont d'abord dfinis partir de leur cible technique, en croisant le
critre d'usage final avec celui de la solution performante associe.

- usages finals : chauffage et ECS, appareils domestiques, transport, comportement d'achats

Annexe B.2.2 Exemples de typologies utilises pour les activits de MDE
169
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
- solutions performantes : amlioration des performances nergtiques, substitution entre
nergies, bonnes pratiques (meilleure utilisation), changement de modes de vie.

Ce croisement de l'usage final et de la solution performante, associ au critre du public vis,
permet en outre aux auteurs de caractriser les objectifs et les rsultats attendus des pro-
grammes.

Pour complter l'analyse de la logique d'intervention, les experts devaient aussi tudis quels
taient les acteurs impliqus, leur degr d'implication, leurs interactions et l'organisation
des programme (niveau de (d)centralisation).

- types de matre d'ouvrage : agences publiques, entreprises, organisations de consomma-
teurs, associations environnementales, organismes sociaux

- chelle du programme : central (national) ou local

Les auteurs dfinissaient par ailleurs la stratgie du programme comme une combinaison
des instruments d'intervention utiliss et du contexte d'intervention.

- instruments d'intervention (arborescence deux niveaux) :
- instruments de communication : information ; persuasion ; participation
- instruments financiers : tarification ; taxe ; incitations (subventions, promo-
tions, prts taux rduits, crdits d'impts, exemption de taxes, bonus)
- instruments rglementaires : standards, allocation (quotas, restrictions), ror-
ganisation (politiques d'urbanisme)

- contexte d'intervention (dfini partir de deux sous-critres avec chacun certain nombre
d'lments analyser) :
- contexte structurel (4 lments) : technique, conomique, lgal et sociocultu-
rel
- contexte personnel (4 lments) : niveau de sensibilisation aux questions lies
l'nergie, motivations aux conomies (et/ou environnementales), connaissan-
ces et comptences pour agir, autres aspects

Pour l'tude du processus et de la ralisation des programmes (i.e. comment la stratgie du
programme tait mise en uvre), les experts devaient notamment tudier les types de matres
d'uvre et le degr d'implication du public vis.


Typologie pour l'analyse d'oprations locales au
Royaume-Uni

Sheldrick et Macgill [1988] ont analys cinq oprations locales de MDE au Royaume-Uni (
Glasgow, Newcastle, Lewisham, Hackney et Cardiff) sous quatre angles de recherche :
- mieux connatre la diversit des oprations locales
- valuer leurs rsultats en termes de contribution d'une part aux politiques nationales d'effi-
cacit nergtique, et d'autre part l'amlioration de l'conomie locale
- dissminer des retours d'exprience pour favoriser le dveloppement de nouvelles actions
- mieux tudier les relations entre les considrations lies l'nergie et celles de politiques
sociales et conomiques
Annexe B.2.2 Exemples de typologies utilises pour les activits de MDE
170
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006

Tout comme Joerges et Mller [1983], les auteurs commencent par dcrire la grille d'analyse
qu'ils ont utilis. Ils soulignent ce sujet que leurs recherches sur les grilles d'analyse existan-
tes montrent qu'il n'existe pas de grille d'analyse "universelle", car la structure de celle-ci d-
pend des objectifs de l'tude.

Ils se sont donc bass sur des grilles d'analyse existantes (dont celle de [Joerges 1983]) en les
adaptant leurs propres besoins d'analyses.

Leur grille est structure autour de trois composantes principales : identification de l'orienta-
tion des initiatives, description de leur structure institutionnelle et examen des objectifs.


L'orientation des initiatives est tudie au travers de six critres :

- type gnral d'action : actions sur l'offre ou actions sur la demande

- nergies vises : toutes ; charbon ; gaz ; ptrole ; lectricit ; nuclaire ; EnR

- chelle de l'opration : internationale ; nationale ; rgionale ; locale ; individuelle

- secteur cible : rsidentiel ; industriel ; tertiaire priv ; tertiaire public ; transport

- usage final vis : chauffage ; ECS ; clairage ; force motrice ; transport ; procds ther-
miques ; cognration

- approche (instrument d'intervention) : information ; conseil ; ducation ; marketing ; inci-
tations financires ; intervention ; rglementation ; tarification


Le contexte institutionnel est tudi au travers de trois critres :

- types d'acteurs impliqus : organismes publics (nationaux ou locaux) ; industries ;
commerces ; utilits ; associations (nationales ou locales) ; syndicats, tablissements aca-
dmiques ; autres

- type de financement : pas de modalit prdfinie, mais des lments d'analyse (entre au-
tres le degr de libert des matres d'uvre par rapport leurs financeurs et la flexibilit
du financement)

- implication du public vis (trois niveaux) : passive ; consultative ; participative

L'examen des objectifs est ralis par l'analyse de comment est conceptualise l'nergie par
les acteurs concerns. Les auteurs reprennent pour ce faire les critres dfinis par Stern et
Aronson :

- commodit : l'nergie correspond un ensemble d'objets de l'conomie qui peuvent tre
vendus et achets, et soumis aux lois du march

- ncessit sociale : l'nergie est un prrequis pour la vie humaine (chauffage, etc.)
Annexe B.2.2 Exemples de typologies utilises pour les activits de MDE
171
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006

- ressource cologique : l'nergie est lie l'utilisation de ressources puisables et l'mis-
sion de polluants

- enjeux stratgiques : enjeux de scurit d'approvisionnement, dpendance nergtique

Pour chacun de ces critres, les auteurs pointent les disciplines auxquelles leur analyse fait
appel, les indicateurs et units utiliser pour valuer les rsultats associs et leurs "avocats"
(les acteurs qui militent en leur faveur).




172
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Annexe B.2.3 Principaux rsultats des analyses de linventaire


Nous rsumons ici les principaux rsultats des analyses de l'inventaire. Pour plus de dtails se
reporter [Broc 2005b].


B.2.3.1 Modalits les plus frquentes par critre


Une premire analyse critre par critre permet d'tudier pour chacun les modalits les plus
frquentes :

- instrument d'intervention : beaucoup d'oprations de conseil (audit) et de sensibilisation
(information) et peu d'incitation financire directe

- usage final vis : plus de la moiti des oprations ne ciblent pas un usage en particulier
(ce qui rend l'valuation plus difficile) ; parmi les oprations avec une cible prcise, les
usages les plus viss sont l'clairage et le chauffage (i.e. systme de chauffage et enve-
loppe des btiments)

- secteur concern : la majorit des oprations cible un secteur en gnral, sans viser un
public particulier au sein de ce secteur. 14% des oprations recenses sont transversales
(i.e. concernent plusieurs secteurs)

- cadre de financement : 70% des oprations entrent dans un des quatre cadres suivants :
CPER, accords EDF-ADEME, accord EDF-ADEME-Conseil Rgional, aides de
l'ADEME (ce qui confirme l'importance d'EDF, de l'ADEME et du Conseil Rgional dans
les politiques locales d'efficacit nergtique)

- niveau d'implication locale : 75% des oprations recenses correspondent des initiati-
ves locales, soit un niveau important d'implication locale

- rle des collectivits : les collectivits sont impliques dans 75% des oprations recen-
ses, avec une prdominance du rle d'incitatrice animatrice (voir aussi la section
II.2.2.4)


B.2.3.2 Analyses croises entre critres


Une analyse base sur des tests statistiques d'indpendance a permis d'tudier les liens entre
les diffrents critres. Les rsultats de cette analyse sont rsums dans le Tableau 43 ci-
dessous.

: pas de lien observ + : liens possibles
++ : quelques liens observs +++ : forte dpendance

Usage final Secteur Cadre de
financement
Zone
concerne
Implication
locale
Rle des
collectivits
instrument ++ +++ +++
Annexe B.2.3 Principaux rsultats des analyses de linventaire
173
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Usage final ++
Secteur ++
Cadre de financement +++
Zone concerne ++ +
Implication locale +++
Tableau 43 - analyse croise des critres de segmentation

Les principales conclusions de ces analyses croises sont les suivantes :

- les activits d'incitation sont le plus souvent cibles sur un usage final donn

- le choix du secteur cible semble influencer le choix de l'instrument d'intervention

- quand un public particulier est vis au sein d'un secteur, les actions sont surtout des
audits ou des formations et ne ciblent pas un usage final particulier

- le cadre de financement semble influencer le niveau d'implication locale

- mieux la zone concerne est dfinie, et plus l'implication locale est forte. Rcipro-
quement cette implication ancre les actions sur un territoire, et mne une meilleure
prise en compte du contexte local.

- le niveau d'implication locale semble influencer le choix de l'instrument d'interven-
tion


B.2.3.3 Analyses centres sur l'tude de la dimension locale des actions


Le travail sur les critres de segmentation et les analyses de l'inventaire ont permis de mieux
dfinir ce qu'tait la dimension locale des actions.

Nous l'avons apprhende sous deux angles :
- celui de l'organisation de l'opration (critres du cadre de financement et critre des
acteurs impliqus)
- celui de l'implication et/ou investissement (au sens moral et non financier) local dans les
actions


Dtails des analyses par critres


- cadres de financement et acteurs impliqus :

CPER accords EDF-ADEME accords EDF-ADEME-Conseil Regional ADEME FACE autres
36 22 39 49 13 54
Tableau 44 - rpartition des oprations rpertories selon les cadres de financement
70% des actions recenses ont t ralises dans un des quatre cadres principaux identifis. Ce
rsultat est prendre avec prcaution, puisque les trois acteurs (DR-ADEME, Conseil Rgio-
Annexe B.2.3 Principaux rsultats des analyses de linventaire
174
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
nal
272
et DR-EDF) concerns taient aussi nos principales sources d'information
273
. Dans cer-
taines rgions d'autres acteurs se dmarquaient, avec des cadres de financement au cas par
cas.

La prdominance des quatre cadres principaux dans notre inventaire est confirme par le d-
tails des 54 "autres", dont 19 sont en fait des dclinaisons particulires de ces quatre cadres.

Parmi les 35 oprations restantes (du groupe "autres"), les cadres les plus frquents sont ceux
spcifiques la rduction de la prcarit nergtique, des cadres lis aux Agences Locales de
l'Energie ou impliquant les Conseils Gnraux et/ou des groupements de communes.

Il ressort de ces analyses qu'au niveau local, les cadres de financement sont aussi le plus sou-
vent des cadres partenariaux. Une des spcificits des oprations locales est donc qu'elles
sont un lieu d'interactions entre de nombreux acteurs. Dans ce contexte, il semble que
l'existence de cadres bien dfinis pour mettre en uvre ces interactions favorise l'mer-
gence de projets.

Pour de futures analyses, il serait intressant de regarder plus en dtails quels sont acteurs
impliqus financirement dans les actions. Par ailleurs, il nous est aussi apparu que les r-
seaux d'acteurs (comme Energie-Cits, AMORCE, etc., cf. section II.1.3.3) taient aussi un
vecteur important de dynamiques locales, et reprsentent une autre spcificit des oprations
locales.


- niveau d'implication locale :

gestion publique relais initiative locale contexte local
78 83 160 89
Tableau 45 - rpartition des oprations rpertories selon le niveau d'implication locale

75% des oprations sont des initiatives locales, ce qui correspond un niveau important
d'implication locale. Il est difficile de qualifier l'importance de ces initiatives locales, car
nous ne disposons ni d'lments quantitatifs suffisants leur sujet, ni de rfrentiel ou d'l-
ments de comparaisons.

Toutefois dans l'absolu, cela nous permet de montrer que les analyses du contexte sur les pos-
sibilits d'oprations locales sont renforces par notre inventaire : non seulement l'chelon
local prend de plus en plus d'importance dans les politiques dfinies, mais sur le terrain une
activit non ngligeable s'est dj dveloppe depuis le dbut des annes 1980, et aprs des
hauts et des bas durant les annes 1980, cette activit connat aujourd'hui un essor important.

En outre, il est intressant de noter que toutes les oprations qui prennent en compte le
contexte local sont aussi des initiatives locales. Ce qui signifie que le contexte local n'est pas

272
Par Conseil Rgional, nous entendons aussi ici l'Agence Rgionale de l'Energie quand elle existe.
273
Notre mthode de recherche nous permettait de trouver les autres sources d'information qui pouvaient tre
importantes localement (par les liens sur les sites des DR-ADEME et des Conseils Rgionaux, par la recherche
par mots-cls avec google, puis par les contacts avec les chargs de mission des DR-ADEME). Il nous semble
donc que le biais li nos sources d'information est trs limit, et que les ventuelles oprations non rpertories
peuvent tre considres comme marginales.
Annexe B.2.3 Principaux rsultats des analyses de linventaire
175
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
rellement pris en compte sans une implication relle des acteurs locaux.


- rle des collectivits : (voir aussi la section II.2.2.4)

pas de rle consommatrice distributrice incitatrice / animatrice
55 68 17 105
Tableau 46 - rpartition des oprations rpertories selon les rles des collectivits

Le premier constat est l'importance de l'implication des collectivits locales dans les opra-
tions rpertories (les collectivits sont prsentes dans 75% des oprations).

Il ressort aussi nettement que le rle de distributrice est celui le moins utilis, alors que les
communes sont les autorits concdantes du rseau de distribution. Cela vient nuancer les
analyses du contexte ce sujet (cf. section II.1.3.2). Mme si qualitativement nous pouvons
constater un nouvel essor de ce type d'oprations, notamment sous l'impulsion de syndicats
d'nergie dynamiques comme celui de la Loire ou ceux de Bourgogne.

L'importance des oprations pour lesquelles les collectivits sont incitatrices ou animatrices
montre que leur dynamisme se porte plus sur ces aspects, mme si elles n'y ont pas de respon-
sabilits directes. Bouvier [Bouvier 2005 p.445] souligne que, de fait pour les lus, les actions
d'incitation et d'animation sont plus mdiatiques, ce qui serait un facteur important d'expli-
cation de la rpartition effective des rles des collectivits.

Ce mme argument pourrait par ailleurs tre repris pour analyser la priorit donne dans les
faits aux EnR sur les actions de MDE (mme si le contraire est parfois affich en thorie).

Une autre spcificit des oprations locales est ainsi lie la proximit entre les acteurs
responsables des oprations et les publics concerns. Cette proximit est souvent avance
comme un des arguments pour montrer que l'chelon local est pertinent pour mener des ac-
tions envers les cibles diffuses (par ex. dans le rsidentiel). Ce point peut aussi expliquer les
motivations des acteurs, en particulier concernant les lus (mme si Bouvier [Bouvier 2005
pp.234-236] reconnat la lumire des lections rgionales de 2004 que les questions nerg-
tiques ne sont pas encore un vritable enjeu pour les lections locales).


Dtails des analyses par critres


- liens entre le cadre de financement et le niveau d'implication locale

Lorsque le cadre de financement est dfini nationalement (modalit "ADEME seule"), le ni-
veau d'implication locale reste faible, avec dans 71% des cas un simple niveau de "relais". A
l'inverse, quand le cadre est ngoci localement et implique les trois acteurs principaux (DR-
ADEME, Conseil Rgional et EDF), le niveau d'implication local est lev avec 80% d'opra-
tions prenant en compte le contexte local.

Il semble donc important que les acteurs locaux participent aux ngociations du cadre de
financement pour renforcer leur implication.
Annexe B.2.3 Principaux rsultats des analyses de linventaire
176
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006


- liens entre le cadre de financement et le rle des collectivits

Hormis pour la combinaison ["FAC" "collectivit distributrice"], les cadres de financement
ne sont pas conus spcifiquement pour un rle particulier des collectivits. De mme les col-
lectivits ne sont pas guides par les cadres de financement pour leur choix d'application de
leurs comptences.


- liens entre l'chelle territoriale, rle des collectivits et niveau d'implication locale

Les chelles territoriales bien dfinies (modalits "dpartements" et "communes") sont asso-
cies des niveaux levs d'implication locale (respectivement 85 et 90% d'initiatives loca-
les). De mme l'implication des collectivits (modalits "animatrice" et distributrice") assure
la dimension locale des oprations (respectivement 98 et 100% d'initiatives locales, et 67 et
100% de prise en compte du contexte local).

Ainsi la dimension locale effective d'une opration se manifeste le plus souvent travers
l'implication des acteurs locaux et l'ancrage de l'action sur un territoire donn.


- lien entre le rle des collectivits, le niveau d'implication locale et l'instrument d'in-
tervention

Des combinaisons ressortent du croisement des modalits de ces critres : ["gestion publique"
et/ou "relais" avec "conseil"], ["initiative locale" et/ou "contexte local" avec "sensibilisation"
et/ou "incitation"].

La premire combinaison s'explique par le fait que les actions de conseil sont au cur des
axes d'intervention de l'ADEME (notamment sous la forme d'aide la dcision).

Pour la seconde, les oprations de sensibilisation et d'incitation sont souvent menes dans un
cadre partenarial, ce qui explique l'implication locale plus forte.


Par ailleurs, l'analyse croise du critre de date avec les autres critres permet de dgager des
tendances rcentes :

- lgre tendance au dveloppement d'actions transversales (pour les secteurs), qui de-
vrait se confirmer avec les OPATB et les contrats ATEnEE

- augmentation rcente et importante du niveau d'implication locale

- croissance des actions impliquant les collectivits en tant qu'incitatrice, et dans une
moindre mesure en tant que distributrice



177
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Annexes B.3 Complments l'tude des pratiques d'valuation au
niveau local


Nous analysons dans un premier temps les approches d'valuation des activits de MDE au
niveau national (Annexe B.3.1). Nous tudions comment est aborde l'valuation, en particu-
lier du fait de l'importance croissante de l'valuation des politiques publiques et du trans-
fert de missions publiques au secteur priv, en dtaillant les deux dispositifs qui en ressor-
tent : le nouveau dispositif d'valuation de l'ADEME et les certificats d'conomies d'nergie.

Puis nous prsentons les tudes de cas que nous avons ralises sur les retours d'exprien-
ces d'oprations locales de MDE pour lesquelles nous disposions de suffisamment d'infor-
mations (Annexe B.3.2). Pour en fournir un exemple, nous dtaillons celle de l'opration de
MDE rurale du canton de Lanmeur (Annexe B.3.3). Nous dcrivons en outre une autre tude
de cas, un peu particulire, sur le lien entre les campagnes de mesures des consommations
d'nergie et les mthodes d'valuation (Annexe B.3.4).

Nous compltons ensuite notre revue des pratiques de l'valuation des activits de MDE au
niveau local en analysant les autres exemples marquants de MDE locale en France : la ges-
tion de l'nergie des patrimoines des collectivits locales, la gestion de l'nergie dans les parcs
de logements sociaux et les oprations de MDE dans les zones insulaires (Annexe B.3.5).

En outre, l' prsente une courte synthse d'expriences europennes d'valuation d'activits de
MDE locale (Annexe B.3.6).

Enfin, nous avons souhait proposer une synthse de la thse de Franck Trouslot sur l'valua-
tion des activits de l'ADEME Poitou-Charentes dans les annes 1980, car elle constitue une
analyse trs intressante de l'valuation des politiques publiques au niveau local (Annexe
B.3.7).



178
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Annexe B.3.1 Approches franaises de l'valuation des activits de MDE au
niveau national


B.3.1.1 Limportance croissante de lvaluation dans le pilotage des politiques publiques


Un mouvement issu de la rationalisation des budgets
publics

Trouslot [1995 pp.23-25] prsente un bref rappel historique de l'mergence des pratiques
d'valuation des politiques publiques aux Etats-Unis :
- General Accounting Office cre en 1921
- bases de la thorie du modle "exprimental" ou "classique" dfinies par Campbel et
Stanley en 1966
274

- modle ensuite critiqu partir du milieu des annes 1970 devant le constat que les va-
luations ne servent pas aux prises de dcision
- dveloppement dans les annes 1980 d'une nouvelle approche dite pluraliste avec
pour but de placer l'valuation au cur mme des processus de rflexion et de prise de
dcision.

Lerond et al. [2003 pp.7] prsentent aussi l'valuation environnementale comme l'une des
rsultantes d'un processus plus gnral de rationalisation des dcisions notamment des dci-
sions publiques, n au dbut du XX
me
sicle. Ce mouvement, d'origine essentiellement amri-
caine, () sera diffus en France sous le nom de Rationalisation des choix budgtaires
(RCB).

Le dcret du 22 janvier 1990 () constitue le premier texte rglementaire dfinissant l'va-
luation sur un plan institutionnel et organisant un dispositif national d'valuation. Ainsi ce
dcret institue le Comit InterMinistriel de l'Evaluation (CIME), charg de dvelopper et
de coordonner les initiatives gouvernementales en matire d'valuation des politiques publi-
ques, le Fonds national de dveloppement de l'valuation qui dpend directement du Premier
ministre, et enfin le Conseil scientifique de l'valuation (CSE). [Lerond 2003 pp.11]

C'est dans le cadre du CIME que sera men la premire valuation de grande ampleur des
politiques de matrise de l'nergie [Martin 1998].

Ces dispositifs d'valuation viennent complter les procdures d'audit, comme celui ralis sur
la gestion de l'ADEME par l'Inspection Gnrale des Finances en 1999-2000 [De Gouyon
2000].


La difficile appropriation du processus d'valuation par
les acteurs concerns


274
(Campbell D.T. and Stanley J.C. 1966, Experimental and quasi-experimental design for research, Chicago,
Rand Mc Nally) dans ce cadre, l'valuation des politiques publiques doit mettre en vidence une relation cau-
sale entre le traitement (l'action publique) et les effets mesurables sur un groupe de "personnes" (ou sur la situa-
tion sur laquelle on veut agir [1995 pp.24]
Annexe B.3.1 Approches franaises de l'valuation des activits de MDE au niveau national
179
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Les bilans tirs de plus de 10 ans d'valuation institutionnalise en France mettent en vi-
dence la fois les apports de l'valuation et ses limites. D'un ct, les valuations menes en
amont comme en aval des dcisions politico-administratives ont permis un meilleur appren-
tissage, de la part des administrations concernes, de la complexit des dispositifs dont elles
taient des acteurs. D'un autre ct, les valuations menes ont permis d'accompagner des
changements organisationnels. Enfin, la dimension cognitive de l'valuation constitue un
apport important de cet exercice, conduisant une meilleure connaissance des problmes
publics rsoudre. Toutefois de nombreuses limites ont t mises en vidence. Elles dcou-
lent notamment de la faible utilisation des rsultats des valuations dans les processus de
dcision politique. L'valuation souffre d'un dficit d'appropriation au regard de l'intrt
port son organisation. Elles sont lies galement la trop grande formalisation des proc-
dures, conduisant porter plus d'attention aux mthodes qu'aux rsultats [Lerond 2003
pp.13-14].

Dans le domaine de la MDE, les valuations des actions de MDE sont restes relativement
ponctuelles dans les annes 1990 (et sont loin d'tre systmatiques encore aujourd'hui). De
plus il est difficile de savoir si les recommandations faites l'issue du principal travail d'va-
luation dans ce domaine en 1998 [Martin 1998] ont rellement t suivies d'effet.

Ce rapport figure bien dans les rfrences bibliographiques du PNLCC
275
dans lequel il est
mentionn page 34 qu'il a t un des documents de base utiliss pour tudier les nouvelles
mesures possibles. Cependant si certaines recommandations semblent avoir t suivies
d'effet (renforcement du dispositif de suivi et d'valuation des programmes de l'ADEME,
maintien et ciblage des crdits d'impts et des aides la dcision, cration des Espaces Info
Energie), deux des principales conclusions soulignes en 1998 sont toujours valables : le
budget de l'ADEME continue de subir d'importantes variations (fortes baisses depuis 2002)
et il n'y a pas pour l'instant de rquilibrage rel entre les politiques publiques d'investisse-
ments sur l'offre et celles sur la demande (voir l'analyse correspondante dans la section
B.1.2.4 ci-dessus).

Au niveau de la place de l'valuation des politiques publiques, deux dispositions gnrales
rcentes confirment son importance :
- la rforme budgtaire initie par la nouvelle LOLF (Loi Organique relative aux Lois de
Finance) applicable au 1
er
janvier 2006 qui amne passer d'une logique de moyens une
logique de performance (dans ce cadre une valuation systmatique des programmes sur
l'nergie et les changements climatiques est prvue par le MEDD [Vreuls 2005b
pp.104])
- la fin du Commissariat Gnral au Plan remplac en mars 2006 par le Centre d'analyse
stratgique dont les trois fonctions principales sont la veille, l'expertise et l'aide la dci-
sion pour la mise en uvre et la conduite des politiques publiques


B.3.1.2 L'valuation des politiques publiques : de la matrise de l'nergie la lutte contre le
changement climatique


Une tude de rfrence


275
Le PNLCC a par ailleurs lui-mme fait l'objet d'une valuation par le Commissariat Gnral au Plan [Giraud
2002]
Annexe B.3.1 Approches franaises de l'valuation des activits de MDE au niveau national
180
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
La premire valuation de grande ampleur des politiques publiques dans ce domaine est le
travail ralis par l'instance prside par Yves Martin sur la matrise de l'nergie en
France de 1973 1993 [Martin 1998]. Cette valuation tait structure autour de trois appro-
ches :

- une approche conomique globale, base elle-mme sur trois approches :

- une approche technique dtaille dans laquelle il tait possible de mesurer l'effi-
cacit nergtique d'un usage final dtermin (consommation unitaire d'un loge-
ment, d'un vhicule, d'une production industrielle). L'inconvnient de cette m-
thode tait l'impossibilit de tenir compte des effets de substitutions pouvant s'op-
rer entre diffrents usages correspondant un mme service rendu ;

- une approche globale susceptible de suivre la performance nergtique globale de
la socit. Cette approche, fonde sur le calcul des intensits nergtiques pri-
maire et/ou finale, permettait de distinguer, d'une part les volutions des intensits
nergtiques rsultant des effets de structure, d'autre part les volutions d'intensit
nergtique considres comme d'origine technique.

- une approche conomtrique mettait en vidence les diffrents facteurs explicatifs
de l'volution des consommations franaises d'nergie et calculait les effets induits
par les dpenses publiques de matrise de l'nergie. [Giraud 2002 pp.50-51] Cette
dernire approche est juge fragile par les rapporteurs eux-mmes qui signalent
qu'une telle dmarche ne vise pas tant obtenir des rsultats dfinitifs, non criti-
quables, intangibles qu' essayer de voir quels enseignements on peut tirer de
l'tat de l'art de l'conomtrie des fonctions de production et de commencer btir
une mthodologie susceptible de mieux clairer ces questions lorsque l'information
statistique disponible sur la matrise de l'nergie permettra de raliser des travaux
plus robustes [Martin 1998 pp.78]


- une approche sectorielle (industrie, transport et rsidentiel-tertiaire) qui avait pour but
l'valuation d'une slection d'actions
276
en ciblant l'tude de la mise en uvre, de l'impact
nergtique, de la rentabilit et de la pertinence de ces actions, en se basant sur les infor-
mations disponibles et sur des enqutes auprs des acteurs concerns et des mnages

- une approche thmatique (EnR et rseaux de chaleur), qui sort du champ de notre thse

Le Conseil Scientifique d'Evaluation souligne dans son avis la qualit du travail ralis
277
,
tout en rappelant la fragilit de certains rsultats obtenus du fait des difficults rencontres par
l'instance, notamment pour rcuprer les informations ncessaires. [annexe 2 de Martin 1998]

Les principales conclusions de ce travail sont les suivantes : les travaux effectus par
linstance nont pas permis dtablir un compte dexploitation, en dpenses et recettes, met-

276
choisies sur les critres suivants : importance des consommations d'nergie de la cible vise et ampleur des
gisements d'conomies d'nergie potentiels; volume des dpenses publiques consacrs cette action; actualit de
l'action (i.e. ni trop ancienne pour rcuprer les informations ncessaires, ni trop rcente pour que les effets ne
soient pas encore observables)
277
A noter que la qualit de l'valuation est juge sur les critres suivants : utilit des rsultats, fiabilit des in-
formations produites et rassembles, objectivit des jugements, transparence et lisibilit du rapport
Annexe B.3.1 Approches franaises de l'valuation des activits de MDE au niveau national
181
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
tant en vidence le bnfice (ou le dficit) de cette politique. Dune part en effet, il na pas t
possible didentifier la dpense publique attache cette politique (). Dautre part, nous
navons pu valuer quelle part des conomies ralises tait la consquence effective de la
politique mene et non le rsultat direct de la hausse du prix du ptrole de 1974 1985 ().
Nous avons en revanche pu procder lanalyse des forces et des faiblesses de chacun des
outils utiliss par la politique de matrise de lnergie. Nous avons constat quil subsiste un
champ important dconomies dnergies rentables, malgr le bas prix de lnergie. Nos tra-
vaux nont pas permis de dire si le niveau de laction mene entre 1973 et 1993 tait optimal ;
mais ils mettent en vidence les approches les plus efficaces utiliser si lon veut relancer la
matrise de lnergie. [Martin 1998 pp.7]

En outre les mthodes d'valuation ex-ante employes aujourd'hui l'ADEME empruntent
largement aux travaux de l'instance d'valuation. Ainsi, la plus grande partie des valuations
de l'impact des "aides la dcision" dans l'industrie repose sur des rsultats de cette ins-
tance, alors que ceux-ci avaient t obtenus partir d'un chantillon restreint d'entreprises.
C'est aussi le cas du respect de la nouvelle rglementation thermique dans le btiment ;
l'ADEME retient les rsultats de l'instance, savoir un respect 30 % de la rglementation
dans le logement individuel et 80 % dans le collectif. [Giraud 2002 pp.52]

Toujours sur les mthodes de l'ADEME, le rapport sur les mthodes d'valuation des mesu-
res du PNLCC signalent que pour d'autres mesures [que celles ayant dj fait l'objet d'une
valuation, notamment par l'instance prside par Yves Martin] pour lesquelles il n'y a au-
cune valuation ex-post () les rsultats apparaissent comme de simples estimations, di-
res d'experts, assez fragiles dans la mesure o elles ne peuvent s'appuyer sur des volutions
passes. [Giraud 2002 pp.53]


Une suite travers l'valuation du PNLCC

Ce rapport, intitul Effet de serre : modlisation conomique et dcision publique,
dresse en outre une synthse des problmes mthodologiques d'valuation des impacts des
politiques et mesures [Giraud 2002 pp.56-60] :

- la difficult de sparer les mesures : on ne peut pas isoler l'impact effectif d'une me-
sure faisant partie d'un ensemble ou paquet de mesures qui interagissent entre elles car
les impacts des mesures dans un paquet ne sont pas additifs. En toute rigueur, on ne
peut donc qu'valuer l'impact d'un ensemble ou paquet de mesures ce qui complique
aussi l'analyse cots-bnfices (la difficult d'identifier les impacts individuels effectifs
des mesures rejaillit videmment sur l'analyse du cot de chaque mesure)

- la prise en compte du contexte conomique dont dpend fortement le potentiel des me-
sures envisages

- la ncessit d'une dimension temporelle lie aux dlais de mise en uvre des mesures

- la prise en compte de mesures ngatives est souvent nglige (impacts de la sup-
pression de mesures antrieures)


Le rapport analyse ensuite la mthode utilise par ENERDATA pour valuer les mesures du
Annexe B.3.1 Approches franaises de l'valuation des activits de MDE au niveau national
182
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
PNLCC, base sur l'utilisation du modle MEDEE-ME. Cette mthode consiste traduire
les mesures en hypothses sur l'volution des dterminants techniques et conomiques de la
demande d'nergie sur lesquels elles sont censes agir. Le modle calcule ensuite les
consommations d'nergie et les missions associes, ainsi que les coefficients budgtaires
correspondants
278
. Une comparaison avec un scnario "sans mesure"
279
donne alors l'im-
pact des mesures traduites. Enfin des ajustements sont raliss pour tenir compte des ven-
tuels effets rebond ou prix lorsque les coefficients budgtaires sortent d'une marge de varia-
tion fixe a priori. Cela revient borner les impacts attendus et faire l'hypothse que lors-
que les impacts des mesures sont trop importants ou trop faibles, l'effet rebond ou prix devient
alors prpondrant.

Cette hypothse est critique par le rapport qui souligne qu'il faut reconnatre que la m-
thode MEDEE-ME manque encore, tant de fondements thoriques que de validations empi-
riques solides [Giraud 2002 pp.76], et reste donc considre comme une "bote noire"
280
.
Mais le rapport constate que les modles qui fondent la mesure des impacts sur l'analyse
conomtrique des consommations passes et l'usage d'lasticits-prix rencontrent en vrit
le mme type de difficult, de mme pour les modles macro-conomiques qui laissent
beaucoup de place l'arbitraire sur cette mme question du choix des lasticits-prix et des
lasticits de substitutions.

Par ailleurs, la mthode MEDEE-EE est applique d'une part pour l'ensemble des mesures
(impact global), et d'autre part pour les mesures prises individuellement. Une allocation de
l'impact global est ensuite faite sur la base de leur contribution respective (ce qui doit
permettre de prendre en compte que la somme des impacts individuels n'est pas gale l'im-
pact global).

Le rapport conclut qu'au stade actuel, il faut donc reconnatre que l'valuation de l'impact
des politiques et mesures du PNLCC est en vrit trs fragile. Cela rend d'autant plus nces-
saire un suivi rgulier et prcis de l'effet rel de paquets de mesures, qui devrait accompa-
gner la rvision priodique du scnario de rfrence qui a t propose. Par ailleurs, il ne
suffit pas de proposer des mesures, encore faut-il s'intresser leur mise en uvre et aux
dlais ncessaires pour que leur impact soit perceptible [Giraud 2002 pp.77].




B.3.1.3 Lvaluation des activits de MDE : des cadres contractuels mais une pratique relle
limite


L'cart entre la thorie et la pratique

Dans la fiche sur la France du rapport de lAIE [Vreuls 2005b pp.99-117], Bruno Lapillonne

278
coefficient budgtaire = rapport entre (dpenses nergtiques) et (consommation prive des mnages) ou
(valeur ajoute des entreprises)
279
bas sur des dires d'experts (qui sont censs mieux prendre en compte les hypothses de croissance et de va-
riation de prix des nergies) et non sur les tendances historiques (qui sont fausses par les phnomnes de satura-
tion (par ex. sur les taux d'quipements et les intensits d'usage))
280
Le rapport critique aussi la non-prise en compte des rtroactions macro-conomiques des mesures et de
leurs impacts.
Annexe B.3.1 Approches franaises de l'valuation des activits de MDE au niveau national
183
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
(ENERDATA) et Didier Bosseboeuf (ADEME) prsentent le dispositif dvaluation des acti-
vits de MDE comme suit :
- des valuations ex-post approfondies ponctuelles selon les besoins identifis par les
Ministres concerns ou par lADEME
- un suivi annuel des statistiques lies lefficacit nergtique par divers indicateurs
valus par lADEME, ENERDATA ou le CEREN, et par une enqute ralise auprs
des mnages par la SOFRES
- un suivi annuel interne lADEME de ces activits (dans le cadre du Contrat de Plan
Etat-ADEME)
- des tudes prospectives (valuations ex-ante) pour simuler limpact de futures mesures

Dans la pratique lvaluation tait trs peu prsente jusquaux annes 1990. L'instance
dvaluation qui a tudi la priode 1973-1993 a soulign l'insuffisance du suivi des affai-
res et de l'valuation de leur impact rel [Martin 1998 pp.45]. Et de fait les traces sur les
programmes raliss cette poque sont peu nombreuses.

Dans les annes 1990, mme si lvaluation prend une place croissante dans les politiques
publiques, son utilisation pour les politiques de matrise de lnergie en cours reste limite,
notamment parce que les budgets qui y sont consacrs ont t fortement rduits. Toutefois un
travail trs important a t men de 1993 1997 la demande du Ministre de lIndustrie
pour faire un bilan des politiques menes de 1973 1993. Si ce rapport est trs riche en ensei-
gnements, les auteurs soulignent les difficults quils ont rencontres, dont certaines taient
lies au fait dintervenir a posteriori et quun manque de mmoire administrative avait
empch de retrouver certaines informations qui auraient t ncessaires.


Mettre fin aux polmiques sur l'efficacit relle des
actions de MDE

Cette tude [Martin 1998] constitue une tape importante dans le dveloppement dune
culture de lvaluation de la matrise de lnergie en France. Jusqualors, de rares valuations
avaient t menes, mais le principal du suivi consistait afficher les budgets engags, le
nombre dactions et leffet dentranement sur linvestissement qui en rsultaient. Des chif-
fres dconomies dnergie taient bien avancs, mais ils venaient pour la plupart soit
destimations ex-ante grossires, soit dextrapolations partir des statistiques disponibles sur
les consommations dnergie. Il est donc difficile de relier les volutions observes des
consommations avec tel ou tel programme defficacit nergtique, ce qui laissait donc libre
cours aux polmiques sur lefficacit relle des activits de MDE
281
.

Mener un suivi et une valuation plus importants des oprations menes simpose ds lors
comme une ncessit au dveloppement de nouvelles politiques daction. Ce dautant plus
que les diffrents contrats et procdures publiques introduisent de plus en plus des exigences
sur ce point
282
.

281
Polmique notamment entretenue par les partisans et les anti-nuclaires, qui s'est traduite par l'organisation en
2003 de deux circuits parallles de dbats sur les nergies en prparation de la loi finalement vote en 2005
282
On peut citer par exemple le rapport du Commissariat Gnral au Plan sur le PNLCC ralis ds 2002 pour
- contribuer () l'laboration d'un scnario de rfrence faisant l'objet d'un consensus au sein de l'admi-
nistration franaise, et pour ce faire rduire au pralable les divergences d'apprciation qui existaient entre
les diffrents acteurs concerns.
- faire une analyse critique des modles et mthodes utilises en France et l'tranger pour construire des
scnarios de rfrence et valuer l'impact des politiques et mesures.[Giraud 2002 pp.13]
Annexe B.3.1 Approches franaises de l'valuation des activits de MDE au niveau national
184
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006

Les "exemples" d'EDF et de l'ADEME

Cette exigence tait dj prsente dans les accords ADEME-EDF depuis 1993. Mais ce vu
est rest pour une large part pieux, car l'objectif de dvelopper les outils et mthodes d'va-
luation des impacts des actions de matrise de la demande d'nergie fait toujours partie des
domaines d'actions annoncs lors de la confrence de presse pour le nouvel accord-cadre
2004-2007 le 26 avril 2004
283
. Il est donc difficile d'imaginer que les actions passes ont t
values si l'objectif sur ce point en est toujours dvelopper des outils pour le faire.

L'valuation des programmes raliss fut aussi un point essentiel du CPEA (Contrat de Plan
Etat-ADEME) de 2000-2006 (point 5.3, page 32 du CPEA 2000-2006) : LADEME mettra
en uvre un programme dvaluation qui permettra dapprcier de manire approfondie les
programmes dintervention, leur impact, leur pertinence et leur efficacit. cette fin, elle
sappuiera sur la mthodologie dvaluation des politiques et des programmes publics, et fera
appel des valuateurs externes lAgence, franais ou trangers. () lengagement pris
pour 2006 est que la moiti des programmes auront fait lobjet dune valuation approfon-
die. () Les valuations intgreront les points de vue des diffrentes parties prenantes. Les
valuations mi-parcours fourniront des lments pour amliorer le programme valu en
mme temps quelles participeront la capitalisation des expriences. Lvaluation des pro-
grammes ne peut se faire sans un systme de suivi performant, qui fournit des premires don-
nes et peut alerter sur la ncessit de conduire une valuation dans un domaine spcifique. Il
y a donc un lien troit entre les activits de suivi et dvaluation.

Toutefois si une prise de conscience a bien eu lieu et a t inscrite dans les textes, elle ne se
reflte pas encore dans la pratique.

Pour les accords ADEME-EDF, des rapports ont bien t produits sur certaines des actions
menes, mais ils correspondent plus des bilans trs grossiers qu de relles valuations.
Le CPEA a quant lui initi un effort important de rnovation des dispositifs de
lADEME pour le suivi et lvaluation de ses programmes, mais les fortes restrictions bud-
gtaires en cours depuis 2002 sont venues fragiliser cette nouvelle dynamique.


Les raisons du manque de culture d'valuation

Dans la pratique, des contacts que nous avons pu avoir avec les acteurs concerns (en particu-
lier des chargs de mission ou des membres du service valuation de l'ADEME), il ressort les
explications suivantes pour le manque de culture d'valuation dans le domaine des activits de
MDE :

- un manque important de moyens consacrs l'valuation, et en particulier en ressour-
ces humaines (par ex. les chargs de mission sont amens enchaner les montages de
projets sans avoir le temps de prendre du recul par rapport aux projets prcdents)

- ce manque de moyens est encourag par une culture du rsultat base sur le nombre
d'actions et les volumes financiers engags (plutt que sur les rsultats effectifs de ces
actions) qui fait que l'valuation est souvent perue comme une perte de temps et de

283
cf. <http://www2.ADEME.fr/f pp.ervlet/getDoc ?cid=96&m=3&id=19271&ref=13416&p1=B>
Annexe B.3.1 Approches franaises de l'valuation des activits de MDE au niveau national
185
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
moyens
284


- cette perception ngative de l'valuation est renforce par le fait qu'elle est plus souvent
prise comme un contrle
285
. Il en rsulte un manque d'appropriation des valuations qui
restent sur une dimension rcapitulative minimaliste (presque comptable) et compor-
tent peu la dimension formative qui en fait sa valeur ajoute et qui est ncessaire sa
fonction d'aide la dcision et au processus souhait de capitalisation d'expriences
286


- de fait, la mission principale du service valuation de l'ADEME est dans la pratique de
prparer les rapports d'avance sur le CPEA, i.e. de rendre des comptes aux ministres
de tutelle
287
(mme si le service s'occupe aussi de dtecter quelles sont les valuations ex-
ternes les plus intressantes)

Cependant il ne faut pas noircir le tableau. L'ADEME a su produire de nombreux guides de
bonnes pratiques notamment pour ses actions dans l'industrie (pour lesquelles une relle ca-
pitalisation d'expriences a pu avoir lieu) ou pour les expriences de collectivits locales (en
particulier grce aux tudes ralises par Energie-Cits)
288
.


B.3.1.4 Le nouveau dispositif de lADEME


Une priode de transition et de rodage

Le rapport d'audit de 2000 de l'IGF (Inspection Gnral des Finances) sur la gestion de
l'ADEME signalait alors les insuffisances jusqu' prsent [1999] du systme de reporting
interne et externe, mme sir lADEME a enregistr, sur chacun de ces points, de rels pro-
grs au cours des deux dernires annes [1999 et 2000] et qu'il importe que lADEME pr-
cise loccasion de la signature du contrat de plan [CPEA] ses priorits daction et btisse
rapidement un systme dinformation capable den suivre la ralisation. [De Gouyon 2000
pp.11 et 15]

Tous les ans, un rapport est produit par le service valuation de lADEME sur les avances
dans le cadre du CPEA. Le rapport sur la priode 2000-2002 [ADEME 2003a pp.32] souligne
que cette priode a t fortement marque par la priorit donne au renforcement des outils
de suivi des programmes et leur diffusion au sein de lAgence ainsi quau suivi des enga-

284
La vie du projet tend sarrter au moment de la signature de la convention, les tapes ultrieures tant
considres comme consommatrices de temps (examen des pices justificatives avant mandatement) voire fa-
cultatives (contrle sur place de la ralisation de lquipement et de ses caractristiques techniques). Au-del de
ce premier niveau de contrle, on remarque que les clauses dvaluation contenues dans les conventions ne sont
pas systmatiquement appliques [De Gouyon 2000 pp.24]
285
point particulirement sensible dans les organismes publics surtout lorsqu'ils sont soumis des alas budg-
taires importants
286
Cela signifie, en clair, que les ingnieurs de lagence, lorsquils grent un dossier (tude,projet
dinvestissement), prennent trop rarement la peine de prciser quelles sont les diffrentes tapes et les attentes
de lADEME pour chacune de ces tapes. Cela se traduit par exemple, en ce qui concerne les tudes, par une
sous utilisation des tudes ralises, insuffisamment diffuses en interne comme en externe (tutelles, public),
parfois faute de stre pos la question de leur opportunit [De Gouyon 2000 pp.23]
287
Il est possible sur ce point que de nouvelles orientations interviennent pour ces rapports d'avance dans le
cadre de la nouvelle LOLF (l'accent de ces rapports pourrait tre mis plus sur la performance des programmes et
moins sur les moyens engags)
288
Se reporter au catalogue des publications de l'ADEME pour voir la liste de ces guides.
Annexe B.3.1 Approches franaises de l'valuation des activits de MDE au niveau national
186
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
gements du CPEA. Le dispositif en place est en voie de complment et damlioration. Pen-
dant cette priode des valuations ont galement t conduites. Mais en quelque sorte, la mise
en oeuvre du programme dvaluation sest faite dans les limites du pralable donn la
constitution de linformation de base grce aux outils de suivi, du dlai ncessaire un recul
sur les programmes mis en place et dune disponibilit limite du service valuation, lui aus-
si tant mobilis sur le dispositif de suivi.

Les rapports suivants 2003 puis 2004 ne reviennent malheureusement pas sur ce point. Il est
donc difficile davoir une ide sur o en est lapplication effective des outils dvelopps.
Nous avons contact de nombreuses Dlgations Rgionales lors du second semestre 2004. A
la question sur comment taient values les actions quelles soutenaient, rares sont ceux qui
faisaient rfrence aux nouveaux outils mis en place. La plupart soulignaient quils navaient
malheureusement que trs peu voire pas de temps pour assurer un suivi des actions menes.
Toutefois nous avons appris par la suite auprs du service valuation de lADEME que les
formations des Dlgations Rgionales aux nouveaux outils venaient juste de samorcer
cette priode. Il est probable que les restrictions budgtaires en cours depuis 2002 aient ralenti
la mise en uvre du nouveau dispositif.


Les outils du dispositif

Suite au CPEA, tous les dossiers ayant bnfici dune aide doivent faire lobjet dun suivi et
dune valuation. Concrtement, les moyens financiers accords pour une action ne sont pas
engags tant qu'elle n'a pas t enregistre dans le nouveau systme de suivi.

Ce systme s'appuie sur deux outils ou modules informatiques [ADEME 2003a pp.32-33] :

- LOCO (LOgiciel de Comptabilit de l'Ordonnateur)
289
: module de suivi des contrats si-
gns par les DR-ADEME (financement, chanciers) qui a pour but :
- de mieux allouer les ressources disponibles en fonction de lvolution prvision-
nelle de la demande des acteurs (ancienne fonctionnalit Portefeuille de SA-
GA)
- de mieux grer et suivre les partenariats engags avec les collectivits territoria-
les (ancienne fonctionnalit Gestion externe de SAGA)

- LISA (Logiciel Interne de Suivi des Actions)
290
: module denregistrement des actions qui
a pour but de mieux connatre et suivre l'activit de l'ADEME et den apprcier plus pr-
cisment les impacts prvisionnels

Larchitecture de LISA est construite sur la base des thmes et programmes de lADEME.
Pour chaque programme, une arborescence prdfinie dcrit les modes dintervention qui le
concernent et avec diffrents niveaux de dtail permet darriver aux oprations dites finales
faisant lobjet dun financement. L'arborescence se dcline donc sur diffrents niveaux de
dtails. D'abord les grandes thmatiques d'actions (air nergie dchet transport trans-
versal). Puis le programme (par ex. Dchets et territoires, Organisation des transports,
etc.). Puis le ou le(s) mode(s) d'intervention(s) (par ex. aide l'investissement, aide la d-

289
LOCO a remplac en mai 2003 l'ancien module de suivi SAGA (Suivi des Actions Gres par l'ADEME) qui
tait utilis depuis 2000 et l'ancien outil de gestion budgtaire LEA
290
LISA a remplac en 2000 EVAL, l'ancien logiciel d'valuation de l'ADEME qui avait t jug insuffisant par
le rapport d'audit de 1999-2000 [De Gouyon 2000 pp.24]
Annexe B.3.1 Approches franaises de l'valuation des activits de MDE au niveau national
187
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
cision, etc.). Puis l'usage et/ou le secteur concern. Et enfin la solution ou la technologie
promue.

Pour chaque action classe dans cette arborescence, des indicateurs conomiques et techni-
ques sont renseigner. Une partie est obligatoire pour le versement du financement (indi-
cateurs prvisionnels). Une autre partie est optionnelle (indicateurs de rsultats), et le plus
souvent pour l'instant elle nest pas renseigne (selon les retours que nous avons eus).

Un autre logiciel (IMPROMPTU) sert analyser les donnes des deux autres modules, par le
biais de requtes. Ces outils sont pour l'instant surtout utiliss par le Service Evaluation de
lADEME (centre dAngers) pour les restitutions dans les rapports d'activit de l'ADEME ou
pour le CPEA, et pour des quantifications de type plan carbone (missions vites).

En parallle, les valuations externes ponctuelles sur des programmes slectionns se sont
multiplies (valuation des campagnes de sensibilisation de 2001 et depuis 2004, valuation
de lactivit des Espaces Info Energie en 2003, valuation des aides la dcision par le cabi-
net Gallileo Business Consulting en 2003, etc.). Ces valuations portent notamment sur les
actions de nature transversale et/ou de structurelle, organisationnelle ou territoriale () pas
ou faiblement traduites par les indicateurs de LISA. Ce travail d'valuation est souvent bas
sur des tudes de cas, et destin la capitalisation et l'change d'expriences. [ADEME
2003a pp.34-35]


Confusion entre l'ex-ante et l'ex-post, et actions pour
l'amlioration des donnes

A noter que, selon le Service Evaluation, ce dispositif de suivi est utilis pour de lvaluation
essentiellement ex-post. Cependant la manire dont sont obtenus les chiffres de rsultats
prsents dans les diffrents rapports de l'ADEME n'est pas trs claire, notamment en ce
qui concerne les TEP conomises et les missions de CO
2
vites. La partie ex-post semble
tre le plus souvent le fait que l'action soit ralise ou pas. Les impacts des actions sont en
revanche le plus souvent estims ex-ante. Toutefois pour certains types d'oprations (aides
l'quipement, oprations de dmonstration ou exemplaires), des bilans nergie et effet de serre
sont normalement raliss ex-post.

Par ailleurs, le Service Evaluation a mis en place un contrle qualit des donnes saisies et
un processus de rvision de l'architecture de LISA (modification des arborescences, modifica-
tion des indicateurs technico-conomiques) () Des marges de progrs restent franchir : la
qualit des saisies sest nettement amliore mais reste un dfi permanent, certains descriptifs
doprations et certains indicateurs sont perfectionner. Lamlioration des bilans nergie et
effet de serre est ltude : il sagit principalement dhomogniser les situations prises en
rfrence pour leur calcul. [ADEME 2003a pp.33]


Le point cl de l'appropriation du processus d'valuation
par tous

Le rapport de mi-parcours sur le CPEA conclut ainsi sur les avances en termes de mise en
uvre du nouveau dispositif d'valuation : en conclusion, lactivit valuation de lAgence
monte en puissance. Elle est intgre dans les diffrentes directions qui mettent un fort accent
Annexe B.3.1 Approches franaises de l'valuation des activits de MDE au niveau national
188
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
sur les impacts attendus des oprations finances en plus des valuations caractre techni-
que quelles sont amenes conduire. La confusion entre le suivi et lvaluation na pas en-
core compltement disparu. Cest pourquoi la diffusion dune culture de lvaluation au
sein de lAgence reste une orientation pour la priode venir. Le principal enjeu est de ren-
forcer le rle de lvaluation comme outil de pilotage stratgique des programmes. Ceci
passe par la dtermination du programme dvaluation. Un programme directeur 3 ans
sera tabli fin 2003 en cohrence avec lvolution du CPEA et ncessite galement une impli-
cation dans le pilotage et la capitalisation des recommandations issues des valuations.
[ADEME 2003a pp.36]

Il faut en outre rappeler que ce dispositif ne concerne pas que les activits de MDE mais
lensemble des programmes de lADEME.


B.3.1.5 Les tudes sur les consommations d'nergie et les querelles de donnes


Deux acteurs centraux : le CEREN et ENERDATA

La fiche sur la France du rapport de lAIE rdige par Bruno Lapillonne (ENERDATA) et
Didier Bosseboeuf (ADEME) contient un tableau sur les tudes annuelles des tendances d'ef-
ficacit nergtique et un autre sur les tudes annuelles de suivi des consommations unitaires
d'nergie [Vreuls 2005b pp.99-117].

Sujet valu Evaluateurs Depuis
Economies d'nergie/CO2 par secteur ou usage final ADEME/ENERDATA 1986
Rfrence : base de donnes Datamed dveloppe par ENERDATA pour l'usage exclusif de
l'ADEME
291

Tendances nergtiques/CO2 par secteur ou usage final ADEME 1992
Rfrence : www.ODYSSEE-indicators.org
Economies d'nergie dans l'industrie ADEME/CEREN
Rfrence : CEREN Effets explicatifs des volutions de consommations dnergie dans
lindustrie
Comportements et investissements des mnages dans
l'efficacit nergtique
ADEME/SOFRES 1986
Rfrence : Les chiffres cls du btiment- Energie et Environnement publi annuellement
par l'ADEME
292

Indicateurs de suivi du Plan Climat ADEME/MIES/SOFRES 2001
Rfrence : www.ecologie.gouv.fr
Source : [Vreuls 2005b pp.104]
Tableau 47 - tudes annuelles sur les tendances d'efficacit nergtique en France

Secteur / usage final Evaluateurs Depuis
Rsidentiel CEREN 1980's

291
cf. <http://www.enerdata.fr/enerdatafr/f pp.ervices/data_mining/databases/datamed.html>
292
voir aussi les bilans des enqutes SOFRES de 2000 disponibles sur l'ancien site de l'ADEME :
<http://www.ADEME.fr/Etudes/f pp.ocio/Gestion_energie.htm>
Annexe B.3.1 Approches franaises de l'valuation des activits de MDE au niveau national
189
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Rfrence : Suivi du parc et des consommations dans le secteur rsidentiel (document non
public
293
)
Industrie CEREN 1980's
Rfrence : Profit et performances nergtiques de lindustrie (document non public
293
)
Services CEREN 1986
Rfrence : Suivi du parc et des consommations dans le secteur tertiaire (document non
public
293
)
Transport INSEE/SAS 1986
Rfrence : Comptes des transports en France (publi par l'INSEE)
Voitures Secodip 1986
Voitures neuves UTAC/ADEME 1980's
Rfrence : www.ADEME.fr
Source : [Vreuls 2005b pp.105]
Tableau 48 - tudes annuelles sur les consommations unitaires d'nergie en France

Ces deux tableaux font ressortir deux acteurs essentiels concernant les donnes lies l'ner-
gie en France :
- le CEREN (Centre d'tudes et de Recherches conomiques sur l'nergie) : GIE (Grou-
pement d'Intrt Economique), le CEREN rassemble l'ADEME, les Charbonnages de
France, EDF et GDF. Il labore des reprsentations chiffres des spcificits d'un sec-
teur, d'une rgion, d'une filire, dans leur rapport l'nergie et l'environnement. Il r-
alise des chroniques, des monographies thmatiques ou sectorielles, des valuations, des
tudes de march, de prospective technique ou socio-conomique, de la formation et de
l'assistance dans le domaine de l'nergie et de l'environnement
294
. Dans ce cadre le CE-
REN a notamment accs certaines donnes de l'INSEE.
295


- ENERDATA : cabinet dtudes conomiques indpendant spcialis dans le secteur
nergtique et ses interactions avec lenvironnement
296


Les tudes du CEREN et ENERDATA servent notamment l'Observatoire de l'Energie pour
tablir les bilans nationaux sur les consommations d'nergie. La plupart de leurs tudes sont
cependant d'une utilisation restreinte leurs financeurs (ADEME, EDF, etc.) qui en publient
parfois quelques lments de synthse.


Les mthodes du CEREN
Une prsentation de la mthode utilise par le CEREN pour dfinir les statistiques du sec-
teur tertiaire est fournie par Haehnel [1995] :

- ralisation d'enqutes annuelles de deux types :
- suivi d'un panel de consommateurs pendant deux annes conscutives (panel rvi-
s annuellement) dans toutes les branches pour estimer l'volution des surfaces
chauffes et des consommations selon les types d'nergie (chantillon de 3 4000

293
pour les donnes publiques se reporter <http://www.industrie.gouv.fr/energie>
294
cf. prsentation du CEREN sur <http://www.ifen.fr/resObs/Reseaux/Europe/reseau.htm> (il est noter que le
CEREN ne dispose actuellement pas de site web)
295
voir par exemple l'article 3 de l'arrt du 13 novembre 2001 portant cration d'un traitement automatis d'in-
formations individuelles relatif une enqute sur le logement
296
cf. <http://www.enerdata.fr/enerdatafr/about/index.html>
Annexe B.3.1 Approches franaises de l'valuation des activits de MDE au niveau national
190
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
consommateurs)
- enqute dtaille d'une branche, avec un chantillon important (2 4000
consommateurs) pour fournir des estimations des utilisations de l'nergie pour
cette branche et pour connatre les taux et caractristiques d'quipements
Ces deux approches visent assurer une mise jour rgulire (tous les cinq ans) pour cha-
que branche, et permet des amliorations dans la qualit des rsultats (i.e. reprsentativit et
ajustement en vue d'une rvaluation des consommations et de ses caractristiques)

- enqute sur les nouveaux btiments pour estimer les surfaces chauffes et les comparer
avec la rglementation et pour suivre les types d'nergie utiliss

- enqute annuelle de flux sur les locaux pour suivre les variations annuelles de locaux
(par type d'nergie)

Les panels sont des chantillons stratifis constitus alatoirement partir des registres d'en-
treprises disponibles. Les enqutes sont menes par courrier. Les donnes collectes sur les
consommations d'nergie sont les consommations totales par type d'nergie et les principaux
usages finals pour chaque type d'nergie.

La mthode consiste ensuite dfinir des consommations unitaires par usage final et par
branche d'activit en appliquant des rgressions sur les donnes collectes. Puis ces
consommations unitaires sont utilises au niveau de chaque rgion pour reconstituer le bilan
observ des consommations d'nergies (par type d'nergie).

Un point essentiel de cette mthode est les ajustements ncessaires cette tape pour faire
correspondre les donnes statistiques agrges ( partir des consommations unitaires et des
caractristiques supposes du parc) avec les consommations d'nergie rellement releves.

Enfin, pour fournir des consommations annuelles "normalises", des corrections climatiques
bases sur les degrs jour sont appliques pour tenir compte des variations de conditions cli-
matiques d'une anne sur l'autre.


L'approche similaire d'ENERDATA et d'ODYSSEE

La mthode utilise par l'ADEME et ENERDATA pour dfinir les indicateurs d'efficacit
nergtique utiliss dans le cadre du programme europen ODYSSEE est similaire celle du
CEREN, mais utilise en plus d'autres sources de donnes pour caractriser l'effet d'activit en
plus de l'effet de consommation unitaire. Les indicateurs rendent alors compte des volutions
de consommations d'nergie rapportes des units montaires (par ex. TEP/M) ou physi-
ques (par ex. kWh/m) [Vreuls 2005b pp.106-107].


Les campagnes de mesure d'ENERTECH

En parallle ces approches statistiques bases sur une dcomposition puis recomposition des
consommations d'nergie, l'ADEME et EDF ont aussi financ
297
des campagnes de mesure
des consommations ralises par le cabinet ENERTECH d'Olivier Sidler
298
. Ces campagnes

297
souvent avec l'aide aussi de la Commission europenne et/ou de collectivits locales
298
cf. rapports disponibles sur <http://f pp.idler.club.fr/page9.html>
Annexe B.3.1 Approches franaises de l'valuation des activits de MDE au niveau national
191
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
permettent de mesurer les consommations d'nergie usage par usage et en conditions relles
d'utilisation pendant des dures plus ou moins longues (d'un mois deux ans). Le but est de
mieux connatre la part relle de chaque usage dans les consommations globales ainsi que les
caractristiques de ces consommations (variations horo-saisonnires, influences des caract-
ristiques des quipements, etc.) d'une part pour mieux cibler les actions de MDE et d'autre
part pour mieux connatre les gisements d'conomies d'nergie (cf. Annexe B.3.4).


Avantages et inconvnients des mthodes statistiques et
de terrain

Les mthodes statistiques reposent sur des chantillons plus larges, et peuvent donc se
prvaloir d'tre plus reprsentatives. Mais la validit de leurs rsultats dpend fortement
d'une part de la qualit et de la pertinence des donnes collectes, et d'autre part des
hypothses utilises pour raliser les ajustements lors des reconstitutions des bilans. Les
campagnes de mesure s'appuient certes sur des donnes sources trs fiables, mais ne
peuvent tre ralises sur des chantillons importants pour des questions de cots et de
logistique, et ont donc une reprsentativit limite. Les deux types de mthodes (statistiques
et campagnes de mesure) pourraient donc tre complmentaires, mais dans la pratique elles
ont surtout t opposes.

D'autre part, il est recherch aujourd'hui non seulement de quantifier les conomies d'nergie,
mais de les traduire en missions vites. Sur ce point, aprs des annes de discussions, EDF
et l'ADEME sont arrivs un accord pour publier une note de cadrage commune sur le
contenu CO2 du kWh lectrique par usage final. Ces donnes constituent dsormais une
rfrence pour l'valuation des impacts des actions de MDEc en termes de rductions d'mis-
sions.


B.3.1.6 Les certificats dconomies dnergie : opportunit ou cueil ?


Le nouveau dispositif des CEE (certificats dconomies dnergie) constitue un nouveau
tournant pour le suivi et lvaluation des activits de MDE.

Le fonctionnement global thorique du dispositif peut tre rsum par le schma suivant :

Annexe B.3.1 Approches franaises de l'valuation des activits de MDE au niveau national
192
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006

Source : [Cappe 2006]
Figure 28 - fonctionnement thorique des certificats d'conomies d'nergie

Tout d'abord il instaure un enregistrement systmatique des actions rentrant dans le cadre
de ce dispositif.

De plus il impose de fait la distinction entre deux catgories d'actions, actions standardi-
ses et actions spcifiques, auxquelles sont associes deux mthodes d'enregistrement, res-
pectivement par validation forfaitaire et par tude au cas par cas. Un des buts du dispositif
est de minimiser les cots d'administration et de faciliter la reproduction des actions. La vali-
dation forfaitaire est donc favorise, et les tudes au cas pas par cas sont rserves pour de
grosses oprations.
.
Par consquent il introduit un nouveau mode d'valuation pour appliquer cette validation
forfaitaire. Son principe consiste dfinir des actions unitaires (par ex. diffusion d'une LBC)
auxquelles sont associes une valeur standard fixe d'conomies d'nergie (par ex. 230 kWh
cumac/LBC diffuse). L'enregistrement consiste alors dposer un dossier contenant les pi-
ces justificatrices (par ex. factures) du nombre d'actions ralises, en retour duquel un certifi-
cat est dlivr d'un montant gal au forfait unitaire multipli par le nombre d'actions justifies.

C'est pourquoi avant mme sa mise en uvre, le dispositif des CEE a dj provoqu un im-
portant travail pour dfinir les fiches standard qui serviront ensuite comptabiliser les rsul-
tats certifis. Ce travail a t supervis par la DIDEME (qui a la charge de prparer les dcrets
d'application concernant les CEE) et men par des groupes d'experts de l'ADEME et de
l'ATEE.

La premire tape a t de dfinir le format de ces fiches et ce qu'elle devait contenir. Au final
une fiche est constitue de deux documents : une fiche de calcul et une fiche de synthse.

La fiche de calcul, qui n'est pas rendue publique, comporte les sections suivantes
a) secteur d'application (avec des prcisions ventuelles si la cible est un sous-secteur par-
ticulier)
b) dnomination de l'opration lmentaire
Autorit administrative


Attribue les CEE


Surveille le march
- fixe les obligations
- attribue les CEE
- fixe les pnalits

March
d'chan-
ges des
CEE
Acteurs non-obligs

Acteurs obligs

actions d'conomies
d'nergie
actions d'conomies
d'nergie
Obligation CEE
vente vente
achat
Annexe B.3.1 Approches franaises de l'valuation des activits de MDE au niveau national
193
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
c) critres de diffrenciation des performances de l'opration en fonction des conditions de
mise en uvre (conditions imposer sur les actions, lments pouvant faire varier le cal-
cul des conomies d'nergie ralises (par ex. la zone climatique))
d) statistiques de consommation moyenne (pour l'usage considr)
e) situation de rfrence
f) montant de gain nergtique gnr par opration lmentaire (i.e. la formule gnrale
pour calculer les conomies ralises)
g) dure de vie de l'action
h) conomie d'nergie par opration lmentaire pour l'attribution de certificats d'cono-
mies d'nergie (formule envisage pour passer des kWh/an aux kWh cumac)
annexe : donnes complmentaires qui expliquent la formule de calcul et/ou qui dtaillent
le potentiel envisageable

La fiche de synthse, publique, reprend juste les lments essentiels pour tous les acteurs
concerns :
a) secteur dapplication
b) dnomination de lopration lmentaire
c) conditions particulires lobtention de certificats
d) calcul des droits certificats par opration lmentaire

Concrtement, les fiches sont proposes soit par les groupes d'experts de l'ATEE, soit par les
groupes d'experts de l'ADEME. La DIDEME les valide lorsque les deux parties (ATEE
299
et
ADEME
300
) sont parvenues un accord sur les dterminants de la fiche.

Pour ce faire, l'ATEE a mis en place ds le dbut de 2004
301
des groupes de travail pour pro-
poser des fiches. Au final ces groupes regroupent plus d'une centaine d'experts et ont permis
de dfinir la date du 13 avril 2006 une vingtaine de fiches valides la fois par l'ATEE et
l'ADEME et donc en cours de validation finale par la DIDEME. Ce processus de dfinition de
fiches est continu, et une soixantaine de fiches est d'ores et dj en prparation [Cappe 2006].

Dans ce cadre, la fiche de calcul est le document de travail qui sert faire valider une fiche
par la DIDEME, et la fiche de synthse est le "produit fini" qui sera ensuite utilis par les ac-
teurs concerns.

Ce processus a permis de dfinir des rfrences communes sur des points cls de la quanti-
fication des conomies d'nergie, et notamment de caractriser l'additionnalit d'une action et
donc dlimiter l'effet d'aubaine, et de fixer des valeurs moyennes acceptes par tous pour
les paramtres utiliss dans les calculs (par ex. dure de vie, puissances des appareils, dures
d'utilisation, consommations annuelles spcifiques).

Ainsi les conomies ne sont pas calcules partir de la situation actuelle au moment de
laction, mais par rapport une situation de rfrence dfinie (cf. Figure 6). Lconomie ac-
corde ne sera pas celle reprsente par A, mais B. La principale difficult tant alors de dfi-

299
Qui ici reprsente les intrts des obligs (et dans une moindre mesure des acteurs non obligs qui souhaitent
obtenir des CEE, par ex. les collectivits locales)
300
On peut considrer que schmatiquement l'ATEE s'attache l'intrt conomique des actions proposes, alors
que l'ADEME serait le garant de leur intrt environnemental
301
le Livre Blanc sur les Energies l'origine de la loi de 2005 avait t prsent ds novembre 2003 et annonait
alors la future mise en place des CEE
Annexe B.3.1 Approches franaises de l'valuation des activits de MDE au niveau national
194
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
nir le niveau standard.

Figure 6 - additionnalit et niveau de rfrence pour les CEE

Le compromis trouv pour dfinir le niveau standard est le suivant :
- pour les biens d'quipement "classiques" (par ex. LBC, lectromnager, etc.), le niveau
standard est le niveau moyen de performance du march (i.e. statistique sur les ventes)
- pour les actions visant la rduction des besoins thermiques des btiments (par ex. isola-
tion), le niveau standard est le niveau moyen de performance du parc (i.e. statistique
sur les consommations d'nergie des btiments selon les zones climatiques H1, H2, H3 et
la priode de construction du btiment concern, avant ou aprs 1975)

Les CEE amnent aussi une nouvelle unit pour les conomies d'nergie : les kWh cumac,
i.e. cumuls actualiss. Ils correspondent au fait que les conomies d'nergie sont attribues
une fois pour toute pour la dure de vie suppose des actions (d'o le "cumul"). Cela
permet de tenir compte de la dure de vie des actions sans alourdir le systme de certification.
Mais comme les CEE correspondent un bien, et que toute sa valeur est acquise ds le dbut
de l'action alors qu'en pratique elle se constitue sur la dure de vie de cette action, il est nces-
saire d'actualiser la valeur des CEE (d'o le "actualis").

La mthode d'valuation "CEE" est surtout ex-ante, puisque seul le nombre d'actions ralises
est dfini ex-post. Un dispositif complmentaire sera donc ncessaire pour vrifier ex-
post les valeurs dfinies ex-ante, dont certaines restent des dires d'experts. Cette mme
conclusion est ressortie de l'valuation du dispositif britannique qui a servi de base la dfini-
tion du systme franais (cf. le rapport la Chambre des Communes du Parlement britannique
sur l'EEC [CPA 2005 pp.13]).

Pour rsumer ce qu'a ou va changer le dispositif des CEE en ce qui concerne l'valuation des
activits de MDE, voici une liste de ces apports et de ces limites.

Apports :
- enregistrement systmatique des actions ralises
- travail et changes importants pour dfinir des actions standardises et des rfrences
communes
- les obligs sont amens rechercher quelles actions sont les plus rentables pour eux et
comment minimiser les cots (i.e. les obligs devraient probablement mener leurs propres
valuations pour ce qui est de l'analyse cots/bnfices)
- dispositif dont le suivi a un cot limit

Limites :
- ce dispositif repose sur des estimations ex-ante qui devront tre vrifies pour que l'effi-
cacit globale du systme puisse tre value
- les valeurs dfinies sont des valeurs moyennes qui ne peuvent pas tre reprises pour des
calculs "individuels". Or il existe un risque que ces valeurs soient prises pour des rf-
A
B
Niveau actuel
Niveau standard
Niveau du projet
Annexe B.3.1 Approches franaises de l'valuation des activits de MDE au niveau national
195
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
rences absolues. En particulier, ces valeurs ne doivent pas tre utilises pour valuer
une opration donne, dont les caractristiques peuvent s'loigner trs sensiblement des
valeurs moyennes utilises pour la dfinition des fiches.
- par consquent il existe un risque que les CEE ne soient pris comme une rponse glo-
bale la question de l'valuation des activits de MDE, alors qu'ils rpondent un be-
soin particulier (la certification des actions ralises pour accomplir des obligations)





196
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Annexe B.3.2 Prsentation des oprations ayant fait l'objet d'tudes de cas

Cette annexe regroupe les descriptions des oprations dont les synthses des tudes de cas
sont prsentes dans la sous-partie II.3.2.


B.3.2.1 Les alternatives au renforcement de rseau


Opration MDEc de Chteau-Chalon (Jura)

Cette opration micro a t mene par lentreprise Jura Energie Solaire dans le cadre du par-
tenariat entre les Dlgations Rgionales Franche-Comt dEDF et de lADEME, et du SI-
DEC (syndicat dlectrification dont est membre Chteau-Chalon) entre 1997 et 1999.

Le but tait le traitement dun bout de ligne en contrainte suite la plainte dun client EDF.
Des solutions dalternatives au renforcement de rseau ont t recherches en tudiant les
besoins du client concern, avec son accord.

Cot total de l'opration (tude + travaux) : 25.400 . Estimation brute des cots vits de
rseau : 31.700 . Aprs actualisation et prise en compte des pertes de taxes locales
dlectricit, le bilan global fait ressortir une conomie de 2.600 .

Lopration a fait lobjet dune valuation technico-conomique, ralise par le bureau
dtudes SERT en 2003 [SERT 2003].


Opration de travaux de MDEc lectricit rurale en
Maine-et-Loire

Cette opration micro a t mene par le bureau dtude FR2E dans le cadre du partenariat
entre EDF-GDF Services Anjou, la DR-ADEME Pays de la Loire et le SIEML (Syndicat In-
tercommunal dElectrification du Maine et Loire) entre mars 1999 et septembre 2000 (avec
des aides du FACE).

Elle a permis le traitement de 7 dparts BT en contrainte (soit 38 clients EDF sur 7 commu-
nes) par des solutions dalternatives au renforcement de rseau adaptes au cas par cas.

Cot total de l'opration (travaux + matrise duvre) : 68.148 . Estimation des cots vits
de renforcement (actualiss) : 108.030 . Les conomies ralises seraient donc de 39.882 .

Lopration a fait lobjet dune valuation technico-conomique, ralise par FR2E en sep-
tembre 2000 [FR2E 2000], et dune tude sociologique ralise par une sociologue du CSTB
de Nantes (que nous n'avons pas pu rcupre).


Opration de matrise de la consommation dlectricit
en zone rurale sur le canton de Lanmeur (Finistre)

Cette opration macro a t mene par lagence locale de lnergie Hol dans le cadre du par-
Annexe B.3.2 Prsentation des oprations ayant fait l'objet d'tudes de cas
197
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
tenariat entre les Dlgations Rgionales dEDF et de lADEME, et le Syndicat Intercommu-
nal dElectrification (SIE) de Lanmeur entre mars 2000 et dcembre 2001.

Le plan de communication a couvert tout le canton (lettre du Maire puis lettre du Prsident du
SIE), soit 8 communes et 12.000 habitants, pour prsenter lopration et diriger les personnes
intresses vers le conseiller nergie. Aprs un mini-audit sur site (459 foyers visits), le
conseiller proposait les travaux damlioration les plus pertinents parmi des solutions "classi-
ques" (isolation, systme de chauffage performant, etc.). Ces travaux pouvaient faire lobjet
dune aide financire pour les clients EDF avec chauffage lectrique (374 dossiers subven-
tionns). Au final, 8 dparts initialement en contrainte ont t considrs comme traits par
cette opration.

Cot total de l'opration (communication, matrise duvre, travaux) : 1.802.597 . 1.357.000
investis par les participants pour 372.000 daides verses. Estimation des cots vits de
rseau (actualiss) : 146.000 (hypothse haute) / 53.000 (hypothse basse).

Lopration a fait lobjet de plusieurs valuations :
- tude sociologique ( mi-parcours) par la sociologue du CSTB de Nantes [Laumonier
2001]
- valuation technico-conomique par Franck Nadaud du CIRED la fin de lopration
[Nadaud 2003]
- valuation de la satisfaction des acteurs par Daigremont Consultant la fin de lopration
[Daigremont consultants 2003]


B.3.2.2 Les campagnes monotechniques de matrise de la demande en lectricit


Opration 10.000 ampoules pour lan 2000
Clermont-Ferrand

Cette campagne dinformation et de promotion des LBC (lampes basse consommation) a t
mene par lADUHME en partenariat avec EDF Clermont-Ferrand, la DR-ADEME Auver-
gne, lADIL 63 et Philips Eclairage, en novembre 1999 sur l'agglomration de Clermont-
Ferrand (14 communes, environ 220.000 habitants).

L'opration est constitue d'un plan de communication (mdias locaux (radio, presse), affi-
chage, PLV (Promotion sur les Lieux de Vente)) et d'une rduction ngocie avec Philips et
des magasins de grande distribution (gnraliste et bricolage) sur des modles de LBC pour
inciter les habitants de lagglomration de Clermont-Ferrand squiper de LBC. Au final
12.396 LBC ont t vendues pendant lopration.

Cot total du projet : 61.742 (soit 4,98 investis par LBC vendues). Economies dnergie
estimes ex-ante (sur la dure de vie des LBC) : 5.771.758 kWh (soit 1,07 c investis par
kWh conomis). Ce sont les rsultats affichs dans les rapports. L'application aux donnes
ex-post de la mthode que nous avons mise au point montre qu'ils sont surestims (cf. Annexe
D.1.14). Economies estimes de facture dlectricit pour les participants : 659.924 . Et en
tenant compte de linvestissement lachat, les conomies sont au final pour les participants
de : 654.478 .

Annexe B.3.2 Prsentation des oprations ayant fait l'objet d'tudes de cas
198
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Lopration a fait lobjet dune valuation globale, ralise par lADUHME en fvrier 2000
[ADUHME 2000].


Opration Ltiquette nergie, pensez-y ! dans le Puy-
de-Dme

Cette campagne dinformation sur llectromnager blanc performant a t mene par
lADUHME en partenariat avec EDF Clermont-Ferrand, la DR-ADEME Auvergne, le
Conseil Gnral Puy-de-Dme et des revendeurs d'lectromnagers (indpendants et grandes
surfaces), entre janvier et avril 2002 sur le dpartement du Puy-de-Dme (608.000 habitants
en 2002).

L'opration tait constitue d'un plan de communication (mdias locaux (radio, presse), affi-
chage, PLV) et d'une formation technique de vendeurs intresss pour augmenter la part des
ventes des appareils performants dans le dpartement du Puy-de-Dme. Pendant lopration,
60% des appareils vendus chez les distributeurs participants taient de classe A.

Pas de donnes sur les cots de lopration, ni sur les conomies qui en dcoulent.

Lopration a fait lobjet dune valuation globale par lADUHME [ADUHME 2003].


Opration de promotion des LBC Besanon

Cette campagne d'information et de promotion des LBC est une dclinaison rgionale (Fran-
che-Comt) des accords EDF-ADEME. Elle a t ralise en octobre - novembre 2002 sur
l'agglomration de Besanon (175.000 habitants).

L'opration tait constitue d'une campagne globale de communication (presse et radios loca-
les, affichage, tracts, PLV, actions de terrain), d'une rduction ngocie avec Philips et d'un
partenariat avec la grande distribution et des comits d'entreprise. Au final 6000 LBC ont t
vendues.

Cot du projet : budget prvisionnel de 75.254 ( 50-50 EDF et ADEME), soit 12,54 in-
vestis / LBC vendues. Economies d'nergie estimes ex-ante 400.000 kWh/an soit 2,4 GWh
sur la dure de vie des LBC. Ce sont les rsultats affichs dans les rapports. L'application aux
donnes ex-post de la mthode que nous avons mise au point montre qu'ils sont surestims
(cf. Annexe D.1.14).

L'opration a fait l'objet d'un bilan final (auteur non prcis, mais probablement soit la DR-
ADEME soit un des matres d'uvre, l'association AJENA espace info-nergie de la zone)
[ADEME 2003b]. Elle a par ailleurs t reconduite l'anne suivante sur l'agglomration de
Montbliard.


Opration de promotion des LBC en Bretagne

Cette campagne dinformation et de promotion a t mene par les Espaces Info Energie de
Bretagne en partenariat avec les Dlgations Rgionales dEDF et de lADEME, du Conseil
Annexe B.3.2 Prsentation des oprations ayant fait l'objet d'tudes de cas
199
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Rgional et de Philips Eclairage, du 18 au 30 novembre 2002 sur 219 communes bretonnes
(soit prs de 800.000 habitants).

L'opration tait base sur celle ralise par lADUHME en novembre 1999, avec une com-
munication auprs du grand public, des tarifs promotionnels ngocis avec Philips et les ma-
gasins participants sur 3 modles de LBC, et un kit pdagogique distribu dans les coles l-
mentaires.

C'est un exemple d'opration pour laquelle il a t possible de rcuprer des documents dtail-
ls sur la prsentation du projet, mais o aucune valuation ex-post n'a pu tre ralise (im-
possibilit de rcuprer les donnes de ventes de LBC), et donc sans donne de rsultat dispo-
nible.



200
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Annexe B.3.3 Exemple d'tude de cas : opration de MDE rurale du canton de
Lanmeur


Cette annexe prsente une des tudes de cas ralises, celle sur l'opration de MDE rurale du
canton de Lanmeur. L'tude se prsente sous la forme d'une grille d'analyse
302
en six parties.
La premire sert pour dcrire l'opration. Dans les quatre suivantes, trois correspondent aux
trois tapes principales dune valuation : laboration ralisation exploitation. S'y insre
une prsentation synthtique des rsultats de l'opration. La dernire partie rend compte de
notre analyse critique de l'valuation ralise.

Des repres (par ex. (A-1)) permettent de faire le lien avec les problmatiques cls traites
dans la sous-partie I.3.1. Ils servaient en outre assurer la correspondance entre notre grille
d'analyse (sous forme de tableau) et celle utilise par le Wuppertal Institut
302
(sous forme de
liste).


B.3.3.1 Prsentation gnrale de l'opration


A-1) Informations gnrales
Nom de l'opration Opration de matrise de la consommation dlectricit en zone
rurale
A-1-a) Organisme(s)
responsable(s)
Matre douvrage : syndicat intercommunal dlectrification (SIE)
du canton de Lanmeur
Matre duvre : HEOL (ALE de Morlaix)
A-1-b) Echelle territo-
riale
cantonal
Zone concerne tout le canton (8 communes, 12.000 habitants)
A-1-c) Date / dure De 1997 fin 2001 :
- dbut de conception du programme : 1997
- signature de la convention EDF-ADEME-SIE le 27 juillet 1999
ralisation : du 1
er
mars 2000 au 31 dcembre 2001
Autres acteurs concer-
ns
Convention EDF-ADEME-SIE ; lus des communes concernes (+
noter quil ny a pas eu daide du FACE pour ce projet)
Dimension territoriale communes = autorits concdantes des rseaux de distribution avec
renforcement/extension leur charge en zone rurale
A linitiative du projet, le Prsident du SIE a pris contact avec la
DR-ADEME pour mettre en place une opration dans le cadre des
accords EDF-ADEME
Les aides proposes dans le cadre de lopration taient cumulables
avec dautres aides existantes au niveau national, mais taient uni-
quement accessibles aux habitants du canton
A-2) Objectifs et cibles de l'opration
A-2-a) Objectifs gn-
raux de lopration
Pour le SIE : rduire les besoins en renforcement de rseau (en
moyenne 5 renforcements ncessaires par an, soit 150.000 /an) par

302
Cette grille d'analyse et les tudes de cas ont t faites dans le cadre de l'tude EVADEM que nous avons
ralise avec Stefan Thomas et Wolfgang Irrek du Wuppertal Institut for Climate, Environment and Energy pour
EDF R&D (Dpartements SEVE (Services, Energie et Espace de Vie) et Eco-Efficacit et Procds Industriels).
Annexe B.3.3 Exemple d'tude de cas : opration de MDE rurale du canton de Lanmeur
201
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
un traitement amont (en rduisant les consommations dlectricit
des particuliers et des professionnels amener les particuliers
diminuer leur consommation nergtique)
Pour ADEME et EDF :
- amliorer lquipement lectrique thermique des logements des
clients participants
- tendre ensuite ce type dactions de Matrise de la Demande en
lectricit au niveau national
A-2-e) Objectifs spcifi-
ques
Rduction des appels de puissance au travers de la matrise des
consommations dlectricit
A-2-d) Objectifs opra-
tionnels
- but du plan de communication : que les clients EDF prennent
contact avec le conseiller nergie (objectifs de 480 clients visi-
ts en 5 ans)
- encourager la ralisation de travaux susceptibles dentraner
une diminution des consommations dnergie
- objectifs quantitatifs cibls sur les dparts identifis en
contrainte (baisse de 10% de lappel de puissance en pointe)
A-2-b) Secteur concern
et public vis
secteur rsidentiel ; ciblage selon les actions :
- clients EDF (particuliers et professionnels) quips dun chauf-
fage lectrique (soit 2 000 sur 7 800 clients au total) pour les
aides
- toute la population pour les conseils gratuits et le plan de com-
munication
A-2-c) Energie(s)
concerne(s)
lectricit
A-2-f) Usage cible Pour les aides aux travaux : usages thermiques de llectricit
Pour la sensibilisation : tous les usages
A-3) Actions ralises
Instrument(s)
dintervention
Incitation (financement), conseil (mini-diagnostic) et sensibilisation
(information)
Liste des actions pr-
vues / entreprises
- plan de communication : information des habitants sur
lopration par un courrier de leur maire, puis envoi par le SIE
dune plaquette de sensibilisation tous les clients EDF + pla-
quettes dinformation complte diffuses par le biais des lus,
secrtaires de mairieet autres relais locaux (associations, etc.)
- information et conseils gratuits avec un guichet unique
dinformation dont les coordonnes taient sur tous les sup-
ports, avec galement un interlocuteur unique, le conseiller
nergie
- audit gratuit (visite) pour identifier les travaux raliser avec
une formation des professionnels amens raliser ce diagnos-
tic
- aides financires pouvant atteindre 70 % du cot des matriels
et plafonnes 9 000 F (1372) pour : isolation (combles (42),
murs(33), sols(6)), remplacement des ouvrants (677), VMC et
calfeutrement (45), remplacement des appareils de chauffage
(1271), insert bois (3), programmateurs (149) ou relais heures
creuses (3), dlesteur (75), rgulation chauffage (156)
(le chiffre entre parenthses correspond aux nombres de dossiers ou
dlments remplacs)
Annexe B.3.3 Exemple d'tude de cas : opration de MDE rurale du canton de Lanmeur
202
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Problmes rencontrs contrainte juridique (utilisation de fonds publics pour des travaux
en partie prive)
A-4) Logique dintervention
A-4-a) Barrires et situa-
tion du march initiales
Mauvaise information des particuliers sur les consommations
lies aux usages thermiques. Surcot des appareils performants et
de lisolation.
A-4-b) Processus de l'op-
ration et liens entre les
actions
La logique dintervention tait la suivante :
communication (contact courrier) intrt des clients visite /
audit gratuit ralisation de travaux de MDE
Deux points sont alors observer :
- la causalit entre lopration et la ralisation de travaux
- la causalit entre la ralisation de travaux et les volutions de
contraintes sur le rseau
Le premier point correspond lvaluation de la campagne de
communication et des rsultats gnraux de lopration (nombre
de clients participants, de travaux aids, etc.).
Le second fait lobjet dune hypothse qui est ensuite vrifier
par lvaluation. Cette hypothse est de supposer que lvolution
de la contrainte sur un dpart est due aux actions de MDE, si le
taux de participants sur ce dpart est dau moins 60%.
Il faut aussi tudier lessaimage, car ici lopration nest pas
cible a priori sur les dparts en contrainte. Il faut donc regarder
si la rpartition des participants suit suffisamment celle des d-
parts mal aliments.


B.3.3.2 Elaboration de l'valuation


A-5) Description de lvaluation
A-5-a) Evaluateur(s)
valuation technique (F. Nadaud (CIRED))
valuation conomique (Daigremont Consultant)
valuation sociologique (C. Laumonier (CSTB) et M. Brun (AD-
VALOR)
A-5-b) Objectifs de
lvaluation
Pour lvaluation mi-parcours :
- perception du concept de matrise de la consommation
dlectricit par le grand public (tude sociologique)
Pour le bilan final :
- objectif gnral de lvaluation : pouvoir reconduire une
nouvelle opration de ce type sur une zone identique ou pro-
che (dterminer les forces et les faiblesses de lopration)
- valuer le succs du dispositif daides (nombre de demandes,
effet dentranement (investissements faits suite aux aides))
- impacts en termes dconomies dnergie (et donc
dmissions) et dvolutions des contraintes sur le rseau
- quantifier les conomies de renforcement de rseau
- bilan sur lactivit conomique locale : volution du CA des
entreprises ayant particip lopration (retombes des tra-
vaux gnrs sur lartisanat local)
- perception de la dmarche par les acteurs professionnels, les
Annexe B.3.3 Exemple d'tude de cas : opration de MDE rurale du canton de Lanmeur
203
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
collectivits et le grand public
A-5-c) Planification et
dispositif dvaluation
(le dispositif dvaluation na pas t prvu avant lopration)
valuation en cours dopration (premier trimestre 2001) :
- tude sociologique par une sociologue du CSTB
- valuation des impacts en terme dconomies dnergie (r-
alise ?)
bilan final (ralis courant 2002) :
- valuation de la satisfaction des acteurs et sur la russite de la
communication et de l'opration
- valuation technico-conomique (automne 2002)
bilan global : synthse des autres tudes (HEOL)
Type dvaluation
Pour les valuations faites par F. Nadaud, Daigremont Consul-
tants, et la sociologue du CSTB, les valuations sont externes,
ex-post et la fois rcapitulatives (efficacit de lopration, tude
des rsultats) et formatives (objectif de reproductibilit de
lopration). Le bilan final ralis par Hol est un bilan interne,
mais qui sappuie sur les autres rapports.
Champs de lvaluation techniques (nergie/puissance) :
- cartographie des rseaux (identification des dparts et clients
mal aliments, avec rpartition respectivement par commune
et par dpart) et replacement des clients participants sur les
dparts BT concerns pour valuer si la rpartition gogra-
phique des taux de participation lopration correspond
avec celle des contraintes de rseau
- vrification de lhypothse faite sur le taux de participation
par dpart trait pour considrer un effet MDE possible
- comparaison de ltat des rseaux ( laide des donnes GDO
et des rsultats de lapplication CRIT-BT dEDF) avant/aprs
opration avec prise en compte des volutions du rseau
(nombre de clients, douvrages, etc.)

conomiques :
estimation, du point de vue du syndicat de communes et sur la
zone concerne (en sappuyant sur la mthode de calcul de ren-
tabilit conomique dfinie par les circulaires FACE de 95) :
- du cot des renforcements de rseau prvisibles la date de
dmarrage de l'opration (ex-ante)
- du cot de l'opration de MDE (actions chez les usagers,
diminution de la taxe locale sur l'lectricit et cot actualis
des investissements de renforcement diffrs) (ex-post)
vrification des hypothses faites pour les calculs technico-
conomiques :
- suivi des travaux de renforcement effectivement raliss
(comparaison avec hypothses initiales, rpartition gogra-
phique, etc.)
- dtermination dun cot de renforcement moyen (ex-post)
bilan conomique par acteur :
- frais de gestion de l'opration
- cots des travaux et montant des aides accordes
Annexe B.3.3 Exemple d'tude de cas : opration de MDE rurale du canton de Lanmeur
204
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
- conomies sur les factures dnergie
- gains en investissement pour les rseaux et pertes de TLE
(taxes locales dlectricit)
- bilan global (tous acteurs considrs) appel bilan social
- nombre demplois pour les artisans ( partir des calculs sur le
chiffre daffaire que reprsente pour eux lopration)

enqute sociologique perception/opinion des participants
pour les aspects suivants :
- organisation de lopration (partenariat / rle des acteurs)
- relation des usagers avec le coordinateur
- procdures financires daides
- conseils reus
- solutions mises en place
+ de manire gnrale : perception et appropriation de
lopration

autres :
- indicateurs de succs de lopration (et notamment du plan de
communication) cf. A-11
- enqute qualitative auprs des diffrents acteurs de
lopration (mairies, artisans, banques, BET) ainsi quauprs
de clients EDF, portant sur la satisfaction par rapport un en-
semble de points de lopration
- gains non montaires : point abord mais non trait (fait par-
tie des recommandations)


B.3.3.3 Ralisation de l'valuation


A-6) Donnes et mthodes dvaluation utilises
Donnes utilises et leurs
sources (collecte)
techniques (nergie/puissance) :
- donnes GDO et CRIT-BT fournies par EDF (cf. annexe du
rapport de F. Nadaud pour les dtails)
- donnes fournies par le SIE
- donnes sur les participants recueillis par Hol
conomiques :
- factures (cots de lopration de MDEc)
- factures EDF envoyes par les participants pour obtenir les
aides
- estimation des cots vits faite pour la demande au FACE
- cots des travaux antrieurs de renforcement de rseau (pour
vrifier lestimation des cots vits)
- donnes rgionales sur les CA des catgories de profession-
nels concernes par lopration
autres :
- rponses lenqute sur la satisfaction des acteurs
- entretiens de la sociologue avec un chantillon de 10 partici-
pants
Annexe B.3.3 Exemple d'tude de cas : opration de MDE rurale du canton de Lanmeur
205
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Traitement et analyse des
donnes
techniques (nergie/puissance) :
- utilisation des donnes GDO et CRIT-BT pour faire ltat des
lieux du rseau avant/aprs (identification des dparts en
contrainte et des clients mal aliments)
- recoupement des bases de donnes utilises pour rattacher les
participants leur dpart BT
- reprage des dparts BT avec un taux de participants suffi-
sants
- comparaison de ltat du rseau en ce point pour valider
leffet de la MDE
conomiques :
- estimation des cots vits de renforcement partir du pro-
gramme dinvestissement dtaill du SIE avec un terme fixe
(poste) et un terme variable (lignes) en prenant en compte les
caractristiques des dparts traits (estimation ex-post)
- comparaison des deux estimations (ex-ante et ex-post) des
cots vits
- valuation du gain sur facture pour les participants
autres :
- mthode CAUTIC
303
(pour ltude sociologique)
Rfrentiel - pour la comparaison de ltat des rseaux : comparaison
avant/aprs et vrification des hypothses sur les taux de par-
ticipation
- pour les calculs conomiques : vrification des hypothses
initiales (comparaison estimations ex-ante et ex-post)
- pour le calcul des conomies dnergie : comparaison des
factures avant/aprs travaux avec application dun taux d
laction de MDE + actualisation sur la dure de vie suppose
de laction considre
- pour lvaluation de la communication : objectif initial +
comparaison avec taux de retour moyen des activits de mar-
keting dEDF
Biais pris en compte facteurs climatiques : pris en compte, notamment humidit et
vent paramtres importants en Bretagne
effet rebond : explicitement abord dans le rapport technique, il
na pas pu cependant tre valu quantitativement avec le dispo-
sitif prvu. Lvaluateur recommande de le traiter car il est not
qualitativement dans ltude de satisfaction des acteurs.
effet daubaine : il est abord sous deux angles :
- les participants en rsidence secondaire (aussi appel ici effet
redistributif) qui seraient entre 17 et 30% des participants
- les participants hors zone de contrainte
Leffet daubaine correspond ici aux risques dus au fait que
lopration nest pas cible a priori sur les dparts en contrainte
que lon voudrait traiter.
effet boule de neige : trait qualitativement et indirectement
dans ltude sur la satisfaction des acteurs : des participants ont

303
CAUTIC : Conception Assiste par lUsage pour les Technologies, lInnovation et le Changement. La m-
thode a t invente par Philippe Mallein du CNRS et labore ds 1989 notamment au sein du Laboratoire Mu-
tations Techniques et Sociales du CSTB, en appui des activits du Service Informatique et Btiment
Annexe B.3.3 Exemple d'tude de cas : opration de MDE rurale du canton de Lanmeur
206
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
contribu faire participer dautres clients par le bouche oreille
+ pour les artisans, lopration a relanc lintrt des particuliers
et suscit des travaux hors opration
effet de persistance : non trait car lvaluation est trop proche
de lopration, mais fait partie des points suivre dans les re-
commandations
effet Hawthorne : nintervient pas pour ltude technique, car il
ny a pas eu de contact direct entre les participants et les valua-
teurs. Il nest pas pris en compte non plus pour ltude sociologi-
que, alors que les entretiens personnels peuvent y donner lieu.
Erreurs et incertitudes Des problmes rencontrs dans la comparaison de ltat des r-
seaux avant/aprs, car les donnes disponibles ne sont pas les
mmes.
Difficults pour replacer les clients participants sur les dparts
concerns (cartographie du SIE non disponible).
Hypothses pour dfinir les rsidences comme principales ou
secondaires (sans possibilit de vrification).
Hypothses pour les calculs des gains en investissements de r-
seau vits qui conduisent une fourchette hypothses
basse/haute.


B.3.3.4 Rsultats de l'opration



A-7 Cots estims et rels
A-7-a) Cots de chaque
action
Mailing / plan de communication
Cots des travaux de MDEc
30.000
1.729.000
Autres cots pour l'op-
ration
Dpenses de matriel et danimation
Emploi-jeune
Pertes estimes de TLE (pour le SIE)
31.557
9.040
3.000
A-7-b) Cots vits de
production dnergie
Juste estimations des conomies de facture dlectricit pour les
participants (cf. bnfices suivant les acteurs)
A-7-c) Cots vits de
rseau
Hypothse haute
Hypothse basse
146.000
53.000
A-8) Analyse Cots/Bnfices
A-8-a) Cot total de
l'opration
1.802.597
A-8-b et c) Cots suivant
les acteurs et par action
ADEME : - dpenses matriels/animation
- aides financires pour les travaux)
- total
EDF : - emploi jeune
- mailing / communication
- total
SIE : - dpenses matriels/animation
- pertes estimes de TLE
- total
Conseil Gnral (emploi-jeune)
Conseil Rgional (emploi-jeune)
15.779
372.000
387.779
1.753
30.000
31.753
15.778
3.000
18.778
2.287
5.000
Annexe B.3.3 Exemple d'tude de cas : opration de MDE rurale du canton de Lanmeur
207
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Participants (cots des travaux leur charge,
mais pas de donnes sur aides reues autres que
celles de lopration)
1.357.000
Bnfices suivant les ac-
teurs
SIE : - investissements de rseau vits / Hyp.
Haute
Hyp. Basse
Participants : - estimations au bout dun an
- estimations actualises au bout de 5 ans
- estimations actualises au bout de 10 ans
- estimations actualises au bout de 15 ans
Entreprises (isolation / chauffage / lectricit)
146.000
53.000
59.000
159.000
268.000
341.000
1.729.000
A-9) Impacts environnementaux
A-9-a) Emissions Non abord.
A-9-b) Economies
dnergie/rduction de la
charge
Non trait spcifiquement. Juste abord aux travers des factures
des participants et des valuations de ltat du rseau.
A-9-c) Autres
A-10) Autres impacts
A-10-a) Impacts sur le
march
relance de lintrt pour le chauffage lectrique et suscit de
nouveaux chantiers dinstallation (selon les professionnels)
A-10-b) Autres perception/appropriation de lopration par les participants
A-11) Indicateurs de succs / checs
A-11-a) Participation 459 clients visits
374 demandes daides financires
A-11-b) Cots Pas destimations ex-ante des cots de lopration
Effet dentranement :1.700.000 investis pour 370.000
daides
A-11-c) Impacts du plan
de communication
Double mailing (lettres du maire + du SIE) 459 participants
A-11-d) Interactions entre
les acteurs
Bonne coordination. Interlocuteur unique (conseiller nergie)
pour les participants.
A-11-e) Autres Satisfaction globale de lensemble des acteurs.



B.3.3.5 Exploitation de l'valuation


Limites (de l'opration) Evaluation non prvue au dpart problme pour le suivi des
consommations des participants
Pertinence du choix de cibler sur les usages thermiques de
llectricit ?
Points transposables (de
l'opration)
Approche dopration macro reconductible (logique
dintervention et mcanismes dintervention) sur des territoires
analogues (zone rurale) mais ncessite une analyse pour le choix
du vecteur cible
Annexe B.3.3 Exemple d'tude de cas : opration de MDE rurale du canton de Lanmeur
208
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Rapport (si disponible) :
contenu, prsentation
rapport technico-conomique
(lments de cadrage sur l'opration de Lanmeur ; valuation de
limpact
sur les rseaux lectriques ; valuation du bilan conomique du
point des diffrents acteurs en prsence ; prconisations pour
lvaluation de cette opration et dventuelles expriences futu-
res de ce type ; annexe technique sur le traitement des donnes
utilises)
rapport enqute satisfaction
(prsentation de lopration ; objectifs et mthodes de
lvaluation ; constats de lenqute (par acteur) ; dductions des
constats ; conclusions et prconisations)
rapport enqute sociologique
bilan de lopration (synthse des autres rapports)
Utilisation / r-
appropriation / diffusion
communications :
- dans la lettre de lADEME, dans laquelle est aborde la suite
de la dmarche de MDE amorce, par le biais de laccord
EDF-ADEME : une opration de MDE est en cours de rali-
sation dans la Loire. Dans le Rhne, une opration similaire
sera lance d'ici la fin de l'anne. Deux autres projets, d'un
type nouveau ( partir d'une analyse exhaustive portant sur
l'ensemble des zones rurales d'un dpartement), devraient se
concrtiser dans l'Oise et la Mayenne. L'objectif est de sys-
tmatiser ce travail d'inventaire gographique de la demande
d'lectricit dans chaque dpartement.
recommandations :
pour lopration
- dfinir le plus prcisment possibles les objectifs (de manire
quantitative et cible)
- organiser une runion dinformation complmentaire et de
prise dengagement pour les participants
pour son valuation
- mieux valuer les volutions des consommations dnergie
des clients participants
- mieux systmatiser la collecte de certaines donnes (ratta-
chement des clients participants leur dpart BT ; rsidence
principale / secondaire ; etc.)
- poursuivre le suivi de lvolution du rseau et des contraintes
- raliser une valuation prospective du programme
dinvestissements du SIE laide de lapplication INVEST-
BT avec accord entre EDF et le SIE sur les paramtres
dentre, pour obtenir une comparaison entre scnarii de rf-
rence et ralisations effectives et ainsi disposer dune valua-
tion indirecte des effets de la MDE
- mener une tude de limpact de la MDE sur les programmes
de renforcement (y a-t-il eu une modification des renforce-
ments planifis ?)
- harmoniser les donnes entre le SIE et EDF
- dterminer le seuil minimum dincitation financire nces-
saire au passage lacte (limiter leffet daubaine)
Annexe B.3.3 Exemple d'tude de cas : opration de MDE rurale du canton de Lanmeur
209
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
- mieux cibler les participants
- mieux organiser la concertation entre les valuateurs et le
comit de pilotage de lopration
- capitaliser les expriences de MDE



B.3.3.6 Analyse critique de l'valuation


Objectifs de lvaluation

Les valuations nont pas t prvues au dpart, mais dans les rapports chaque valuateur a
bien prcis ces objectifs. Toutefois il est difficile de savoir jusqu quel point ceux-ci ont t
fixs avec les commanditaires de lvaluation/comit de pilotage.

Introduction / prsentation

La description de lopration est assez claire dans chaque rapport, et en les recoupant il est
possible dobtenir une vision assez complte de lopration. Par ailleurs le document de bilan
final synthtise les autres rapports et permet une lecture rapide des rsultats de lopration.

Confrontation objectifs/rsultats

Pour ce qui est de lvaluation technico-conomique, les rsultats sont compars
rigoureusement avec les hypothses objectifs de dparts (sur lessaimage des participants, les
estimations de cots vits de rseau, etc.). Lvaluateur recherche bien chaque fois
expliquer les carts ou la remise en cause des hypothses.

Rfrentiel dvaluation

Ct technique, ltude ralise une valuation de ltat des rseaux aussi bien avant quaprs
lopration. En revanche, lvaluation ntant pas prvue initialement, les informations sur les
consommations dnergie des participants avant opration sont difficiles trouver ou tablir.
De mme concernant lactivit des professionnels concerns par les travaux.

Biais / facteurs dajustement

La plupart des biais sont abords, mais de manire qualitative seulement.

Pour les facteurs climatiques, la prise en compte consiste comparer les donnes dhumidit
et de vent des deux priodes (avant/aprs) pour dtecter dventuelles diffrences
significatives. Les questions de temprature sont supposes prises en compte par la GDO
(mme si des doutes sont formuls ce sujet).

Lvaluation de leffet rebond fait partie des recommandations du rapport technico-
conomique. Ceci semble dautant plus important la lecture de lenqute sociologique qui
fait apparatre la dimension de confort comme un des rsultats principaux pour les
participants.
Annexe B.3.3 Exemple d'tude de cas : opration de MDE rurale du canton de Lanmeur
210
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006

Leffet daubaine est trait en partie par ltude sur lessaimage des participants. Mais le
problme des rsidences secondaires demeure. Dans lenqute sociologique il apparat que 4
des 10 personnes interroges avaient prvu de faire des travaux avant lopration. Mais les
aides ont alors permis de sorienter vers des solutions plus efficaces. Leffet daubaine est
renforc chez certains participants habitus des aides (agriculteurs, personnes ges ou
handicapes).

Les recommandations portent aussi sur la poursuite du suivi, ce qui permettrait dvaluer les
effets de persistance, et notamment de vrifier les dures relles de report de renforcement.

Erreurs et incertitudes

Pour lvaluation technico-conomique, lvaluateur fait part des problmes lis certains
paramtres :
- problmes rencontrs dans la comparaison de ltat des rseaux avant/aprs, car les don-
nes disponibles ne sont pas les mmes
- difficults pour replacer les clients participants sur les dparts concerns (cartographie du
SIE non disponible)
- hypothses pour dfinir les rsidences comme principales ou secondaires (sans possibilit
de vrification)
Certains doutes ne sont pas claircis, mais ils sont prsents clairement.
Les hypothses pour les calculs des gains en investissements de rseau vits conduisent
une fourchette hypothses basse/haute. Un des principaux rsultats est bien prsent en tenant
compte de sa sensibilit certaines hypothses.

De mme pour les taux de participation, plusieurs prsentations sont possibles :
pour un mme rsultat (459 clients visits dont 374 ont ensuite bnfici daides pour des
travaux)
- si on prend comme rfrence lensemble des clients EDF du canton (7800) :
taux de contacts (visites) : 5,9% ; taux de participation (travaux) : 4,8%
- si on prend juste les clients avec chauffage lectrique (2000) :
taux de contacts (visites) : 22,9% ; taux de participation (travaux) : 18,7%
- si on prend juste les clients avec chauffage lectrique et logements de plus de dix ans
(1340) :
taux de contacts (visites) : 34,2% ; taux de participation (travaux) : 27,9%

Par ailleurs pour regarder lefficacit des visites, on peut regarder le nombre de personnes
ayant fait des travaux parmi les personnes visites. Le taux est alors de 82,5 %, taux dautant
plus fort que ceux nayant pas fait de travaux sont soit des personnes ne pouvant recevoir
laide (chauffage pas lectrique), soit des personnes dont le logement tait dj performant.

Logique dintervention

Le processus de lopration est bien dcrit. Lenqute sur la satisfaction des acteurs permet de
rendre compte de sa perception par chacun dentre eux. Ce qui est complt, pour ce qui
concerne les participants, par ltude sociologique.

Ltude sociologique permet de voir comment a t perue la logique de lopration par les
participants.
Annexe B.3.3 Exemple d'tude de cas : opration de MDE rurale du canton de Lanmeur
211
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006

En revanche concernant lactivit des professionnels, les valuateurs regrettent limpossibilit
de disposer dinformations suffisantes pour faire une analyse de lvolution du march (les
professionnels refusant de communiquer leurs chiffres dactivit).

Enfin, le choix de cibler lopration sur les usages thermiques de llectricit nest jamais
analys. Autant le plan de communication et lorganisation de l'opration sont valids par
lvaluation, autant ce choix de la cible technique nest pas tudi. Pourtant il napparat pas
comme vident.

Collecte des donnes

Les rapports prsentent trs clairement les sources de donnes, et en discutent le cas chant
la fiabilit. Cette question se pose notamment pour les donnes sur ltat des rseaux.

Traitements et analyses des donnes

Les valuateurs dcrivent assez clairement leurs mthodes globales danalyse, mais cela
devient parfois plus confus pour certains dtails.

Pour ce qui est des conomies dnergie, les estimations ne sont pas explicites. Il nest pas
possible de vrifier comment elles ont t calcules.

Concernant ltat des rseaux, de mme ne sont prsents que les tableaux de rsultats (dpart
en contrainte ou pas), sans prciser comment est identifi un dpart en contrainte. Aucune
mesure de terrain nest ralise. Ce qui fait dailleurs partie des recommandations de
lvaluateur, en faisant rfrence lopration de Maine-et-Loire. Ceci est dautant plus
important que les donnes GDO sont critiques par certains bureaux dtudes spcialiss.

Pour ce qui est de lvaluation conomique, du plan de communication et lenqute
sociologique, les mthodes sont l claires et transparentes.

Transparence de lanalyse
Les rsultats sont donns, mais il manque parfois les dtails des tapes pour les obtenir (cf.
remarques ci-dessus sur lvaluation de ltat des rseaux).

Aspects autres que techniques abords par lvaluation
- aspects conomiques :
Une analyse cots/bnfices est ralise sous la forme dun bilan consolid des dpenses et
recettes pour chacun des acteurs considrs (appel bilan social par lvaluateur), et qui
permet un bilan global pour la collectivit.
Par ailleurs une analyse dpenses/recettes est faite pour chaque acteur.

En ce qui concerne lestimation des cots vits de renforcement, lvaluateur refait une
estimation partir des donnes sur les renforcements antrieurs pour dterminer un cot
moyen de renforcement, tenant compte des deux parties :
- partie fixe (poste BT)
- partie variable lie aux linaires
Lvaluateur constate alors des carts parfois importants au cas par cas, mais au final la valeur
moyenne dfinie est proche de lestimation retenue avant lopration pour le dossier pour le
Annexe B.3.3 Exemple d'tude de cas : opration de MDE rurale du canton de Lanmeur
212
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
FACE.

- aspects environnementaux :
Pas dvaluation environnementale.

Rapport aux clients / la cible
Une tude sociologique a t ralise, dont les principaux enseignements sont les suivants :
- processus (droulement) de lopration bien compris par les participants
- nom de lopration, partenariat/rle des acteurs, objectifs de lopration : mal compris
- le facteur dclencheur est la possibilit de recevoir une aide financire. Le plan de
communication permet une premire information, mais sans les subventions les personnes
nauraient pas particip lopration
- satisfaction gnrale quant aux travaux et aux solutions installes / modifications bien
acceptes car dcides par les participants eux-mmes
- bnfices pour la collectivit pas toujours bien compris / interrogations par rapport une
opration qui napparat pas comme gagnant/gagnant mais comme de lassistance gratuite
- opposition entre des participants qui ont bien intgr la logique collective de lopration et
qui ont diffus linformation autour deux, et ceux qui nen peroivent que lintrt
individuel et qui restent sceptiques quant aux motivations des acteurs, et notamment
dEDF
- lopration est plus perue comme une opration de rnovation de lhabitat que
dconomies dnergie
- problmes de dlais pour le remboursement des aides / lourdeurs administratives
- lopration a renforc la bonne perception du chauffage lectrique par les usagers

Par ailleurs il ressort de lvaluation de la satisfaction des acteurs que le gain en image pour
lADEME et EDF est consquent.

Remarques sur le rapport dvaluation et ses rsultats
Les rapports fournissent un certain nombre de recommandations dont la plupart portent sur
lvaluation.

Pour lvaluation, ces conseils concernent surtout la collecte des donnes :
- prvoir lvaluation ds le dbut
- mieux organiser la concertation entre les valuateurs et le comit de pilotage de
lopration et donc mieux dfinir les objectifs de lvaluation
- poursuivre le suivi de lopration pour en vrifier les rsultats dans la dure
- raliser des mesures sur site pour vrifier les mthodes de simulation utilises
Par ailleurs un effort plus important est recommand pour valuer limpact sur les
consommations dnergie.

Quelques recommandations sont faites aussi concernant lopration elle-mme, notamment
dans le rapport de ltude sociologique (cf. conclusions ci-dessous).

Les rapports ne prsentent pas de documents particuliers en annexe (sauf celui de ltude
sociologique qui contient une brve description de la mthaude CAUTIC et les lettres
envoyes aux habitants par leur mair et le prsident du SIE), mais la plupart des donnes
utilises sont dcrites.

Principales conclusions de lvaluation
Annexe B.3.3 Exemple d'tude de cas : opration de MDE rurale du canton de Lanmeur
213
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006

Concernant les limites de lvaluation de cette opration :

limites gnrales :
dispositif dvaluation non prvu au dpart donc problme de carences de mesures et
dindicateurs, surtout pour les aspects techniques et conomiques

limites pour lvaluation technico-conomique :
- limites lies aux problmes de collecte des donnes et aux hypothses qui ont d tre fai-
tes (cf. erreurs et incertitudes)
- naborde pas suffisamment la reproductibilit dune telle opration (pourtant objectif im-
portant pour EDF et lADEME)
- laisse des points en suspens et notamment :
- la vrification de la mthode utilise pour valuer ltat du rseau par des mesures
sur site
- lvaluation des volutions de consommation dnergie
- rapport assez technique, sans doute difficile sapproprier pour tous les acteurs

limites pour lvaluation conomique :
- problmes pour obtenir des donnes / indicateurs sur lactivit des artisans
- valuation peu transparente pour le bilan conomique concernant les participants

limites pour ltude sociologique :
lchantillon est trs faible (10 personnes) ce qui mne relativiser les conclusions de cette
tude. Toutefois les principales conclusions de cette tude sont confirmes par lenqute de
satisfaction ralise en fin dopration par Daigremont Consultant (mais pas de donne sur le
nombre de participants alors contacts).

Problmes principaux rencontrs pour lvaluation :

Les problmes principaux viennent du fait que lvaluation na pas t prvue ds le dpart.
Ainsi, pour lvaluation technique, cela pose deux problmes importants :
- pas de suivi initial des consommations dnergie des participants et donc difficults pour
valuer les impacts en terme dconomies dnergie
- loptique rseau na pas t clairement prise en compte pour lopration, ce qui a compli-
qu la collecte des donnes pour ltude de ltat des rseaux avant/aprs et pour le ratta-
chement des clients participants leur dpart BT


Points intressants de lvaluation :

pour lvaluation technico-conomique :
- approche cartographique intressante par le biais des donnes de rseau disponibles
(GDO, CRIT-BT) : solution explorer pour ce type dopration
- volont de transparence dans la prsentation de ltude : les hypothses sont en gnral
prcises et soumises la discussion
- rigueur dans la dmarche : vrification des hypothses initiales / confrontation entre le
droulement suppos de lopration et ses rsultats effectifs

pour lvaluation conomique :
Annexe B.3.3 Exemple d'tude de cas : opration de MDE rurale du canton de Lanmeur
214
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
- intrt de la dmarche avec un bilan par acteur et un bilan global (dit bilan social)
- prise en compte de tous les acteurs, et notamment du gain dactivits conomiques locales
(traduites en nombre demplois (15) que reprsentent laugmentation de chiffre daffaire
lie lopration), mais ce gain dactivit pour le secteur de lhabitat nest pas confront
la perte potentielle dactivit en terme de travaux sur les rseaux (+ problmatique du
patrimoine des autorits concdantes)

en gnral :
Cette opration est particulirement intressante car elle a fait lobjet de pas moins de trois
valuations externes (F. Nadaud (CIRED), Daigremont Consultant, C. Laumonier (CSTB))
portant chacune sur des aspects diffrents (techniques, conomiques et communication, socio-
logiques). Sy ajoute en outre un bilan fait par le matre duvre qui synthtise lensemble des
rapports avec sa propre connaissance de lopration.

De plus, les diffrents valuateurs ont travaill en veillant rester en contact, de manire
partager leurs conclusions pour obtenir une comprhension globale de lopration la meilleure
possible.

Ainsi, lapproche valuative est ici pluraliste aussi bien dans le sens aval (les valuateurs
cherchent analyser les points de tous les acteurs concerns) que dans le sens amont (plu-
sieurs valuateurs avec des spcialits diffrentes).

Amliorations proposes pour lvaluation

Comme nous lavons vu, les propositions portent surtout sur les problmes de collecte de
donnes, auxquelles sajoutent les recommandations daccompagner les tudes de simulation
par des mesures sur site.

Exemple de recommandations pour les donnes techniques :
Le suivi des clients MDE pourrait tre grandement amlior si les rattachements au rseaux
taient aliments systmatiquement, ce qui faciliterait les fusions de fichiers de travaux avec
les donnes rseau.
Nous insistons sur limportance du suivi plus dtaill des consommations des clients, afin de
voir limpact rel en terme de facturation, puisque nous avons longuement soulign que ce
sont les gains en facturation qui rembourseront la collectivit.

rfrences dautres oprations

F. Nadaud mentionne une autre opration du mme type (macro-prventive) ralise dans le
Rhne et pour laquelle Transnergie a ralis une valuation (avec un rapport) en 2001, pour
le comit de pilotage compos du SYDER, de lADEME Rhne-Alpes et dEDF-GDF Servi-
ces Vienne Pays de Rhne. Le niveau de donnes obtenu tait apparemment encore plus d-
saggrg (piste ventuellement explorer).

F. Nadaud cite par ailleurs ltude faite par FR2E en Maine et Loire, pour suggrer des mesu-
res sur site sur un chantillon de dparts slectionns pour valider sa mthode et pour suivre
lvolution du rseau en ces points plus long terme et les consommations.

Recommandations / amliorations pour des actions de MDE

Annexe B.3.3 Exemple d'tude de cas : opration de MDE rurale du canton de Lanmeur
215
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Les points cls identifis de lopration sont les suivants :
- la pertinence de la double logique individuelle et collective : le but de la dmarche tait
de mobiliser chacun la fois en tant quindividu et en tant que citoyen. Ainsi la motiva-
tion premire des participants taient bien sr les bnfices directs quils en retiraient
(amlioration du confort, rduction des factures dnergie). Mais le fait que lopration ait
des retombes pour la collectivit (bonne gestion de largent public, impacts environne-
mentaux) tait aussi source dimplication, notamment pour en parler autour de soi et dif-
fuser linformation.
- limplication des lus : elle fait partie de cette double logique. Elle est prise comme un
gage de srieux par les habitants, ce qui les encourage participer. Ainsi elle a fait perce-
voir lopration non comme commerciale, mais comme dintrt gnral (point que lon
retrouve dans les expriences anglo-saxonnes). Ce qui permet dviter une barrire parfois
rencontre, la mfiance des clients vis--vis des propositions dEDF. En outre, la forte
implication des lus a aussi assur la bonne diffusion de linformation.
- guichet unique et bon fonctionnement des relais dinformation : la cohrence des sup-
ports utiliss, qui renvoyaient au mme contact clairement identifi, a permis aux diff-
rents actions de communication de rellement sajouter. Les raisons identifies du succs
du plan de communication sont donc un message clair, rpt par les diffrents acteurs,
combin une logique dun interlocuteur unique pour les participants
- montage des dossiers simple
- rle prpondrant du conseiller nergie (qualit des conseils, disponibilit) lopration
avait un visage clairement identifiable et identifi
- importance dun rseau local de professionnels bien informs

Les recommandations faites sont les suivantes :
- dfinir le plus prcisment possibles les objectifs (de manire quantitative et cible)
- organiser une runion dinformation pour les participants de manire assurer la percep-
tion de la dimension collective de lopration et traduire concrtement leur engagement
dans le projet, et pour favoriser le bouche oreille
- renforcer les rseaux dacteurs locaux (lus, professionnels, associations, etc.)
- faciliter les versements de remboursement des aides
- inscrire lopration dans la dure
- dterminer le seuil minimum dincitation financire ncessaire au passage lacte (limiter
leffet daubaine)
- mieux cibler les participants (aussi pour limiter leffet daubaine)
- renforcer la communication sur les rsultats de lopration (retour pour les participants et
visibilit pour les acteurs partenaires de lopration)
- mettre en commun les expriences tires des oprations de MDE (capitalisation) :
Il faudrait premirement croiser les rsultats des diffrentes expriences de MDE : nul doute
que ce croisement ne soit fcond en enseignements, tant sur lintrt des mthodes (les diff-
rentes faons denvisager la matrise de la consommation dlectricit) que sur celui des mo-
des opratoires (les moyens mis en oeuvre pour aboutir ce rsultat, la pese des rsultats, et
les rsultats eux-mmes).
Il faudrait ensuite envisager une autre opration intermdiaire avant modlisation, dont lobjet
serait cette fois de travailler les outils de mesure des rsultats, tant techniques (conomies
dlectricit) quconomiques (conomies dargent).

Sources dinformation

- lettres de lADEME n72 (dcembre 2000) et n79 (octobre 2001)
Annexe B.3.3 Exemple d'tude de cas : opration de MDE rurale du canton de Lanmeur
216
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
- contact tlphonique avec Frdric Marchand (HEOL)
- rapport final sur lopration, ralis par HEOL en septembre 2002
- rapport dvaluation technico-conomique ralis par Franck Nadaud (CIRED) (janvier
2003)
- rapport dvaluation sur la satisfaction des acteurs et bilan global de lopration ralis par
Daigremont Consultants (janvier 2003)
- rapport de lenqute sociologique ralise par Chantal Laumonier et Michel Brun (CSTB)




217
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Annexe B.3.4 Analyse de campagnes de mesure des consommations d'nergie :
apports et rapports avec l'valuation


Le cabinet ENERTECH dOlivier Sidler a men des tudes par campagnes de mesures sur
les consommations dlectricit des mnages. Nous avons ralis une tude de cas de deux
de ces campagnes (CIEL et Ecodrme). Le but tait danalyser de manire critique les mtho-
des de mesures et danalyses utilises pour dfinir les diffrentes caractristiques des appa-
reils lectromnagers (puissance, nergie, etc.), et surtout de discuter de la porte des rsultats
prsents.

Ces campagnes de mesures ne sont pas des oprations de MDE. Mais nous utilisons des rsul-
tats issus de ces tudes. C'est pourquoi nous en avons ralis une analyse critique, notamment
pour faire ressortir le lien avec les approches d'valuation.


B.3.4.1 Prsentation des deux campagnes de mesure tudies en dtails


Campagne de mesures CIEL

Ralise en Sane et Loire, la campagne de mesures CIEL (Consommations Individualises
dElectricit dans les Logements) a permis de suivre 94 logements (soit 779 appareils repr-
sentant 31 types diffrents) pendant une dure dun mois chacun, ce qui a reprsent au final
11 campagnes de mesures entre dcembre 1994 et dcembre 1995.

Le but tait de crer une bibliothque des appareils lectromnagers regroupant leurs caract-
ristiques (puissance appele (niveau, frquence, spcificits), consommations, courbe de
charge horaire, variations intersaisonnires de consommation, puissances de veille, etc.) [Si-
dler 1996a].


Campagne de mesures Ecodrme

Ralis dans la Drme, cette opration a permis le suivi de 20 logements pendant 2 ans (1995-
1997). Les mesures portaient principalement sur les appareils lectromnagers et les circuits
lumire. Aprs un an tous les appareils et les ampoules ont t remplacs par des matriels
performants.

Les objectifs principaux taient de complter les mesures ralises lors de la campagne CIEL,
tudier la saisonnalit des usages suivis, comparer les appareils "classiques" et performants,
valuer les conomies ralisables par remplacement du matriel existant par des appareils
performants [Sidler 1996b, Sidler 1998].


B.3.4.2 Comparaisons de donnes


Le tableau suivant rcapitule les donnes de consommations par usage obtenues partir de
Annexe B.3.4 Analyse de campagnes de mesure des consommations d'nergie : apports et rapports avec l'valua-
tion
218
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
CIEL et d'Ecodrme, ainsi que les donnes affiches sur le site Internet d'ENERTECH
304
, et
les compare des ratios d'estimations faites par EDF.

U
s
a
g
e


f
i
n
a
l

type de donnes units CIEL Ecodrme
anne 1
Ecodrme
anne 2
site
ENER-
TECH (ap-
pareils stan-
dard)
site
ENERTECH
(appareils
performants)
ratio
EDF
305

conso moyenne 373 348 140 250 140 277
conso mdiane 315 291
cart-type 183 127
min 165 272
R

f
r
i
g

r
a
t
e
u
r

max
kWh/an
985 538
conso moyenne 581 726 319 600 319 516
conso mdiane 564 664
cart-type 201 201
min 278 451
R

f
r
i
g

r
a
t
e
u
r

-

c
o
n
g

l
a
t
e
u
r

max
kWh/an
1113 1139
conso moyenne 617 585 213 615 213 486
conso mdiane 491 452
cart-type 352 339
min 249 295
C
o
n
g

l
a
t
e
u
r

max
kWh/an
1497 1489
conso moyenne kWh/an 235 263 193 250 193 226
conso mdiane 212 223 192
cart-type 140 135 85
min 99 105 56
max

694 591 377
L
a
v
e
-
l
i
n
g
e

indicateur par per-
sonne
kWh/hab/an 72 67 49
conso moyenne kWh/an 262 277 258 285 272 345
conso mdiane 237 304 279
cart-type 139 84 92
min 81 103 36
max 566 356 323
L
a
v
e
-
v
a
i
s
s
e
l
l
e

indicateur par per-
sonne
kWh/hab/an 70,8 80 73
conso moyenne kWh/an 480 378 161 430 321 460
conso mdiane 329 330 92
cart-type 374 183 131
min 138 225 36
max 1387 683 323
S

c
h
e
-
l
i
n
g
e

indicateur par per-
sonne
kWh/hab/an 133 79 67
conso moyenne kWh/an 140 210 160 189
T

-
l

v
i
conso mdiane 128 201

304
cf. http://sidler.club.fr/page9.html
305
donnes issues du document d'estimations des consommations d'lectricit utilis par la Direction Commer-
ciale Particuliers et Professionnels OUEST d'EDF
Annexe B.3.4 Analyse de campagnes de mesure des consommations d'nergie : apports et rapports avec l'valua-
tion
219
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
cart-type 83 84
min 76
max 365 461

indicateur par per-
sonne
kWh/hab/an 43 56
Tableau 49 - comparaison de donnes moyennes de consommation par usage en France

Tout d'abord, il faut noter la forte dispersion des valeurs issues des campagnes de mesures
(aussi bien en cart-type qu'en tendue). Ces donnes sont donc analyser et utiliser avec
prcaution.

Pour chaque usage, la plupart des valeurs moyennes des campagnes CIEL, Ecodrme anne
1 et des ratios d'EDF restent du mme ordre de grandeur. Les carts entre les valeurs obte-
nues par campagnes de mesures (valeurs ENERTECH) et celles obtenues par estimations ba-
ses sur des hypothses de taux d'quipement et de taux d'utilisation ne sont pas plus impor-
tants que les carts qui peuvent parfois tre observs entre les valeurs de deux campagnes de
mesures. Cela souligne d'une part la forte variabilit des consommations relles d'nergie, et
d'autre part, qu'aucune des deux mthodes ne peut se prtendre plus prcise
306
.

Les tudes de terrain s'appuient sur des mesures et donc sur des consommations constates,
mais elles portent sur des chantillons rduits. Elles ont donc une marge d'erreur non ngli-
geable, car un comportement inhabituel peut modifier sensiblement les valeurs mesures.

Les estimations sont bases sur des statistiques de taux d'quipement, mais doivent aussi
dfinir des taux d'utilisation. Pour certains usages, cette valeur est dterminante, et introduit
galement une marge d'erreur importante. Par ailleurs, les campagnes de mesures ont pu
montrer que les consommations normalises
307
et relles peuvent tre sensiblement diffren-
tes.

Au final l'idal serait de coupler estimations et enqutes de manire itrative. Les estima-
tions donnent des mthodes de calculs de consommations d'nergie bases sur des hypothses
que les enqutes devraient tester et corriger pour affiner les estimations. Ainsi plutt qu'une
opposition des genres, ces deux alternatives sont complmentaires. C'est d'ailleurs ce principe
que l'OFGEM et l'Energy Saving Trust, responsables des programmes britanniques EESoP et
EEC, cherchent mettre en uvre pour valuer les actions ralises. L'valuation ex-post des
certificats d'conomies d'nergie devrait aussi aller dans ce sens.


B.3.4.3 Conclusions gnrales sur les tudes de terrain sur les consommations d'nergie



306
Olivier Sidler signalait l'poque des premires campagnes de mesure de ce type l'cart important entre les
rsultats mesurs et les valeurs estimes utilises par les fabricants ou les organismes comme le CEREN : on
dpense plus dargent faire des estimations et des calculs faux que chacun refait avec ses propres valeurs qu
unir ses efforts pour mener bien des investigations minutieuses. Et compte tenu de limprcision ahurissante
qui semble exister dans le domaine des valuations, on peut presque dire que les mesures faites, o quelles
soient faites, seront toujours plus reprsentatives que les valeurs utilises aujourdhui [Sidler 1996a p.8]
307
Les consommations normalises correspondent celles mesures lors de test normaliss, par exemple pour
dfinir les valeurs prsentes sur les tiquettes nergie. Elles sont diffrentes des estimations utilises par EDF
prsentes dans le Tableau 49.
Annexe B.3.4 Analyse de campagnes de mesure des consommations d'nergie : apports et rapports avec l'valua-
tion
220
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Des sources d'informations consquentes

Parmi les informations librement disponibles sur les usages de l'nergie dans les secteurs rsi-
dentiels et tertiaires, les tudes du cabinet ENERTECH sont sans conteste les rapports les plus
complets et les plus riches en enseignement. Ce sont trs probablement les campagnes de me-
sures les plus consquentes qui ont t (et sont) ralises en France. En ce sens, elles repr-
sentent des sources d'informations ne pas ngliger.

Ces campagnes ont notamment permis de valider des ordres de grandeur de valeurs moyennes
de consommation par usage, d'tudier les variations horo-saisonnires et les contributions
respectives de chacun des usages la courbe de charge. Ces analyses sont autant d'lments
utiles pour dfinir les priorits de plans d'action de MDE (voir aussi la synthse ralise par
Olivier Sidler sur les campagnes CIEL et Ecodrme [Sidler 1997]).


Les limites des campagnes de mesures

Les principales limites sont intrinsques : un cot lev, une ralisation ncessitant une bonne
coopration des participants (et donc un risque de biais d'auto-slection non ngligeable), une
mise en uvre lourde. De ce fait, les campagnes de mesure ne peuvent tre un outil courant
d'valuation.

Par ailleurs l'ensemble des travaux sur les consommations d'nergie mettent en lumire la
forte variabilit des consommations d'nergie dans le secteur rsidentiel et le nombre impor-
tant de paramtres pouvant influencer tel ou tel usage [Wood 2003]. L'analyse des donnes
mesures est donc trs complexe et difficile, de part le volume trs important de donnes
traiter, l'impossibilit de suivre tous les facteurs explicatifs des variations, etc.

De fait, les valeurs obtenues prsentent le plus souvent de fortes dispersions ( la fois en
cart-type et en tendue). Ce qui doit mener relativiser la prcision quantitative de ces rsul-
tats. Un des principaux dfauts des conclusions prsentes dans ces tudes est une tendance
vouloir gnraliser les rsultats obtenus, alors que les auteurs rappellent eux-mmes dans
leurs introductions les prcautions avec lesquelles il faut apprhender leurs donnes. Ceci est
particulirement vrai en terme de reprsentativit, puisque le cot des campagnes de mesure
limite de fait la taille de l'chantillon qu'il est possible de suivre.


Une logique de progression

A travers les diffrentes tudes ralises, on peut observer une relle progression dans les
connaissances acquises. L'exemple des diffrences entre CIEL et Ecodrme illustre bien ceci.
CIEL tait une premire campagne qui a servi de dfrichage, les connaissances sur les
consommations en situation relle tant alors trs faibles. Ecodrme a permis ensuite d'tu-
dier de manire plus approfondie et cible des hypothses qui n'avaient pu tre abordes
qu'a posteriori dans CIEL, comme la question de la saisonnalit ou l'importance des consom-
mations lies l'alimentation lectrique des chaudires murales.

Les connaissances s'affinent donc au fur et mesure des tudes, et les donnes gagnent en
prcision. Mais la tche parat considrable pour arriver une connaissance trs prcise des
usages domestiques de l'nergie, d'autant plus que ceux-ci voluent de plus en plus vite.
Annexe B.3.4 Analyse de campagnes de mesure des consommations d'nergie : apports et rapports avec l'valua-
tion
221
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006


Conclusions sur le rapport de ces tudes la dfinition
de mthodes d'valuation

Compte tenu des investissements qu'elles reprsentent, les campagnes de mesure doivent tre
envisages en fonction de leur utilit par rapport des besoins prcis. La premire vague de
campagnes de mesures ralises dans le cadre des accords EDF-ADEME avec le soutien de la
Commission europenne avait pour but de combler un manque des connaissances sur les usa-
ges de l'nergie dans le rsidentiel en conditions relles. L'objectif tait de mieux connatre
quels taient et o se situer les enjeux de la matrise des consommations d'nergie dans ce
secteur.

Depuis des campagnes ont t ralises pour des organismes locaux
308
dans le but d'affiner
ces connaissances pour des cibles particulires (logements sociaux, btiments de bureaux).
Cette dmarche peut tre compare une sorte d'audit nergtique pour caractriser des
gisements d'conomies d'nergie diffus.

Par ailleurs, les campagnes de mesures pourraient aussi tre utilises comme des moyens de
contrles ponctuels d'hypothses dveloppes par d'autres moyens d'analyse, moins lourds
mettre en uvre (par exemple pour l'valuation ex-post des certificats d'conomies d'nergie
pour tester certaines hypothses formules dans les fiches de calcul pour les actions standardi-
ses, cf. section II.3.1.4).

Enfin, de nouvelles technologies (d'appareils de mesure et de gestion de donnes) permettent
de concevoir une nouvelle approche des mesures des consommations d'nergie, non plus seu-
lement comme un outil ponctuel d'amlioration des connaissances, mais comme un outil in-
tgr de gestion des consommations.

Parmi les pistes de recherche, nous pouvons citer les techniques de dsagrgation de la
charge partir de la reconnaissance de la signature lectrique des appareils [Marceau 2000,
Norford 1996, Pihala 1998], avec des variantes avec l'utilisation de rseaux de neurones
[Yoshimoto 2000] ou de la logique floue [Kamat 2004]), le dveloppement de la domotique
[Kudo 2003, Martin 2004] ou d'outils de sensibilisation [Ueno 2006, Wood 2003] ou de suivi
des consommations par Internet [Westergren 1999].

Mills [2004] a par ailleurs ralis une synthse sur les nombreux outils dvelopps
309
aux
Etats-Unis pour analyser les consommations d'nergie de leurs clients rsidentiels dans le but
de les conseiller. Il souligne la forte variabilit de la qualit et des rsultats ( la fois en termes
de valeurs et de niveau de dtails) de ces logiciels, et propose de coordonner et d'harmoniser
les efforts dans ce domaine.

308
par exemple Montreuil en 2000-2001 [ENERTECH 2000, ENERTECH 2001a], ou actuellement en PACA
dans le cadre du Plan Eco Energie [ENERTECH 2001b, ENERTECH 2002a, ENERTECH 2004, ENERTECH
2005]
309
Mills a tudi 50 logiciels Internet et 15 logiciels de PC parmi les centaines qu'il a pu dnombrer.

222
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Annexe B.3.5 Autres exemples marquants de MDE locale en France


Nous abordons ici d'autres exemples marquants de MDE locale en France. Ces exemples sont
des sources intressantes de retours d'exprience dans la vue de dfinition de mthodes
d'valuation. Ils n'ont pas t choisis comme sujet d'tude de cas soit parce qu'ils avaient dj
fait l'objet d'tudes dtailles (gestion de l'nergie des patrimoines publics), soit parce qu'ils
n'taient pas suffisamment documents, soit parce qu'ils correspondaient des approches trop
spcifiques par rapport notre problmatique.

Cela ne permet pas de donner une vision exhaustive des pratiques d'valuation au niveau local
(ce qui ne s'avre pas ralisable), mais d'en fournir un aperu raliste partir des exemples
les plus marquants.


B.3.5.1 Les collectivits pionnires et la gestion de l'nergie des patrimoines publics


Nous reprenons ici l'expression utilise par Bouvier [2005 p.212] qui liste ainsi les collectivi-
ts pionnires en France : Rennes, Montpellier, Limoges, Douai, Besanon, Grenoble,
Dunkerque. Ces collectivits sont de fait celles qui sont le plus souvent cites en exemple et
dont les reprsentants interviennent trs rgulirement dans les diffrents congrs tels que les
Assises Nationales de l'Energie
310
.

Le rapport fait par l'AIVF (Association des Ingnieurs des Villes de France) et le CSTB (Cen-
tre Scientifique et Technique du Btiment) en 1999 sur la matrise de l'nergie dans les collec-
tivits locales [AIVF 1999] prsente travers diffrentes thmatiques d'actions (suivi nerg-
tique, maintenance des installations thermiques, etc.) des exemples d'actions menes par ces
villes pionnires. Elles sont aussi cites dans les recueils de bonnes pratiques de l'ADEME
et/ou d'Energie-Cits.


Des expriences aujourdhui bien connues

Gayral [2005 tome II pp.8-32] fournit une tude dtaille du cas de Montpellier qui fait
figure de rfrence
311
en France dans le domaine de la gestion par les collectivits locales de
l'nergie dans leur patrimoine.

La thse de Laurent Gayral fournit de plus tous les clairages ncessaires sur les questions de
financements des politiques de gestion de l'nergie des patrimoines de collectivits, les pro-
blmes de financement tant considrs comme l'une des principales barrires leur dvelop-
pement.

Par ailleurs, Bouvier note propos des villes pionnires que chacune dentre elles a son

310
Les Assises Nationales de l'Energie sont tour tour organises par les villes de Dunkerque et Grenoble depuis
1999. Ce sminaire annuel, qui a pour but dchanger, de dbattre et de rflchir sur les enjeux nergtiques du
XXIme sicle autour des Collectivits Locales (cf. www.assises-energie.net ) est un vnement de rfrence
dans le domaine.
311
Montpellier a ainsi t la ville pilote pour le dveloppement du logiciel de gestion de l'nergie Territoria en
partenariat avec GDF et l'AITF
Annexe B.3.5 Autres exemples marquants de MDE locale en France
223
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
histoire, son contexte politique local qui permettent dexpliquer son dynamisme en la matire.
Si les causes sont toujours multiples, leur dveloppement repose presque systmatiquement
sur la prsence dune personnalit, lu ou fonctionnaire territorial, passionne par la ques-
tion et capable de crer une dynamique au niveau de lensemble des services de la collectivi-
t [Bouvier 2005 p.212].

Il souligne aussi l'importance des ingnieurs territoriaux dans le dveloppement de la gestion
de l'nergie par les collectivits. De fait, le groupe de travail sur l'nergie de l'AITF (Asso-
ciation des Ingnieurs Territoriaux de France
312
, ex-AIVF) a t constitu au dbut par les
ingnieurs des villes pionnires cites par Bouvier, et a t un des moteurs principaux de la
capitalisation d'exprience dans ce domaine (cf. [AIVF 1999]).


Des bonnes pratiques bien capitalises, aujourdhui
vhicules par les fournisseurs dnergie

Aujourd'hui, du fait de l'ouverture la concurrence du march de l'lectricit et du gaz pour
les collectivits depuis le 1
er
juillet 2004, les fournisseurs d'nergie ont renforc leurs offres
pour ce segment de march, en mettant notamment l'accent sur la matrise des consomma-
tions
313
.

La gestion de l'nergie dans les patrimoines des collectivits est un bon exemple en matire de
capitalisation d'exprience et de dveloppement de savoir-faire. Aprs des annes d'activits
restreintes un cercle d'initis, ces bonnes pratiques semblent aujourd'hui progresser chez une
part croissante de collectivits
314
, notamment sous l'impulsion des actions des DR-ADEME et
de rseaux d'acteurs comme Energie-Cits. La "force de frappe" commerciale des fournisseurs
d'nergie pourrait aider accentuer ce mouvement vers un changement d'chelle pour
mieux atteindre le gisement des consommations du secteur public qui reprsente un enjeu
important et symbolique
315
.


B.3.5.2 La gestion de l'nergie dans les parcs de logements sociaux


Lexemple de lOPAC 38
316


A l'image des collectivits pionnires, l'OPAC 38 (Office Public d'Amnagement et de
Construction de l'Isre) est une des rfrences de la MDE locale en France.

312
http://www.aitf.asso.fr/groupe/index.php
313
Offre Optimia et services de gestion Di@lge chez EDF, et offre Energies Communes et logiciel Energie
Territoria chez GDF
314
en tmoigne par exemple le nombre croissant de participants aux Assises Nationales de l'Energie o sont
prsentes de plus en plus de nouvelles expriences ralises hors des cercles d'initis habituels
315
Borg et al. [2006] suite au projet europen PROST (Public procurement of Energy Saving Technologies in
Europe) ont estim le potentiel d'conomies d'nergie dans le secteur public dans les pays membres de l'Union
Europenne environ 12 milliards d'euros par an.
316
Une tude de cas spcifique sur les oprations de l'OPAC 38 avait t envisage en coopration avec Laurent
Gayral [Gayral 2005 p.303], notamment pour simuler l'impact que pourrait avoir les certificats d'conomies
d'nergie sur ces oprations (d'une part au niveau du financement (sujet de Laurent Gayral), et d'autre part sur les
questions d'valuation (notre sujet)). Nous avions ce sujet rencontr Benot Jehl, assistant dveloppement de la
politique nergtique l'OPAC 38. Les informations ci-aprs sont pour la plupart issues de cet entretien. Nous
n'avons ensuite malheureusement pas eu le temps de concrtiser cette tude de cas.
Annexe B.3.5 Autres exemples marquants de MDE locale en France
224
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006

Depuis le milieu des annes 1990, l'OPAC 38 a multipli les oprations exemplaires pour la
rnovation ou la construction de nouveaux logements sociaux. Concernant la rnovation de
logements existants, les actions de l'OPAC 38 couplent le plus souvent le recours aux EnR
(en particulier en substitution au chauffage lectrique) avec des actions de MDE (par ex.
isolation)
317
.

L'objectif de ces actions est de matriser le couple [loyer + charges]. Ainsi les travaux effec-
tus entranent une augmentation des loyers (pour rcuprer les investissements raliss),
mais qui est compense par une diminution des charges lies l'nergie. Dans la dure les
locataires sont normalement gagnants.

Plus rcemment, l'OPAC 38 a mis en place un vritable plan de MDE pour informer et
sensibiliser ses locataires
318
. Cela tmoigne d'une inversion des priorits dans les actions.
Au dpart, les oprations visaient d'abord l'intgration d'EnR dans les constructions, avec un
accompagnement MDE. Puis les expriences ont montr que l'intrt des oprations rsidait
plus dans la MDE, qui est aujourd'hui au centre des stratgies nergtiques de l'OPAC.

Tout comme pour les villes pionnires, le dynamisme de lOPAC 38 dans ses actions lies
lnergie est fond au dpart sur une personnalit, Guy Granier (Directeur Gnral Adjoint
jusqu' sa retraite en dcembre 2003) relay au sein des services par Michel Gibert
319
, qui a
mont peu peu une quipe charge de ces questions et qui est aujourdhui le Directeur du
Dveloppement Durable et Europe de lOPAC 38.


Une bonne culture dvaluation contractuelle

La dmarche dvaluation de lOPAC 38 est avant tout base sur une dmarche comptable,
avec pour principale donne :
- les donnes qui se rfrent aux installations dnergies renouvelables et leur production
(m de panneaux solaires, Garantie de Rsultats Solaires (GRS), etc.)
- les factures nergtiques de lOPAC 38 correspondant aux charges refactures aux loca-
taires (eau chaude sanitaire, chauffage, lectricit des parties communes)

Lorsque cela est possible, lvaluation porte sur une comparaison avant/aprs des factures.
Mais en gnral, la situation avant travaux nest pas connue : soit parce quil ny avait pas de
systmes de chauffage (logements dits "sans chauffage structur"), soit parce que ctait du
chauffage individuel, ou encore parce quil sagit de logements neufs.

317
Dautant plus quaujourdhui lattribution de subventions (ADEME, Conseil Rgional) pour des projets pho-
tovoltaques dans lhabitat est soumis la condition quils soient accompagns dactions MDE. Par exemple
dans les projets de lOPAC 38, le solaire thermique est associ avec des actions de matrise des consommations
deau, le photovoltaque de MDE pour les parties communes (LBC, ventilation hygrorgable, etc.), le bois-
nergie de travaux disolation.
318
Ce plan comprend les actions suivantes : formation des personnels de l'OPAC au contact avec les habitants,
articles dans le journal distribu aux locataires, fiches thmatiques jointes aux avis dchance de loyer, distribu-
tions de LBC, et des runions de sensibilisation des habitants avec des animations interactives.
319
M. Gibert a par exemple prsent lexprience de lOPAC dans le domaine de la MDE au sminaire ATEE
Les Certificats d'conomies d'nergie : mode d'emploi le 25 avril 2006 Paris. Ce qui tmoigne en outre de
lintrt port par lOPAC 38 ce nouveau dispositif. Mais M. Gibert a soulign que des inconnues demeurent
pour savoir si les acteurs locaux pourraient rellement en profiter pour leurs actions, et surtout dans quelles me-
sures.
Annexe B.3.5 Autres exemples marquants de MDE locale en France
225
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006

Pour le neuf, la comparaison est fate avec les donnes moyennes sur lensemble des loge-
ments de lOPAC 38.

Pour les autres, cest en gnral plus compliqu :
- il est trs difficile dvaluer les consommations de chauffage au "systme D" (radiateur
lectrique dappoint, petit pole, etc.)
- le plus souvent quand les locataires taient au chauffage individuel, il a t constat que le
niveau de chauffage tait bien infrieur celui utilis pour les chauffages collectifs de
lOPAC

Leffet rebond est donc a priori trs important, mais il nest pas vu comme un point ngatif.
Car un des buts de ces actions est aussi de rhabiliter les logements, et donc den amliorer le
confort. Un suivi des conditions de confort est dailleurs ralis. Qualitatif il est surtout bas
sur les plaintes des locataires, et des enqutes de satisfaction dans le cadre de programme
d'amlioration des logements avec augmentation de loyer.

Au final, en ce qui concerne lvaluation ex-post des actions de MDE, elle se compose
donc principalement dun suivi des factures (volution des factures nergtiques de lOPAC
38 pour le site considr, montant des charges pour les locataires).

Par ailleurs, chaque opration fait lobjet dune tude de faisabilit avec estimations ex-ante
(car demande pour les dossiers de subvention, et aussi pour convaincre les locataires), et
notamment un bilan conomique ex-ante et une estimation des charges. Dans ce systme,
lvaluation ex-post a avant tout pour but de vrifier ces estimations aprs travaux partir
des factures.


Vers un dveloppement plus large de politiques
nergtiques des bailleurs sociaux

De plus en plus de bailleurs sociaux sintressent aux questions de MDE sur leur patrimoine
et la matrise des consommations dnergie de leurs locataires.

Localement les bailleurs sociaux sont le plus souvent fdrs au sein dassociations rgiona-
les, ce qui favorise les changes dexprience et permet des collaborations avec les autres
structures rgionales comme les DR-ADEME ou les Conseils Rgionaux.

Ainsi Rhne-Alpes Energie Environnement
320
et lARRA (lAssociation Rgionale des orga-
nismes HLM de Rhne-Alpes) ont dvelopp le rseau CMCQE
321
(rseau des Chargs de la
Matrise des Charges et de la Qualit Environnementale). Le rseau a pour but dune part de
dfinir des outils pour dfinir et suivre la mise en uvre de plans daction, et dautre part
d'organiser des formations des personnes en charge de lnergie au sein des organismes HLM.

Dans la Rgion PACA, lassociation rgionale des organismes HLM a pass plusieurs

320
Rhne-Alpes Energie Environnement est aussi un organisme de rfrence pour la MDE locale. Cette agence
rgionale a ft ses 25 ans en 2003, en affichant plus de 700 oprations ralises dans le domaine de la MDE et
des EnR (pour une prsentation de leurs actions, se reporter leur brochure Rhne-Alpes Energie Environne-
ment 1978-2003 25 ans : pour un territoire durable).
321
cf. www.raee.org, rubrique Domaines dactivit puis Btiment
Annexe B.3.5 Autres exemples marquants de MDE locale en France
226
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
conventions, dabord avec EDF puis avec lAgence Rgionale de lEnergie et lADEME,
pour dvelopper des projets pilotes de MDE dans le but de rduire les charges des locataires.

Ces deux exemples rgionaux sont accompagns par TEC (aujourd'hui renomm Habitat et
Territoires Conseil), socit de conseil filiale de lUnion des HLM, qui fdre les associations
rgionales au niveau national.

En outre, les politiques nergtiques des bailleurs sociaux ont aussi donn lieu des projets
europens, comme par exemple lactuel projet ESAM
322
.


B.3.5.3 La MDE dans les zones insulaires


A limage des zones rurales, les zones insulaires ont t des terrains propices aux actions de
MDE du fait de la prquation tarifaire. Ces actions sy sont dautant plus dveloppes,
que le dficit pour EDF y devenait important, en particulier dans les DOM (Dpartements
dOutre-Mer).

Ceci explique que les actions MDE dans les zones insulaires ont t un des axes prioritaires
des conventions EDF-ADEME, car elles constituaient un terrain o les intrts des deux
acteurs convergeaient.


La MDE dans les DOM : des actions ponctuelles mais
denvergure

En 1996, Cauret et Adnot [1996 p.313] dressaient un bilan de la situation des systmes lec-
triques dans les DOM loccasion du cinquantenaire des DOM et dEDF, tous deux cres en
1946. Ils rappellent que des actions de MDE taient bien menes depuis le dbut des annes
1980, mais qu elles se heurtent des lacunes statistiques et mthodologiques et qu elles
ont pendant longtemps relev plus de lessaimage que dune vritable politique concerte..

Les DOM restent cependant un des exemples marquants de la MDE locale avec quelques
actions russies de grande ampleur, en particulier dans le domaine des LBC.

Ces oprations de promotion de LBC du dbut des annes 1990 ont permis de diffuser prs
dun million de LBC (150.000 la Runion en 1989, 350.000 en Guadeloupe et 346.000 en
Martinique en 1992, 73.000 en Guyane [Menanteau 1997 pp.50-52])
323
. Elles ont permis une
relle transformation du march local des LBC, faisant passer leur prix denviron 35
avant les oprations environ 20 aprs, et suscitant larrive de nouvelles marques sur ces
marchs.

Leur succs, notamment bas sur lutilisation du leasing
324
, a t rgulirement cit en exem-

322
Energy Strategic Asset Management in Social Housing Operators in Europe,
cf. http://ec.europa.eu/energy/intelligent/projects/doc/factsheets/esam.pdf)
323
Ces rsultats sont environ 10 fois suprieurs aux oprations locales de ce type menes en mtropole (cf. [Me-
nanteau 1997 pp.50-59]).
324
Le leasing consistait ici taler le paiement des LBC sur les prochaines factures dlectricit, de manire ce
que leur cot soit ainsi ramen aux conomies ralises par les consommateurs.
Annexe B.3.5 Autres exemples marquants de MDE locale en France
227
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
ple [Bailly Consulting 1996 pp.80-81, Menanteau 1997, Mills 1993]. Elles ont t reconduites
dernirement avec par exemple une opration en Guadeloupe en mars-avril 2005 pour diffuser
200.000 LBC.


Une valuation difficile du fait des spcificits des
systmes lectriques locaux

Malgr lampleur et le succs de ces oprations, il est difficile de trouver des dtails sur leur
valuation :
Lvaluation des impacts sur la courbe de charge reste difficile parce que les courbes de
charge DOM ne sont pas parfaitement connues. De plus, les programmes LFC ne sont pas les
seules actions engages sur la priode. Ensuite, la demande dlectricit tant en croissance
rapide et donc non stabilise, les comportements des consommateurs peuvent fluctuer in-
dpendamment des actions de MDE. ()
Diffrentes mthodes ont t utilises pour valuer les rsultats malgr ces difficults :
- le calcul de la rduction de la pointe aprs dtermination du taux de placement et du taux
de foisonnement ;
- la comparaison entre les volutions tendancielles antrieures de la pointe et la pointe
mesure aprs le programme : en Guadeloupe, 125.4 MW pour la pointe du soir en 1992
au lieu des 133 MW prvus ;
- la comparaison entre les taux de croissance annuels moyens de la pointe avant et aprs
les programmes. En Guadeloupe, ces taux ont t de 19 % entre 88 et 90, de 8.5 % en
90/91 et de 3.2 % en 91/92.
Globalement, EDF a estim limpact des programmes 7 MW vits sur la pointe du soir
pour la Guadeloupe et la Martinique, et un inflchissement de la croissance de la pointe en
Guyane. [Menanteau 1997 p.52]

Par rapport ce constat du manque de connaissance sur les courbes de charge des DOM, Cau-
ret et al. ont ralis une tude ce sujet pour lADEME [Cauret 1994, Cauret 1995]. Cette
tude met en avant la situation particulire des DOM, entre pays dvelopps et pays mer-
geants, qui fait que les outils usuels pour lune ou lautre de ces situations ne sont pas adapts
au cas des DOM. Elle montre aussi la sensibilit des rsultats fournis en fonction des hypo-
thses faites.

Outre la promotion de LBC, d'autres actions ont t dveloppes dans les DOM dans le cadre
des accords EDF-ADEME, en particulier pour la promotion des chauffe-eau solaires et pour
amliorer les performances nergtiques des btiments neufs avec la promotion du label
ECODOM, bas sur le label Promotelec d'EDF mais adapt aux DOM. Ces actions visent
deux usages, l'ECS et la climatisation
325
, qui connaissent une forte croissance dans les DOM
et pour lesquels un potentiel important de MDE a t identifi [Cauret 1995].


La MDE en Corse et autres les

La situation dficitaire dEDF se retrouve dans une moindre mesure en Corse et les autres les
proches de la mtropole comme les les de Porquerolles et Port-Cros prs de la cte proven-

325
Concernant la climatisation, l'ADEME et EDF ont soutenu la rdaction d'un guide de la climatisation des
btiments tertiaires dans les DOM, auquel a particip Dominique Marchio, du Centre d'Energtique et Procds
de l'Ecole des Mines de Paris, par lequel nous avons eu connaissance de ces actions.
Annexe B.3.5 Autres exemples marquants de MDE locale en France
228
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
ale.

La Corse a aussi connu des actions de promotion de LBC (environ 20.000 LBC diffuses en
1995, cf. [Menanteau 1997 p.56]), ainsi que dautres actions de MDE, mais pour lesquelles il
na pas t possible de rcuprer de rels retours dexprience.

La politique locale dans le domaine de la MDE et des EnR est surtout porte par lunit
Energie de lADEC (Agence de Dveloppement Economique de la Corse
326
) et par le FCME
(Fonds Corse de Matrise de lEnergie, aliment par la Collectivit Territoriale de Corse, EDF
et lADEME).

Lunit Energie de lADEC a dvelopp son propre outil de suivi des actions sous la forme
dun fichier Excel, o sont rpertoris les objectifs et les rsultats des actions. Pour chaque
opration, il est ainsi recherch de renseigner les indicateurs suivants :
- indicateurs de russite (objectifs) et volumes de lopration (rsultats) (par ex. %
daugmentation des ventes de LBC, nombre de personnes sensibilises, etc.)
- rsultats par trimestre en termes de kW et MWh vits, calculs partir de ratios stan-
dard (conomies par unit daction)

Une autre feuille Excel est utilise pour le suivi administratif des dossiers, notamment pour
enregistrer les financements attribus et les travaux engags.


Pour les les de Porquerolles et Port-Cros, leur taille rduite a conduit des actions plus
spcifiques, avec une approche voisine des actions de MDE rurale (cf. section II.3.2.1). Le
GERES a ainsi ralis un audit nergtique de ces deux les pour proposer un plan daction
MDE
327
.

Une autre opration similaire a t ralise l'le de Saint-Nicolas des Glnan au Sud de la
Bretagne [Moine 2002]. Toujours dans le cadre des accords EDF-ADEME, cette opration a
t mene par le bureau d'tudes Transnergie, pour palier aux problmes lis la forte sai-
sonnalit des consommations, du fait d'une croissance des activits touristiques sur cette le
qui compte moins de dix personnes hors saison. Le couplage de solutions MDE (LBC, lec-
tromnager performant, sensibilisation des rsidents avec limitation en puissance et en nergie
de leur contrat EDF) et d'EnR (solaire thermique, gnrateur photovoltaque) a permis de
rsoudre les difficults d'approvisionnement lectrique de l'le.

Compte-tenu du caractre cibl de l'opration (nombre de personnes concernes et territoire
limit), son valuation est proche de celle des actions plus classiques de "MDE rurale" (cf.
section II.3.2.1).


B.3.5.4 La recherche universitaire sur les activits locales de MDE


Jusqu'ici les activits locales de MDE n'taient pas traites comme un thme de recherche
acadmique part entire. Mais leur mergence constate dans les analyses des parties II.1 et
II.2 se retrouve aujourd'hui aussi au niveau de la recherche. Notamment parce que les acteurs

326
Qui dpend de la Collectivit Territoriale Corse, quivalent du Conseil Rgional pour la Corse
327
cf. http://geres.free.fr/fr/enr-mde/mde-fr.php ?art=078
Annexe B.3.5 Autres exemples marquants de MDE locale en France
229
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
de terrain, habitus travailler avec des bureaux d'tudes, se tournent aussi maintenant vers
les laboratoires de recherche pour profiter de leurs comptences acquises dans le domaine de
l'nergie, mais aussi dans d'autres disciplines comme l'conomie ou la gopolitique.

Cette section n'a pas un but d'exhaustivit, mais prsente les principaux travaux acadmiques
franais sur lesquels nous avons pu trouver des informations intressantes et qui nous ont ins-
pir pour cette thse.


L'valuation des politiques publiques de MDE en Poitou-
Charentes

Franck Trouslot a ralis au dbut des annes 1990 une thse au sein de l'ADEME Poitou-
Charentes sur l'valuation des politiques de matrise de l'nergie en Poitou-Charentes de 1976
1993, comme un exemple d'valuation des actions publiques l'chelon local [Trouslot
1995].

Cette thse tait affilie au domaine des sciences conomiques, et traitait d'une approche m-
thodologique de l'valuation pour en confronter les approches classique et pluraliste (iden-
tifies comme les courants dominants de l'valuation des politiques publiques), et proposer
des amliorations.

Elle fournit un clairage trs intressant sur la place de l'valuation dans le dveloppement
de politiques nergtiques locales, et sur son utilisation par les diffrents acteurs. La
confrontation des concepts d'valuation un cas concret, renforce par la ralisation de l'va-
luation au sein mme de l'ADEME Poitou-Charentes, permet de croiser approches mthodo-
logiques et pragmatiques et donne toute son originalit cette thse. L'Annexe B.3.7 en pr-
sente une synthse.


Les principaux enseignements que nous pouvons en tirer sur les pratiques d'valuation au
niveau local sont les suivants :

- l'valuation ne doit pas se rsumer un exercice purement technique, mais doit pouvoir
fournir une analyse critique des rsultats prsents, en prenant en compte les points de
vue des diffrents acteurs concerns et en les relativisant (comparaison avec des rf-
rences, analyse des incertitudes associes aux rsultats)

- sans cette analyse critique, l'valuation ne peut jouer son rle d'aide la dcision et reste
d'une utilit limite et controverse (soit comme outil de propagande, soit comme une
procdure administrative sans intrt)

- l'utilit des rsultats fournis par l'valuation dpend des techniques d'analyse, mais surtout
de la qualit et de la diversit des informations utilises. Cela dpend de l'implication
des acteurs dans le processus d'valuation, des moyens de collecte (systmes d'informa-
tion) et de la confrontation des points de vue.

- amliorer les mthodes d'valuation ne se rsume pas dvelopper des outils de
traitement de donnes de plus en plus sophistiqus. D'une part car leurs rsultats
dpendra toujours en premier lieu de la qualit des donnes entres. D'autre part parce que
leurs rsultats doivent pouvoir tre compris clairement par les destinataires de l'valuation.
Annexe B.3.5 Autres exemples marquants de MDE locale en France
230
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
sultats doivent pouvoir tre compris clairement par les destinataires de l'valuation.

- un minimum de contrle ex-post des donnes est ncessaire, ainsi que la dfinition de
rgles claires pour les rfrentiels d'valuation

- l'valuation doit fournir des rsultats sous une forme synthtique et ne pas noyer le desti-
nataire de l'valuation sous un flot d'informations

- l'valuation est un champ interdisciplinaire, et le mtier d'valuateur doit voluer en ce
sens


La thse de Trouslot apporte aussi des lments sur la dimension locale des actions (voir
aussi sous-partie II.2.2.4) :

- les modalits de l'action locale s'adaptent mieux aux besoins des diffrents publics viss
(la proximit permet de mieux comprendre les barrires rencontres et comment les sur-
monter)

- le niveau local peut tre un lieu important pour le dveloppement d'initiatives et la cra-
tion de nouvelles approches pour les actions de MDE

- les jeux d'acteurs locaux sont un facteur d'explication important des logiques d'interven-
tion au niveau local

- l'efficience de l'action rgionale doit se trouver dans sa connaissance et sa capacit
mobiliser les acteurs [Trouslot 1995 p.263]


Son travail fait aussi ressortir les barrires la pratique de l'valuation et son intgration dans
les processus de dcision, qui peuvent se rsumer sous la forme d'un cercle vicieux.


Figure 7 - cercle vicieux des barrires une pratique effective de l'valuation

A posteriori, nous n'avons pu savoir si les outils dvelopps par Trouslot et ses recommanda-
tions ont t appliques par la suite. Ses propres conclusions taient assez pessimistes ce
sujet, alors qu'il mettait bien en vidence que l'valuation peut tre considre comme une
contrepartie la dcentralisation et la dconcentration des comptences [Trouslot 1995
p.535]

utilisation biaise
des rsultats
perception ngative de
l'valuation
manque d'implication des
acteurs concerns dans le
processus
qualit insuffisante des
donnes sources
impossibilit d'une
analyse critique
manque de moyens
humains et financiers
Annexe B.3.5 Autres exemples marquants de MDE locale en France
231
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006

Deux thses complmentaires notre approche

Plus rcemment deux thses viennent d'tre soutenues en rapport avec les politiques nergti-
ques locales.

Celle de Guillaume Bouvier [2005], dans le domaine de la gopolitique
328
, tudie le rapport
entre les collectivits et le service public de l'lectricit. Ce qui l'amne a analys les jeux
d'acteurs, ainsi que la force de leurs reprsentations mentales et politiques. Cette thse a t
une source importante de notre analyse du contexte des oprations locales de MDE (cf. partie
II.1).

Celle de Laurent Gayral [2005], dans le domaine des sciences conomiques
329
, tudie les
mcanismes financiers favorisant l'investissement dans l'efficacit nergtique dans les poli-
tiques de gestion de l'nergie au sein du patrimoine bti des collectivits territoriales eu-
ropennes. Ses analyses portent en particulier sur la nouvelle donne lie l'ouverture des
marchs de l'lectricit et du gaz. Cette thse nous a aussi t trs utile pour l'analyse du
contexte, et donne une description trs prcise d'un des champs des politiques nergtiques
locales.

Ces deux thses sont tout fait complmentaires de notre approche. Elles rpondent deux
autres barrires au dveloppement de politiques nergtiques locales : la mconnaissance
des jeux d'acteurs et leurs interactions, et les problmes de financement des actions.


Les outils de planification et pour le dveloppement de
politiques nergtiques locales

Les intentions de planifier des politiques nergtiques rgionales de la premire vague de
dcentralisation du dbut des annes 1980 n'ont au final pu tre mises en pratique comme
elles avaient t conues (cf. section B.1.3.1 de l'Annexe B.1.3).

Ces questions connaissent depuis le dbut des annes 2000 un regain d'intrt sous l'effet de
plusieurs lments :

- le processus de concertation rgionale initi par le SSCE en 2000-2001 (cf. section
B.1.6.1 de l'Annexe B.1.6) qui a conduit dans certaines rgions la constitution d'un Ob-
servatoire Rgionale de l'Energie et la ralisation de bilans nergtiques rgionaux
ou de planification nergtique rgionale (cf. section B.1.4.4 de l'Annexe B.1.4)

- la mise contribution des collectivits locales dans les politiques de lutte contre les
changements climatiques, avec notamment les incitations aux approches territoriales
comme les Plans Climat Territoriaux

328
thse CIFRE ralise au sein d'EDF (Direction des Affaires Publiques), sous la direction de la Professeur
Batrice Giblin de l'Institut Franais de Gopolitique (Universit Paris 8 Vincennes Saint-Denis), qui dve-
loppe en particulier des recherches sur la gopolitique locale.
329
Thse cofinance par l'ADEME et Electrabel, ralise au CGEMP (Centre de Gopolitique de l'Energie et des
Matires Premires) de l'Univserits Paris Dauphine, sous la direction du Professeur Jean-Marie Chevalier. Nous
avons rencontr plusieurs fois Laurent Gayral pour changer sur nos recherches. Nous avions envisag de rali-
ser une tude de cas commune sur l'OPAC 38 (cf. section B.3.5.2) que nous n'avons malheureusement pas eu le
temps de concrtiser.
Annexe B.3.5 Autres exemples marquants de MDE locale en France
232
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006

- la recherche de solutions alternatives aux problmes locaux de scurit d'approvision-
nement en lectricit (cf. section B.1.5.6 de l'Annexe B.1.5)

Bernard Bourges [2003] a ralis pour l'ADEME une analyse cible sur les outils d'valua-
tion quantitative dans l'optique de la mise en place d'un programme de planification nerg-
tique locale. Ce travail avait notamment pour objectif d'tudier la transposition de l'exprience
du programme ALEP (Advanced Local Energy Planning) de l'AIE la situation franaise.

Le programme ALEP visait tester, complter et diffuser une mthodologie de planification
du systme nergtique local dveloppe pour la ville de Gteborg au dbut des annes 90.
Cette approche se base sur le logiciel Markal qui permet d'optimiser en cot global sous
contraintes un systme nergtique complexe. () Il est trs flexible et offre des rsultats trs
riches mais prsente les inconvnients de ses avantages : complexe, relativement peu convi-
vial, gourmand en donnes, coteux. [Bourges 2003 pp.ii-iii]

Bourges fait ressortir des tudes de cas des expriences pilotes qu'elles n'abordent pas la ques-
tion cl de la collecte des donnes, ni l'appropriation de l'outil par les acteurs concerns,
qui sont deux points essentiels pour gnraliser son utilisation.

Il confronte aussi l'utilisation de Markal avec les approches plus pragmatiques d'Energie-Cits
et de l'ICLEI
330
, ainsi qu'avec un autre logiciel GEMIS (qui permet l'analyse de cycle de vie
des filires nergtiques (offre et demande), et notamment l'estimation de leurs impacts
environnementaux).

Il a par ailleurs analys les expriences de deux collectivits locales franaises qui ont cher-
ch formaliser et territorialiser leurs dmarches dans le domaine de l'nergie : la Rgion
Nord Pas de Calais et l'agglomration grenobloise. Ces tudes de cas mettent en vidence
la question de l'accs aux donnes comme une difficult centrale la mise en uvre de plani-
fication nergtique locale, et le souhait d'agir avant tout concrtement. D'o la prfrence
au dveloppement des EnR, aux ralisations plus rapides et perceptibles par rapport aux ac-
tions de MDE, souvent plus complexes mettre en uvre et qui appellent des logiques de
plus long terme.

Au final, cette tude a permis de mieux identifier, comprendre et hirarchiser les besoins
pour le dveloppement de politiques nergtiques locales :

- la ralisation de bilans nergtiques doit tre envisage comme un processus progressif
qui ne doit pas absorb tous les moyens : une tude d'un nombre limit d'indicateurs est
suffisante pour aider la dfinition d'un premier plan daction, qui doit ensuite s'accom-
pagner d'un affinement du suivi et de la connaissance de la situation nergtique locale

- la pratique de l'valuation ex-ante buts prospectifs pour valuer des potentiels est assez
courante, mais doit s'enrichir d'une vision globale de projet et amliorer la qualit des
estimations ex-ante en utilisant les retours d'exprience disponibles

- l'valuation ex-post reste peu pratique alors qu'elle est un enjeu majeur au dvelop-
pement de plans d'action, que ce soit pour connatre les rsultats rels ou pour amliorer

330
cf. www.iclei.org
Annexe B.3.5 Autres exemples marquants de MDE locale en France
233
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
les actions futures. Le dveloppement d'outils pour amliorer les pratiques d'valuation
ex-post est donc apparu comme un des besoins prioritaires, en lien avec les questions de
systme d'information

C'est la question des outils d'valuation ex-post que nous avons choisi de dvelopper dans
cette thse (voir la partie II.4 pour les dtails sur notre problmatique).


La MDE rurale et les SIG

Une autre piste de recherche intressante est celle de l'utilisation des nouveaux outils de SIG
(Systmes d'Information Gographique) pour la MDE.

Le Groupe Tldtection et modlisation du Centre d'Energtique et des Procds de l'Ecole
des Mines de Paris (centre de Sophia Antipolis) a ralis ce sujet une tude pour le dparte-
ment MDEc de l'ADEME [ARMINES 2002]. Ce travail avait pour but de faire un tat des
lieux de l'utilisation des SIG dans les collectivits locales et de faire des propositions pour
intgrer une dimension MDEc dans ces dmarches.

Il permet en outre une analyse des apports potentiels des SIG des logiques de planification
nergtique locale, notamment :
- l'analyse spatiale des usages finals pour rendre compte des consommations et cibler les
zones d'interventions prioritaires
- l'aide la prparation, mise en uvre et suivi de plans d'action en reprant o mener
quelles actions
- l'intgration d'informations gographiques pour l'valuation des cots d'accs aux r-
seaux, suivre les schmas d'amnagement des rseaux, connatre les impacts rels d'ac-
tions cibles de MDEc sur le rseau

Les gestionnaires de rseau et les autorits concdantes s'intressent de plus en plus aux po-
tentialits des SIG, dans une logique d'optimisation de leurs activits et de leurs politiques
d'investissements.

Une approche gographique de la MDEc est par ailleurs dveloppe par le CIRED (Centre
International de Recherche sur l'Environnement et le Dveloppement
331
) pour reprer les
zones favorables des actions de "MDE rurale" [Hilal 2005].

331
www.centre-cired.fr

234
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Annexe B.3.6 Exemples de MDE locale en Europe


Des exemples trs intressants de MDE locale existent en Europe, notamment dans les pays
o les politiques locales sont beaucoup plus dveloppes qu'en France (Allemagne, pays
scandinaves). Au travers de divers documents et rencontres, nous avons pu en avoir un bon
aperu et en faire ressortir des lments importants sur les pratiques d'valuation. Mais nous
n'avons pas eu le temps dans le cadre de cette thse d'en faire une analyse approfondie.


B.3.6.1 Etudes de cas ralises par le Wuppertal Institut


Dans le cadre du contrat de recherche ralis pour EDF, nous avons travaill avec Stefan
Thomas et Wolfgang Irrek du Wuppertal Institut for Climate Energy Environment. Lors de la
phase I de cette tude [Broc 2005d], ils ont ralis des tudes de cas sur des expriences
d'valuation d'oprations locales en Europe, qui compltaient nos tudes de cas sur des ex-
priences franaises (cf. section II.3.2).

Nous avons ainsi pu profiter de leur exprience dans ce domaine, et avoir un aperu des prati-
ques d'valuation au Danemark, dans les Flandres et en Allemagne.

Cette collaboration nous a permis de voir, que si ces pays avaient pu dvelopper des pro-
grammes de MDE bien plus consquents qu'en France (cf. section I.2.3 sur le cas du Dane-
mark), les questions sur l'valuation n'y avaient pas pour autant t toutes rsolues.

Les tudes de cas font ressortir deux approches principales :
- une approche trs approfondie avec des valuations pousses, mais ponctuelles sur des
oprations ambitieuses disposant de moyens importants
- une approche moins dtaille mais plus systmatique (cf. section I.2.3 pour l'exemple du
Danemark) par le biais de procdures proches de celles des certificats d'conomies d'ner-
gie (cf. II.3.1.4)


B.3.6.2 La capitalisation d'expriences faite par Energie-Cits


Energie-Cits est l'association des autorits locales europennes pour une politique nerg-
tique locale durable
332
.

Ses principaux objectifs sont de favoriser les changes d'exprience et de dvelopper une
expertise dans le domaine des stratgies nergtiques locales, afin de diffuser les bonnes pra-
tiques au sein des villes europennes.

Dans ce cadre, Energie-Cits publie rgulirement des recueils de bonnes pratiques sur des
thmes comme la planification nergtique urbaine [Schilken 2000] ou les plans daction ter-
ritoriaux contre le changement climatique [Energie-Cits 2002].


332
cf. http://www.energie-cites.org/page.php ?lang=fr&dir=1&cat=1&sub=1
Annexe B.3.6 Exemples de MDE locale en Europe
235
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Ces recueils permettent de disposer d'un bon tat des lieux des pratiques des villes euro-
pennes dans ces domaines.

Par ailleurs, il est intressant de noter que la 10
me
confrence annuelle d'Energie-Cits orga-
nise en avril 2005 Clermont-Ferrand avait pour thme : valuer les politiques nergti-
ques locales ?. Ce qui montre l'actualit de notre sujet.






236
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Annexe B.3.7 Synthse sur la thse de Franck Trouslot [1995]


Franck Trouslot a ralis au dbut des annes 1990 une thse au sein de l'ADEME Poitou-
Charentes sur l'valuation des politiques de matrise de l'nergie en Poitou-Charentes de 1976
1993, comme un exemple d'valuation des actions publiques l'chelon local [Trouslot
1995].

Cette thse tait affilie au domaine des sciences conomiques, et traitait d'une approche m-
thodologique de l'valuation des actions publiques pour en confronter les approches classi-
que et pluraliste (identifies comme les courants dominants de l'valuation des politiques pu-
bliques), et proposer des amliorations. Une des originalits de cette thse est d'avoir appliqu
les concepts mthodologiques un cas concret, de plus en tant directement "sur le terrain",
puisque Franck Trouslot a directement travaill au sein de la DR-ADEME.


Approches classique et pluraliste de l'valuation

Selon Trouslot, l'approche classique, base sur le modle exprimental amricain, a pour
objectif d'optimiser le bon emploi des ressources budgtaires et s'est rapproche dans les faits
des techniques d'audits de gestion. Elle se concentre surtout sur l'valuation des effets in-
duits par les actions.

L'approche pluraliste est ne des critiques faites du modle exprimental, notamment du pos-
tulat que les prises de dcision suivent un processus rationnel bas sur des objectifs stables
dans le temps. Les tenants de l'approche pluraliste comme Monnier (cf. [Monnier 1987 p.59],
cit par Trouslot) soulignent que les dcideurs sont rarement en mesure d'identifier claire-
ment et de hirarchiser les objectifs. D'o la ncessit de prendre en compte la dimension
collective propre l'laboration des politiques, et donc d'analyser les rsultats selon les dif-
frents points de vue des acteurs concerns. Cette approche recommande de plus la mise en
place de comit de pilotage pour mieux insrer l'valuation dans les processus de dcision.


Evaluation sur un modle quasi-exprimental

Trouslot a d'abord men son valuation en suivant un schma quasi-exprimental. Face au
manque d'affiche clair d'objectifs dans les politiques valus, il a adopt une approche par
les effets, qui recherche les effets positifs ou ngatifs des actions, au-del des objectifs ini-
tiaux supposs. Ne disposant d'information que sur la rgion Poitou-Charentes, Trouslot a
ralis une valuation sans groupe tmoin, i.e. base sur une comparaison avant/aprs de la
situation rgionale et sur le suivi de la mise en uvre des actions. Il a alors recherch des
indicateurs lui permettant de comparer les rsultats obtenus, notamment avec des donnes
nationales.


Premires conclusions en lien avec la dimension locale
des actions values

Ses premires analyses [Trouslot 1995 pp.161-163] portent sur les cibles de la politique r-
gionale et font ressortir une diffrentiation entre les stratgies nationales et rgionales de
Annexe B.3.7 Synthse sur la thse de Franck Trouslot
237
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
l'AFME puis de l'ADEME. Une de ces spcificit est que les modalits de l'action rgionale
s'adaptent aux besoins des diffrents publics viss, avec par exemple la mise disposition
des acteurs locaux d'une comptence technique alors manquante, la mise profit des rseaux
d'acteurs existants, ou la recherche de modes de financement particuliers une catgorie d'ac-
teurs donns.

Trouslot retrouve alors la dimension locale des actions qui se manifeste par une approche
plus pragmatique qui a profondment modifi les modes d'identification des cibles de la
politique rgionale. Traditionnellement, l'approche technocratique de la programmation
consistait croiser innovation technologique et cartes nergtiques pour en dduire des gi-
sements de matrise de l'nergie. () Aujourd'hui, la volont de travailler en partenariat avec
les milieux institutionnels et professionnels astreint l'ingnieur de l'Agence aux raisonne-
ments systmiques et multicritres [Trouslot 1995 p.163]. Trouslot fait ainsi ressortir
l'mergence de la fonction d'animation dveloppe au niveau local.

Trouslot met aussi en vidence l'effet pervers des procdures administratives qui ont fait que
l'argent public s'est polaris sur un groupe extrmement restreint d'acteurs. [Trouslot 1995
p.164] Mais ce biais, qui fait que les acteurs les mieux informs sont favoriss, n'est pas sp-
cifique aux politiques locales. Cependant les jeux d'acteurs locaux, distincts des rapports de
force nationaux, expliquent pour une large part les diffrences de cibles privilgies entre les
niveaux national et local, et le fait que les secteurs ayant bnfici de l'effort public le plus
important sont ceux qui consommaient le moins d'nergie. [Trouslot 1995 p.166]


Pour une valuation comparative et qui prend en compte
tous les points de vue

Trouslot cherche aussi utiliser des indicateurs, que ce soit pour dtecter des potentiels ou
pour relativiser les rsultats en les comparant avec des situations semblables. Il prne ainsi le
recours des intensits nergtiques intra-sectorielles semblables aux indicateurs de
consommations unitaires utilises dans le programme ODYSSEE (par ex. kWh/ de valeur
ajoute ou kWh/m chauff, cf. section A.2.2.1).

Trouslot dveloppe aussi une analyse approfondie au sujet du ciblage des politiques de
l'ADEME Poitou-Charentes : soutien conjoncturel des activits stratgiques sensibles
l'nergie entre 1976 et 1982, puis fortes orientations vers le secteur public, mais aussi dpen-
dantes de la culture des chargs de mission. Trouslot souligne aussi l'importance des objec-
tifs non nergtiques, comme pour les oprations dans le secteur agricole, o il s'agit avant
tout de faire du dveloppement conomique [Trouslot 1995 p.174].

Cette analyse le conduit la ncessit d'une lecture multiple des rsultats de l'valua-
tion[Trouslot 1995 p.169], i.e. d'une part la prise en compte des points de vue de l'ensemble
des acteurs concerns, et d'autre part l'tude des impacts non-nergtiques.


L'utilit de l'valuation dpend de la qualit de
l'information trouve et fournie

A ce stade de son travail d'valuation il fait le constat suivant : au-del de l'effort de quanti-
fication, l'valuation va aussi nous rvler, au fil des prochains chapitres, ses insuffisances.
Annexe B.3.7 Synthse sur la thse de Franck Trouslot
238
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Elle va surtout introduire un doute quant l'image perue des effets de l'intervention publi-
que. Nous verrons qu' tous les stades de la mise en uvre d'une valuation, l'homme d'tude
doit ncessairement travailler au contrle et l'amlioration de la qualit de l'information.
Au-del du choix et de la performance des techniques de calcul, l'utilit de l'exercice est
extrmement dpendante de cet effort.[Trouslot 1995 p.175]

Il introduit alors la question des incertitudes sous la forme d'une ncessaire mesure du doute
sur les rsultats affichs, notamment du fait de biais li l'auto-valuation pratique alors par
l'AFME. Il souligne alors les besoins d'un contrle ex-post des rsultats.


Un bilan quantitatif qui relativise l'impact des oprations
locales mais en fait ressortir les points forts

Une des principales conclusions de la quantification des impacts nergtiques
333
des opra-
tions de l'ADEME en Poitou-Charentes est la hirarchisation des modes d'intervention :
ce rsultat est crdit 52,6% au compte de la rglementation thermique, 42,7% celui
des Agences et 4,7% pour l'effort du Trsor [rduction d'impts]. Le fonds rgional ()
pse moins de 8% dans l'obtention de ce rsultat. [Trouslot 1995 p.258] Analyse renforce
par la suite : ce dernier rsultat confirme le faible effet de levier du fonds rgional sur l'vo-
lution des consommations nergtiques. [Trouslot 1995 p.262]

Mais si Trouslot relativise la porte de l'action financire locale, il fait ressortir les autres
avantages de la dimension locale : nanmoins, l'efficience de l'action rgionale doit se
trouver dans sa connaissance et sa capacit mobiliser les acteurs locaux. Les facteurs
culturels, l'accs l'information, le soutien technique sont peut-tre des outils d'incitation
dans le domaine de la matrise de l'nergie aussi efficace que le soutien financier. C'est peut-
tre l la vocation de l'chelon rgional de raliser une politique efficace de moyen et long
terme. [Trouslot 1995 p.263]


Les limites de l'approche par les effets

Lorsqu'il arrive l'tape de l'interprtation de son valuation, Trouslot en souligne les diffi-
cults. Une des principales est le fait qu'il n'est pas possible de couvrir tous les impacts pos-
sibles des actions, alors mme que le volume d'informations collectes est dj trop impor-
tant pour permette le recul ncessaire la rflexion. Ce qui pose aussi le problme de la
lisibilit des rsultats.[Trouslot 1995 p.423]

La difficult est alors de rflchir partir des lments essentiels qui nous permettront de
fonder un jugement. Le plus souvent, l'homme d'tude devra fournir un effort de synthse pour
apporter aux destinataires de l'valuation les lments essentiels la rflexion. [Trouslot
1995 p.424] Ce qui suppose de fait que ces destinataires aient eu des objectifs clairs pour leurs
actions.

Or Trouslot souligne combien pour le cas des politiques de matrise de l'nergie, ces objectifs
voluent dans le temps. La slection des lments essentiels peut en outre tre influence par

333
que Trouslot estime environ en moyennant sur la priode value 10% de la consommation annuelle rgio-
nale (avec comme anne de rfrence 1998), en prenant en compte les impacts sur la dure de vie suppose des
quipements.
Annexe B.3.7 Synthse sur la thse de Franck Trouslot
239
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
les proccupations de chacun des acteurs.

Il dgage alors deux alternatives. La premire est le recours un affichage systmatique d'ob-
jectifs clairs et quantifis. Il la rejette car il l'analyse comme un retour aux pratiques centrali-
satrices antrieures du fait d'un pilotage par objectifs qui rduirait les possibilits d'initiati-
ves locales du fait de procdures et critres administratifs.

La seconde, qu'il essaie ensuite de dvelopper, consiste croiser les approches classiques
(tude des effets induits) et pluraliste (prise en compte des diffrents points de vue des ac-
teurs).

Concernant l'application de l'approche par effets, Trouslot conclut que ses rsultats peuvent
tre utiliss dans une optique de l'utilisation de l'valuation comme outil de communication,
car dans ce cas l'interprtation des rsultats n'est pas forcment critique (selon lui, elle est
mme souvent antrieure l'obtention des rsultats). Cependant ses rsultats ne peuvent servir
dans une dmarche d'aide la dcision car ses essais d'interprtation l'ont conduit une im-
possibilit d'analyse critique.

Cette impossibilit est surtout lie au fait que le domaine d'incertitude est trop important, ce
qui provient avant tout de la mauvaise qualit des informations disponibles : il reste encore
beaucoup faire pour restreindre le domaine d'incertitude. Il constate ainsi qu' il ne s'agit
pas de nier l'intrt de travailler l'amlioration des techniques d'valuation. Mais notre
exprience montre que la part de l'imprcision due aux techniques est sans commune me-
sure avec celle lie la qualit de l'information [Trouslot 1995 p.426].

Il souligne alors de nouveau le besoin d'un recours des contrles ex-post
334
, et la dfi-
nition de rgles claires pour les rfrentiels d'valuation. Ce dernier point lui parait d'au-
tant plus important dans le cas d'autovaluations comme l'ADEME, qui peut induire le char-
g de mission choisir le rfrentiel qui lui est le plus favorable, et non pas le plus objectif.

D'autre part, l'impossibilit d'analyse critique des rsultats est aussi lie au fait que le champ
d'investigation [de l'valuation] est limit par la nature et la quantit d'informations dispo-
nibles la source. Ce qui fait que les rsultats sont toujours parcellaires. En fait, quelque
soit la dmarche retenue, il faut comprendre que l'valuation reprsente un espace de com-
munication. Au sein de cet espace, chaque acteur va susciter une certaine perception de la
ralit [Trouslot 1995 p.428].


Dveloppement d'un systme d'informations

A l'origine, il n'existait pas de systmes d'informations utile la mise en uvre d'une valua-
tion. [Trouslot 1995 p.442] Ce constat de Trouslot confirme le manque de pratique de l'va-
luation au niveau local jusque dans les annes 1990.

Le systme dvelopp par Trouslot s'articule autour de trois composantes pour stocker et trai-
ter l'information :
- le logiciel ENERCOMPTA
- un logiciel de traitement d'enqutes ex-post (extension d'ENERCOMPTA)

334
Le phnomne de distortion est si important qu'il n'existe plus de corrlation significative entre les rsultats
ex-ante et ex-post. [Trouslot 1995 p.427]
Annexe B.3.7 Synthse sur la thse de Franck Trouslot
240
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
- AUDIT, un logiciel d'analyse multicritre pour l'aide la dcision

Le logiciel ENERCOMPTA a t dvelopp en association avec le bureau d'tudes INES-
TENE et l'quipe de l'ADEME Poitou-Charentes. Il permet de raliser des calculs de bilans
prvisionnels ou ex-post sur un ou plusieurs dossiers, sur des priodes annuelles ou plurian-
nuelles. [Trouslot 1995 p.443] En outre, le programme gre un fichier ACTEURS, dans
lequel peuvent tre rpertoris tous les partenaires de la dlgation.

La diffusion du logiciel au sein de l'Agence s'est accompagne d'un programme de formation
des personnels insistant principalement sur la culture conomique qui lui est associ. Depuis,
le logiciel est galement utilis par l'INESTENE pour raliser les valuations qui lui sont
commandites. [Trouslot 1995 p.445]

Nous n'avons pas trouv de traces d'utilisation d'ENERCOMPTA au sein de l'ADEME au-
jourd'hui. Nous avons essay de contacter l'ADEME Poitou-Charentes ce sujet, mais
n'avons pas eu d'informations supplmentaires. Sur Internet, les seules informations sur un
logiciel ENERCOMPTA font rfrence un logiciel utilis dans le cadre du programme
Suisse Energie pour la comptabilit nergtique des collectivits locales.

Cependant il est probable que le logiciel dvelopp par Trouslot ait servi en partie de base au
dispositif actuel de l'ADEME (cf. section II.3.1.3).


Des conclusions pas toujours suivies d'effets

Le systme d'information n'est pas le seul lment ne pas s'tre prenniser. Trouslot prconi-
sait aussi une pratique de l'valuation en continu, i.e. allant des estimations ex-ante aux
contrles ex-post, en tenant compte de la dure de vie des actions ralises.

Du fait de la dure limite de son travail, il n'avait pu appliquer ces principes et de fait ses
rsultats ne sont pas constats, mais estims.

De plus, Trouslot renouvelle de multiples occasions son observation sur la ncessit d'un
contrle de terrain. L'enqute ex-post est indispensable pour une double raison :
- elle permet de collecter une information observe, ce qui offre la possibilit de passer de
l'estimation au constat. En outre (), le fait de diversifier et de confronter ses sources,
amliore la qualit de l'information et la perception du rel.
- de fait, on a pu constater des carts importants entre ce que l'on pensait (ou souhaitait
penser) des action l'origine et ce que l'on a constat ensuite sur le terrain [Trouslot
1995 p.451]

Pour autant, il note qu' aucune dcision na t prise quant la poursuite ventuelle de la
procdure [qu'il proposait]. La conduite de l'enqute ex-post () suppose l'octroi de moyens
humains et financiers qui permettent de garantir la qualit de l'information collecte.

Nous avons aussi identifi comme une des explications du manque de pratique de l'valuation
(cf. section II.3.1.1). Trouslot souligne aussi comme autre raison l'insuffisante mobilisation
des acteurs, elle-mme explique par deux facteurs : sur le plan externe, l'valuation est v-
cue comme un exercice de propagande qui n'apporte rien aux processus politiques ou la vie
dmocratique. Sur le plan interne, cela souligne le fait que la prise de dcision rpond d'au-
Annexe B.3.7 Synthse sur la thse de Franck Trouslot
241
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
tres modes de ngociation. Il est donc inutile de s'investir dans ce genre de dmarche [Trou-
slot 1995 p.452]


Mise en garde contre l'utilisation d'indicateurs et de la
caution scientifique

Trouslot consacre une de ces sections au faux problme des techniques et des indicateurs
[Trouslot 1995 pp.461-462], dans une partie intitule quand la science cre l'illusion . Il
rappelle alors qu'il ne faut pas se concentrer uniquement sur les aspects techniques de
l'valuation.

Rduire l'valuation un simple exercice technique en limite de fait l'utilisation un outil de
communication, qui sera prise pour propagande si elle est pratique en interne sans un mini-
mum de transparence. Les questions techniques ne rsolvent alors pas le problme d'insrer
l'valuation dans le processus de dcision, quelques soient les techniques employes ou les
indicateurs dfinis.

De mme, la valeur scientifique des rsultats est toujours dpendante des informations dispo-
nibles et des hypothses faites. Or ces facteurs varient la fois avec les conditions de mise en
uvre de l'valuation, et avec les valuateurs. Trouslot analyse alors que le principe correc-
teur vident semble tre le pluralisme des metteurs. Il faut entendre par pluralisme, non pas
seulement la multiplicit des organes, mais celle des metteurs concurrents ou rivaux [Trou-
slot 1995 p.461].


Pour une tude de faisabilit et un cahier des charges de
l'valuation

Suite aux constats sur les limites de l'valuation qu'il a pu raliser, Trouslot propose des re-
commandations dans le but d'amliorer ces pratiques au niveau local.

La premire est assez classique et rejoint la dmarche de planification propose dans [SRCI
2001] (voir aussi section I.2.2.3). Il propose une procdure dtaille pour prparer l'valua-
tion, et notamment une tude de faisabilit avec six tapes [Trouslot 1995 p.467] :
1) dterminer les destinataires de l'valuation
2) retenir les questions auxquelles doit rpondre l'valuation
3) prciser comment les rponses ces questions sont utilises
4) fixer les principes de mise en uvre (rle des partenaires, diffusion prvue, rle et profil
de l'valuateur, etc.)
5) dterminer le domaine de l'valuation partir de la description et de l'analyse du pro-
gramme
6) proposer un dispositif d'valuation (les outils, les mthodes et les moyens utiles)

Cette tude de faisabilit doit dboucher sur la rdaction du cahier des charges de l'valuation.

L'tape 4 est intressante pour son lien avec l'analyse de la logique d'intervention et la prise en
compte de la dimension locale. Ainsi Trouslot caractrise le processus l'origine de l'mer-
gence des actions de matrise de l'nergie l'chelon local et les consquences que cela peut
avoir en termes d'valuation, avec quatre tapes [Trouslot 1995 p.483] :
Annexe B.3.7 Synthse sur la thse de Franck Trouslot
242
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
1) la mobilisation des acteurs
2) la sensibilisation des acteurs
3) l'mergence des projets
4) l'action


Pour un recours l'analyse multicritre

La recommandation finale de Trouslot est l'utilisation d'outils d'analyse multicritre, afin de
mieux prendre en compte les diffrents points de vue et les diffrents impacts, tout en permet-
tant une prsentation synthtique des rsultats.

Cette dmarche passe par la dfinition d'une grille de prise de dcision qui est constitue des
critres pris en compte pour l'valuation et de leur poids relatif. Le choix de ces critres et leur
poids est dtermin par un processus itratif de consultation et concertation des diffrents ac-
teurs concerns.

L'utilisation de cette grille donne un cadre l'approche pluraliste et fait le lien avec l'approche
classique, puisqu'elle renvoie ensuite l'valuation "classique" de chacun des critres.


Conclusions gnrales

Pour Trouslot, l'valuation peut tre considre comme une contrepartie la dcentralisa-
tion et la dconcentration des comptences, encourageant la demande croissante d'valua-
tion des Rgions [Trouslot 1995 p.535]. Ce qui est un argument de plus pour montrer que les
outils d'valuation sont indispensables au dveloppement des oprations locales, et en particu-
lier leur reconnaissance.

Par ailleurs, il fait ressortir que l'valuation propose une image qui se trouve largement
dfinie par la procdure elle-mme et relve deux catgories de biais qui participent la
dfinition de cette image : les biais lies aux techniques d'valuation et ceux associs l'in-
formation utilise par ces techniques [Trouslot 1995 p.536]

Ce constat montre en particulier qu'il ne suffit pas de dvelopper des outils de traitement des
donnes de plus en plus sophistiqus, si la question de la qualit des donnes utilises n'est
pas prise en compte. La rduction des incertitudes ne passe donc pas seulement par l'uti-
lisation d'outils mathmatiques et statistiques puissantes, mais par une rflexion sur les
donnes et leurs mthodes de collecte.

Trouslot note ce sujet qu'il a d'abord fallu palier l'absence de systmes d'information.
Mais pour lui, sur ce point, on peut attendre des avances significatives lies aux progrs
actuels de l'informatique et la diffusion des techniques associes dans les pratiques profes-
sionnelles [Trouslot 1995 p.537]. Son analyse s'avre en partie juste avec le nouveau disposi-
tif de suivi de l'ADEME (cf. section II.3.1.3), mais si les techniques sont aujourd'hui disponi-
bles leur mise en uvre n'est pas encore systmatique.

De plus Trouslot voit un autre facteur dformant essentiel, li aux jeux d'acteurs qui
peuvent biaiser les informations collectes.

Annexe B.3.7 Synthse sur la thse de Franck Trouslot
243
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Pour viter une approche trop instrumentale de l'valuation, qui conduit son inutilit
335
,
Trouslot recommande une dmarche plus dmocratique, base sur la prise en compte de
l'ensemble des points de vue. Ce qui permet en outre de mobiliser les acteurs concerns dans
le processus d'valuation et de limiter les phnomnes de distorsion de l'information [Trouslot
1995 p.538].

Toutefois pour ne pas tre instrumentalise son tour, cette approche pluraliste doit intgrer
le contenu quantitatif et informatif de l'approche classique. Pour ce faire, Trouslot propose le
recours aux mthodes d'analyses multicritres et multidcideurs.

Il conclut alors sur l'valuation au niveau local : il s'agirait de crer un lieu de ngociation et
de rflexion susceptible de valoriser les rseaux ainsi que la connaissance des acteurs locaux.
L'valuation serait alors un moyen de formaliser les rseaux dj existants l'chelon lo-
cal [Trouslot 1995 p.539]. Cette ide se retrouve aujourd'hui dans la fonction des Observa-
toires Rgionaux de l'Energie.

Trouslot constate alors qu'il semble ncessaire de faire voluer le mtier du charg d'va-
luation en lui proposant des mthodologies pratiques ouvertes sur sa nouvelle fonction
d'animation. [Trouslot 1995 p.540]

Il finit alors sur la ncessit de considrer l'valuation au travers d'une approche pluridis-
ciplinaire (conomique, juridique, sociologique et technique).






335
du fait d'un discrdit soit comme un outil de propagande, soit comme un objet administratif sans intrt

244
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006










Annexes C au Chapitre III



Annexes C.1 Complments la prsentation de la mthodologie.................................... 245
Annexe C.1.1 L'importance de la recherche pralable d'informations............................ 246
C.1.1.1 Historique du type d'opration................................................................................................ 246
C.1.1.2 Liste des retours d'exprience disponibles et recueil des informations associes................... 246
C.1.1.3 Les fiches pour les certificats d'conomies d'nergie : une nouvelle source de rfrence ...... 247
Annexe C.1.2 Description des diffrents outils constituant la mthode et de leur utilisation
......................................................................................................................................... 249
C.1.2.1 Le mode d'emploi de la mthode ............................................................................................ 250
C.1.2.2 La fiche de synthse................................................................................................................ 251
Annexes C.2 Complments sur les mthodes pour l'analyse de la logique d'intervention
................................................................................................................................................ 254
Annexe C.2.1 La prparation de l'aide pour les utilisateurs ............................................ 254
C.2.1.1 Structure et contenu de l'aide.................................................................................................. 254
Annexes C.3 Complments sur les mthodes de calcul..................................................... 256
Annexe C.3.1 Calcul des autres rsultats ........................................................................ 256
C.3.1.1 Dvelopper une banque de donnes de rfrence ................................................................... 256
C.3.1.2 Calcul des missions vites................................................................................................... 256
C.3.1.3 Calcul des impacts sur la charge............................................................................................. 257
C.3.1.4 Calcul des indicateurs d'efficacit........................................................................................... 259




245
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Annexes C.1 Complments la prsentation de la mthodologie


Ses annexes viennent complter la prsentation de la mthodologie.

D'une part, nous dtaillons l'tape de synthse des retours d'exprience disponibles, lment
prpondrant de la dmarche de capitalisation d'expriences (Annexe C.1.1). Cette tape se
droule en trois temps : l'historique du type d'opration considr, le reprage des retours
d'exprience les plus intressants et la synthse de ces informations, et la recherche dans les
ouvrages de rfrence des complments mthodologiques ncessaires.

D'autre part, nous dcrivons les outils / documents qui constituent une mthode, et comment
ils s'articulent entre eux, en s'arrtant sur le mode d'emploi et la fiche de synthse, documents
cls d'une mthode (Annexe C.1.2).
.




246
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Annexe C.1.1 L'importance de la recherche pralable d'informations


C.1.1.1 Historique du type d'opration


Avant de se lancer dans la dfinition d'une mthode d'valuation pour un type d'opration, il
est important de bien comprendre le contexte qui a men au dveloppement d'oprations de
ce type, et notamment les points suivants :
- importance des consommations d'nergie et/ou des appels de puissance lis l'usage
final cibl
- existence et raison du dveloppement de solution(s) performante(s) (technologie et/ou
bonnes pratiques) pour cet usage
- gisement valu correspondant la diffusion de cette (ou ces) solution(s) performante(s)
- acteurs impliqus dans la R&D de cette solution et dans sa commercialisation / diffusion
- principales barrires la diffusion de cette solution et/ou principaux leviers la favorisant

Selon la richesse des informations trouves, il est possible d'avoir ds cette tape des lments
concernant les principales leons tires des oprations passes pour la dfinition de nouvelles
oprations, et ainsi de disposer de premires informations sur les mthodes d'valuation utili-
ses.

Cette premire recherche est une recherche bibliographique en utilisant les mots cls spci-
fiques au type d'opration (en franais et en anglais) avec les moteurs de recherche scientifi-
ques
336
ainsi que dans les proceedings des confrences spcialises
337
. Cela permet de trouver
les principales publications sur le thme (consommations d'nergie, problmatiques d'valua-
tion, synthses d'tudes de cas, etc.)

Un exemple de synthse dtaille est le numro du CLIP sur la MDE et l'clairage en France
[Menanteau 1997]. Un exemple de l'application de notre mthode est prsent au travers de la
synthse concernant les oprations de substitution d'halognes (cf. sous-partie IV.2.1 et
Annexe D.2.1).


C.1.1.2 Liste des retours d'exprience disponibles et recueil des informations associes


La seconde phase des recherches se concentre sur la recherche d'tudes de cas et de retours
d'expriences suffisamment documents, en ciblant plus spcifiquement sur les questions
d'valuation lies au type d'opration considr.

Pour les tudes de cas, une recherche des oprations les plus intressantes peut tre faite
partir de moteurs de recherche classiques, mais des contacts supplmentaires sont souvent
ncessaires pour rcuprer les ventuels rapports d'valuation ou des informations compl-
mentaires.

Toutefois, certaines sources permettent directement d'avoir accs des rapports d'valuation

336
cf. www.sciencedirect.com, http://scholar.google.com, www.scopus.com
337
cf. www.eceee.org, www.aceee.org, www.iepec.org
Annexe C.1.1 L'importance de la recherche pralable d'informations
247
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
et/ou des tudes de cas dtailles :
- http://www.cee1.org/db/search/search.php3 : moteur de recherche du Consortium for
Energy Efficiency dans une base contenant environ 400 rapports d'valuation raliss par
les membres du Consortium depuis 1996 aux Etats-Unis
- http://www.calmac.org/search.asp : moteur de recherche du CALMAC (cf. section
Annexe A.1.2) dans la base de donnes des rapports d'valuation raliss pour l'autorit de
rgulation de Californie
- http://ec.europa.eu/energy/iebase/index.cfm : base de donnes des projets europens fi-
nancs dans le cadre des programmes SAVE et Intelligent Energy Europe
- http://www.osti.gov/bridge/basicsearch.jsp : rapports d'tudes finances par le DOE
- volume II du guide de l'AIE [Vreuls 2005b] : 31 tudes de cas (surtout des programmes
nationaux) ralises par les experts reprsentant les 8 pays participants
- annexe A du guide europen [SRCI 2001] : 9 tudes de cas ralises (surtout des pro-
grammes nationaux) par les experts participants l'tude

Les sources suivantes permettent de reprer des oprations intressantes. Le plus souvent, les
informations directement disponibles sur ces sites ne sont pas trs dtailles. Mais des
contacts sont en gnral mentionns pour obtenir plus de dtails :
- http://www.caddet.org/infostore/, http://www.energie-cites.org/,
http://www.managenergy.net/casestudies.html : tudes de cas et bonnes pratiques en Eu-
rope
- http://dsm.iea.org/INDEEP/prog/home.new.asp : base de donnes INDEEP de l'AIE qui
contient des tudes de cas des pays membres de l'AIE
- http://eega.cpuc.ca.gov/deer/ : base de donnes des programmes d'efficacit nergtique
de la Californie (voir aussi http://neaap.ncat.org/db/results.asp le site de la " Residential
Energy Efficiency Database" pour l'ensemble des USA)
- recherche parmi les oprations listes dans le recensement ralis en 2004 (cf. section
II.2.1)
- http://www.ADEME.fr/htdocs/publications/moteur.asp : moteur de recherche dans les
articles de la Lettre de l'ADEME

Au final il faut trier parmi les retours d'exprience trouvs ceux qui sont exploitables. Et no-
tamment ceux qui peuvent fournir le plus d'informations pour :
- disposer d'lments de comparaison, la fois pour les rsultats des oprations et pour
l'analyse de la logique d'intervention (en termes d'indicateurs intermdiaires notamment)
- connatre les mthodes d'valuation dj utilises

Pour complter la recherche d'information sur ce dernier point, il est utile de consulter les
mthodologies d'valuation existantes qui contiennent des conseils souvent prcieux pour
dfinir des mthodes d'valuation oprationnelles (cf. section I.3.2 sur les guides de rf-
rence).


C.1.1.3 Les fiches pour les certificats d'conomies d'nergie : une nouvelle source de rfrence


Les travaux engags pour dfinir des fiches de calcul pour les actions standardises ligibles
aux certificats d'conomies d'nergie (cf. section II.3.1.4) reprsentent une nouvelle source
de rfrence.

Annexe C.1.1 L'importance de la recherche pralable d'informations
248
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Les groupes de travail constitus par l'ATEE et les correspondants ADEME permettent
d'identifier les acteurs importants pour chaque type d'opration.

Les fiches ralises fournissent des informations et donnes de rfrence, que ce soit sur les
consommations d'nergie par usage, les technologies performantes ou les volumes d'activits
de certaines filires. Il faut cependant prendre ces donnes avec prcaution, car elles corres-
pondent des valeurs moyennes, sont le fruit de compromis et ne disposent pas toujours
d'une relle base scientifique.

Les travaux engags dans ce cadre restent les plus consquents pour mettre jour et obtenir
un consensus sur un large ventail de donnes.

Par ailleurs, les fiches de calcul fournissent aussi des modles de calcul. Nous en avons sou-
lign les limites dans la section II.3.1.4 (valeurs moyennes ex-ante, calculs simplifis pour
faciliter l'application des mthodes). Mais ils constituent aujourd'hui une rfrence laquelle
il est ncessaire de comparer les mthodes dveloppes en suivant notre mthodologie (lors-
que le type d'opration considr a t trait pour les certificats d'conomies d'nergie).

Notre mthodologie peut en outre tre utilise pour dfinir de nouvelles fiches de calcul pour
les certificats d'conomies d'nergie, ou pour constituer la mthode ex-post complmentaire
ces fiches.

Etape 1, recherche bibliographique des principales publications :
- www.sciencedirect.com, http://scholar.google.com, www.scopus.com
- www.eceee.org, www.aceee.org, www.iepec.org

Etape 2, recherche des tudes de cas les plus intressantes :
- http://www.cee1.org/db/search/search.php3
- http://www.calmac.org/search.asp
- http://ec.europa.eu/energy/iebase/index.cfm
- http://www.osti.gov/bridge/basicsearch.jsp
- volume II du guide de l'AIE [Vreuls 2005b]
- annexe A du guide europen [SRCI 2001]
- http://www.caddet.org/infostore/, http://www.energie-cites.org/,
http://www.managenergy.net/casestudies.html
- http://dsm.iea.org/INDEEP/prog/home.new.asp
- http://eega.cpuc.ca.gov/deer/, http://neaap.ncat.org/db/results.asp
- oprations listes dans le recensement des oprations locales de MDE en France (section
II.2.1)
- www.google.fr, copernic ou autres
- http://www.ADEME.fr/htdocs/publications/moteur.asp

Etape 3, recherche sur les mthodes d'valuation :
- les guides de rfrences [DOE 2001, TecMarket Works 2004, Vine 1999a, Vreuls 2005a,
SRCI 2001]
- travaux des groupes de travail de l'ATEE et de l'ADEME pour la dfinition de fiches de
calcul pour les certificats d'conomies d'nergie
Encadr 9 tapes et sources principales pour la recherche d'information

249
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Annexe C.1.2 Description des diffrents outils constituant la mthode et de leur
utilisation


Nous prsentons d'abord brivement les diffrents documents / outils qui constituent une m-
thode, en faisant rfrence aux sections o ils sont dtaills soit dans le Chapitre III, soit dans
la suite de l'annexe.

1) un mode d'emploi de la mthode qui prsente (cf. section C.1.2.1) :
- l'ensemble des documents et comment les utiliser
- comment prparer l'valuation, et en particulier la collecte des donnes ncessaires
- comment utiliser les rsultats obtenus, notamment pour communiquer sur l'opration

2) une fiche de synthse "version simplifie" qui permet de regrouper de manire structure
les informations principales sur l'opration et ses rsultats (pour l'archivage de l'opration et la
prsentation de ses rsultats) (cf. section C.1.2.2)

3) un module de calcul (par ex. fichier Excel) qui permet d'obtenir facilement les rsultats
quantitatifs partir des donnes d'entre dont la collecte est dcrite dans le mode d'emploi (cf.
partie III.3)

4) des conseils pour la ralisation d'enqutes et d'entretiens (pour approfondir l'valuation)
(cf. section III.2.2.4)


Ces documents sont complts par ceux servant la capitalisation des valuations :

5) des conseils pour l'analyse de la logique d'intervention portant notamment sur (cf. partie
III.2) :
- la description du processus de l'opration
- les indicateurs intermdiaires
- les points de vue et la perception de l'opration par les diffrents acteurs concerns
- la comparaison de ces donnes pour l'opration value avec des donnes obtenues pour
d'autres oprations similaires

6) une mthode de calculs (aide du module de calcul) qui dtaille (cf. partie III.3) :
- les formules utilises pour calculer les rsultats de l'opration
- les paramtres utiliss dans ces formules, et en particulier comment les dfinir

7) une fiche de synthse "version complte" qui reprend la structure de la "version simpli-
fie" avec des lments complmentaires pour faciliter les recherches d'information parmi les
retours d'expriences (cf. section C.1.2.2)


Chacun de ces documents est un outil la disposition de l'valuateur, aussi bien pour l'valua-
tion de terrain que pour la centralisation des valuations. Pour faciliter la navigation entre les
documents, les informations sur l'opration sont repres par un code (par exemple A21) qui
est repris dans chaque document lorsqu'il traite de cette information. Des liens hypertextes
peuvent aussi tre rajouts.

Annexe C.1.2 Description des diffrents outils constituant la mthode et de leur utilisation
250
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006

C.1.2.1 Le mode d'emploi de la mthode


Le mode demploi doit regrouper les informations essentielles lutilisation de la mthode de
terrain par un valuateur de terrain qui peut tre un non-spcialiste de lvaluation. Il doit tre
concis et didactique dans le but de participer la formation des utilisateurs et leur sensibili-
sation aux questions cls lies l'valuation.

Le but est la fois de familiariser l'utilisateur avec la mthode, mais aussi de lui en montrer
l'intrt.

Le format propos est le suivant :

1) des explications prliminaires : prsenter en une page les objectifs et les intrts de rali-
ser une valuation, ainsi que les principaux conseils suivre (par ex. prvoir lvaluation le
plus tt possible) et une synthse courte sur la logique dintervention pour ce type d'opration

Ces explications sont apparues importantes pour impliquer les acteurs concerns et faciliter
leur appropriation de la mthode.

2) une prsentation des diffrents documents / outils qui constituent la mthode, avec une
description qui distingue les outils de base de la mthode de terrain et les outils complmen-
taires pour approfondir lvaluation, avec une hirarchisation des points "pour aller plus loin"

Cette prsentation donne un aperu global de la mthode et de comment elle est structure
autour des outils proposs.

3) une prsentation des donnes principales collecter, et comment les collecter

C'est un des points cls pour assurer la qualit de l'valuation. Cette partie doit aussi tre l'oc-
casion de sensibiliser les utilisateurs la notion de qualit des donnes et d'incertitudes sur les
rsultats.

4) des conseils pour lutilisation des rsultats centrs sur les prcautions prendre du fait
des incertitudes et sur l'importance de la communication "post-opration" pour renforcer la
mobilisation des acteurs et des publics viss.

C'est aussi l'occasion de sensibiliser les utilisateurs la diffrence entre rsultats bruts et nets.

5) des annexes si ncessaires sur :
- des ordres de grandeur de cots dvaluation estims partir des retours dexpriences
disponibles
- une synthse sur la dynamique dacteurs du domaine dactivit concern (quels sont les
acteurs cls, quels sont leurs intrts, comment les impliquer, etc.)
- des conseils complmentaires pour les donnes qui peuvent tre difficiles obtenir

Par ailleurs, un point important au niveau de la centralisation des valuations concernant cette
partie est de maintenir jour une liste avec :
- les diffrentes sources de donnes existantes (EDF, ADEME, INSEE, etc.)
Annexe C.1.2 Description des diffrents outils constituant la mthode et de leur utilisation
251
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
- les principaux moyens de collecte de donnes, et en particulier les formes originales
denqute et les contacts existants (agences EDF, Espaces Info Energie, etc.) qui peuvent
servir collecter des donnes. En ayant soin de prciser les limites sur la prcision des
donnes obtenues, dans le cas o ces donnes seraient utiliser de manire quantitative.


C.1.2.2 La fiche de synthse


Structure gnrale

Nous avons dfini la structure de la fiche de synthse partir de la grille d'analyse utilise
pour les tudes de cas (sous-parties I.3.1, II.3.2 et Annexe B.3.3).

Cette fiche est organise en trois grandes parties :
A. Caractristiques de l'opration
B. Caractristiques de la mthode d'valuation
C. Rsultats de l'valuation

Chaque partie est divise en un nombre de champs qui sont reprs par un code pour faciliter
la navigation entre les documents et assurer leur cohrence.

La plupart de ces champs sont toujours les mmes quel que soit le type d'opration considr.
D'autres doivent tre adapts suite l'analyse des critres de segmentation et de la synthse
sur les retours d'exprience disponibles (tape 3 de la mthodologie, cf. Encadr 5).

Le format dtaill de la fiche de synthse a t dvelopp partir d'un cas concret : la m-
thode d'valuation pour les oprations de promotion grand public des LBC (cf. Annexe
D.1.4). Cette fiche a alors t teste sur une opration du Plan Eco Energie (programme de
MDE dans la Rgion PACA, cf. Annexe D.1.1). Il est alors apparu ncessaire de proposer
deux versions de fiche :
- une version simplifie destine aux acteurs de terrain
- une version complte, support de la centralisation des valuations

La version simplifie a un format court (cinq pages), est limite aux informations principales
et n'utilise pas de termes techniques. Son but est de servir de support l'valuation de terrain,
notamment pour faciliter la collecte de donnes.

La version complte suit la mme structure mais est plus dveloppe (dix pages). Y figurent
des dtails supplmentaires, notamment sur les caractristiques d'valuation et pour faire res-
sortir la qualit des rsultats prsents. Son but est de transcrire les informations de manire
prcise et/ou technique afin d'en faciliter l'archivage et de permettre la comparaison ultrieure
entre opration (voir l'exemple de fiche prsent dans l'Annexe D.1.4).


Caractristiques de l'opration

Les champs de cette partie correspondent pour la plupart aux critres de segmentation dfi-
nis dans la section II.2.2.2.

Annexe C.1.2 Description des diffrents outils constituant la mthode et de leur utilisation
252
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Ils sont regroups en cinq sous-parties qui permettent de rendre compte de la stratgie et du
contenu de l'opration :
- information gnrale
- cibles de l'opration
- actions prvues / ralises
- logique d'intervention
- objectifs de l'opration

Tous ces champs correspondent des renseignements directs sur l'opration, et ne posent
donc a priori aucun problme pour tre rempli. L'avantage d'utiliser un format standard est
d'assurer une collecte systmatique de ces informations de base.

Pour la logique d'intervention et les objectifs de l'opration, les informations directement dis-
ponibles peuvent ne pas tre suffisamment explicites. L'utilisateur de la mthode doit alors les
retranscrire, l'aide des conseils correspondants (cf. section III.2.2.1).

Une sous-partie supplmentaire fait le lien avec la partie suivante sur les caractristiques de
l'valuation en prsentant les objectifs d'valuation dduits de la description de l'opration.


Caractristiques de l'valuation

Les champs de cette partie ont t dduits d'une part des tudes de cas ralises, et d'autre part
des analyses bibliographiques sur les problmatiques d'valuation.

Ils sont regroups en trois sous-parties :
- informations gnrales
- dtails des cots et moyens
- dtails des mthodes de calcul

Les deux premires sous-parties ont pour but de rendre compte de la prparation de l'va-
luation. Ces informations sont donc directement accessibles pour l'utilisateur.

La troisime renseigne sur le traitement fait des questions cls lies l'valuation (rfren-
tiel, facteurs d'ajustement, indicateurs de prcision). Ces lments ncessitent d'tre dj fami-
liariss avec les problmatiques de l'valuation et ne sont donc abords que dans la version
complte. Ils sont renseigner par un utilisateur dj form cette mthode.


Rsultats de l'opration

Ces champs ont t principalement dduits des analyses bibliographiques sur les problmati-
ques d'valuation, puis mis jour suite l'tude des pratiques d'valuation, et notamment aux
tudes de cas ralises.

Ils sont regroups en quatre sous-parties :
- rcapitulatifs des principaux rsultats
- impacts environnementaux
- bilan conomique
- valuation de la logique d'intervention : indicateurs intermdiaires
Annexe C.1.2 Description des diffrents outils constituant la mthode et de leur utilisation
253
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006

La premire sous-partie est une synthse des trois autres, qui correspondent aux trois champs
principaux d'valuation identifis (cf. section III.1.1.1).

Pour les impacts environnementaux et le bilan conomique, les champs sont "standard" et
correspondent des indicateurs classiques de rsultats. Ces rsultats sont de plus directement
obtenus partir du module de calcul de la mthode (cf. partie III.3).

En revanche pour l'valuation de la logique d'intervention, les indicateurs sont dduire de
la synthse des retours d'exprience disponibles (cf. partie III.2). Ils peuvent correspondre
des rsultats quantitatifs ou qualitatifs. Le traitement des informations ne peut tre standardis
comme pour les calculs des impacts environnementaux et du bilan conomique. L'aide est
donc particulirement importante pour cette partie de l'valuation, souvent nglige par les
oprateurs de terrain.

Pour les rsultats quantitatifs, la fiche fait ressortir deux indicateurs sur la qualit des rsultats
et/ou mthodes de calcul :
- le premier pour faire la distinction entre rsultats bruts et nets (cf. section III.3.1.3)
- le second, spcifique la mthode de calcul utilise (cf. section III.3.3.3)


Conclusions gnrales et schmas de synthse sur
l'opration

De manire faire ressortir l'essentiel du travail d'valuation ralis pour les destinataires
(dcideurs, publics viss, ou autres), la fiche de synthse comprend un champ "conclusions
gnrales" et deux schmas : les tableaux des acteurs et actions, et le schma de synthse de
l'analyse de la logique de l'opration (cf. section III.2.4.2).

Les conclusions gnrales regroupent l'apprciation globale sur l'opration, les rsultats
quantitatifs les plus rvlateurs, les principaux enseignements tirs de l'analyse de la logique
d'intervention, et les remarques ventuelles sur la ralisation de l'valuation.

Les tableaux des acteurs et actions ont pour but de prsenter en une page quels ont t les
acteurs impliqus et les actions ralises, parmi les possibilits les plus courantes pour le type
d'opration considr. Cela fait ainsi ressortir les choix de conception de l'opration.

Le schma de synthse reprend les indicateurs intermdiaires sur la logique d'intervention
pour retranscrire le cheminement de l'opration jusqu'aux rsultats finals. Pour chaque indica-
teur, une caractrisation semi-qualitative (mauvais, moyen, bon) permet alors de dtecter vi-
suellement les points forts et les points faibles de l'opration, dans le but d'en expliquer le
succs/chec.

Les deux schmas ont pour but de faciliter la comparaison entre oprations et de faire ressortir
les points cls de la conception de l'opration, dans une optique d'aide la dcision.



254
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Annexes C.2 Complments sur les mthodes pour l'analyse de la
logique d'intervention


(une seule annexe pour cette partie)


Annexe C.2.1 La prparation de l'aide pour les utilisateurs


C.2.1.1 Structure et contenu de l'aide


La structure de l'aide s'appuie sur celle de la fiche de synthse, en utilisant les mmes codes
repres pour faciliter la navigation entre les deux documents, et que l'utilisateur puisse ais-
ment trouver les informations complmentaires qu'il souhaite.

L'aide comprend cinq parties principales :
- des explications prliminaires (pour rappeler l'intrt de l'analyse de la logique d'inter-
vention, et pour expliquer comment utiliser le document et son rapport avec les autres
documents de la mthode)
- les conseils pour la description du processus de l'opration (cf. sections III.2.2.1,
III.2.2.2 et III.2.2.5)
- la prsentation des indicateurs proposs (cf. section III.2.2.3)
- les conseils pour prendre en compte les points de vue des diffrents acteurs (cf. section
III.2.2.4)
- les conseils pour comparer l'opration avec d'autres (cf. section III.2.2.4)

Lorsque suffisamment de REx sont disponibles, il est alors intressant d'ajouter une annexe
prsentant les principales conclusions issues de ces REx, la fois pour la conception de futu-
res oprations, et pour la ralisation de l'valuation.

Le service centralisateur doit mettre jour rgulirement ce document, et en particulier
l'annexe avec les conclusions, en s'appuyant sur les nouvelles valuations ralises.

L'aide est par ailleurs relie avec un document de conseils gnriques pour la ralisation d'en-
tretiens et d'enqutes (cf. section III.2.2.4).


IV.3.4.4 Ce qu'il faut adapter selon le type d'opration


La structure gnrale de l'aide reste la mme d'une opration l'autre. Cependant, certains
lments peuvent tre adapter, en liaison avec la fiche de synthse et partir des REx dispo-
nibles, en particulier :

- pour la description du processus de l'opration (cf. sections III.2.2.1, III.2.2.2 et
III.2.2.5) :
- la description de la situation nationale
Annexe C.2.1 La prparation de l'aide pour les utilisateurs
255
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
- l'identification des barrires principales
- les objectifs les plus frquemment rencontrs
- les modalits des critres de segmentation correspondant la cible et la stra-
tgie de l'opration
- les types d'acteurs concerns

- pour les indicateurs proposs (cf. section III.2.2.3) : le choix des indicateurs, leur dfini-
tion et comment les renseigner

- pour la prise en compte des points de vue (cf. section III.2.2.4) : les diffrents acteurs
interroger, les informations recherches et leur apport pour l'analyse

- pour la comparaison entre oprations (cf. section III.2.2.4) : les lments pouvant servir
de support aux comparaisons et les conseils pour l'utilisation des schmas rcapitulatifs









256
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Annexes C.3 Complments sur les mthodes de calcul


(une seule annexe pour cette partie)


Annexe C.3.1 Calcul des autres rsultats


C.3.1.1 Dvelopper une banque de donnes de rfrence


La mthodologie que nous proposons, base sur une articulation entre niveaux oprationnel et
centralisateur et sur la capitalisation d'expriences, ne peut tre applique que dans le cadre
d'un vritable dispositif d'valuation. Pour tre efficace, ce dispositif doit s'appuyer sur la
constitution d'une banque de donnes pour optimiser les contributions de tous les travaux
d'valuation (des deux niveaux, oprationnel et centralisateur).

Cette banque de donnes (ou data warehouse
338
) doit aussi bien regrouper les valeurs ex-ante
des mthodes de calcul, que des valeurs de rfrence plus gnrales et utiles pour tous les ty-
pes d'opration. Le but de cette banque est d'optimiser les cots d'valuation, d'une part en
mettant disposition des valeurs par dfaut valides, et d'autre part en mettant profit chaque
valuation pour mettre jour ces valeurs.

Disposer de donnes de rfrence est d'autant plus ncessaire pour l'valuation d'oprations
locales, que celles-ci ne peuvent donner lieu des tudes approfondies qui couvrent l'ensem-
ble des besoins d'valuation. Les donnes de rfrence permettent alors de traiter tous les
principaux points de l'valuation, sans avoir recours des tudes coteuses et complexes.

Exemples de donnes de rfrence "gnrales" :
- facteurs de conversion entre conomies d'nergie et missions vites
- cots marginaux moyens de production d'nergie
- cots moyens d'investissement en capacit de production d'nergie
- cots marginaux des moyens de transport et/ou de distribution d'nergie


C.3.1.2 Calcul des missions vites


L'valuation des rductions d'missions correspond une conversion des conomies d'ner-
gie en rduction d'missions. Elle ne prend donc en compte que les missions lies aux
consommations d'nergie, et pas les missions qui pourraient intervenir sur le reste du cycle
de vie des quipements tudis
339
.

Ce calcul revient donc utiliser des facteurs de conversion, du type gCO
2
/kWh. Dans la majo-

338
cf. [TecMarket Works 2004 pp.195-198]
339
de plus, pour la grande majorit des quipements, les missions sur le reste du cycle de vie sont ngligeables
par rapport celles pendant leur phase de fonctionnement.
Annexe C.3.1 Calcul des autres rsultats
257
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
rit des cas, l'valuation d'une opration locale n'est pas l'occasion de dfinir de tels facteurs.
La mthode doit donc rechercher les facteurs de rfrence utiles pour le type d'opration
considr. Trois cas de figure sont distinguer selon le critre d'nergie(s) concerne(s) :

- pour l'lectricit : utilisation des ratios dfinis dans la note de cadrage sur le contenu
CO2 du kWh par usage, fruit du travail conjoint d'EDF et de l'ADEME, et ractualise tous
les trois ans [ADEME 2005b]

- pour les autres nergies non produites localement : ratios standard moyens dfinis
pour ces nergies (donnes CITEPA, ADEME
340
ou autres)

- pour les nergies produites localement : ratios moyens dfinis pour le(s) site(s) de
production considr(s)

La traduction des impacts en termes de rductions d'missions n'est pas l'objectif principal des
valuations d'oprations locales (sauf exception). Les ratios moyens dfinis sont donc suffi-
sants, mme s'ils comportent des incertitudes. Ils permettent d'avoir un ordre de grandeur cor-
rect des rductions d'missions induites par l'opration et comme ces ratios sont partags en
gnral par l'ensemble des acteurs, les rsultas obtenus peuvent tre compars entre opra-
tions. Par ailleurs, cela permet de rpondre la demande de visibilit des rsultats aussi bien
pour les acteurs concerns que pour le grand public.


C.3.1.3 Calcul des impacts sur la charge


Ce calcul ne concerne a priori que les oprations portant sur l'lectricit (et ventuellement sur
les rseaux de chaleur).

Par impacts sur la charge, nous entendons ici la rduction de l'appel de pointe (en termes de
puissances appeles). Nous nous concentrons sur ce point car c'est cet appel qui fixe les be-
soins en capacit de production, transport et distribution d'lectricit.

La rduction de l'appel de pointe peut tre obtenue grce des quipements plus performants
(i.e. qui appellent une puissance moindre pour le mme service rendu) ou en rduisant les
utilisations de l'nergie pendant la priode de pointe (par ex. effacement, systmes heures
pleines / heures creuses).

Nous proposons un calcul en deux tapes :
- calcul de la rduction des puissances installes (et/ou des puissances effaables)
- estimation de la rduction relle de la pointe


Rduction de la puissance installe

Par puissance installe, on entend ici soit la puissance appele si celle-ci est connue et de-
meure constante, soit la puissance nominale de l'quipement.


340
voir par exemple les explications des calculs de facteur de conversion fournies dans la mthode Bilan Car-
bone

de l'ADEME [ADEME 2005a]


Annexe C.3.1 Calcul des autres rsultats
258
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Il faut distinguer deux cas de figure :
- promotion d'quipements performants : calcul de la rduction des puissances installes
- rduction des utilisations : calcul des puissances potentiellement concernes (i.e. effa-
ables)

La mthode de calcul de la rduction de puissance installe est proche de la mthode par
analyse directe pour les conomies d'nergie (cf. catgorie de mthode 4) de la section
III.3.1.1), avec un paramtre en moins, la dure d'utilisation. Elle se base aussi sur la combi-
naison de paramtres soit estims ex-ante, soit dfinis ex-post.

D'une manire gnrale, le calcul revient au produit de la rduction moyenne constate par
action (ou quipement) par le nombre dactions ralises (ou d'quipements installs).

La rduction moyenne par action est en gnral dfinie par la diffrence entre les puissances
des quipements pour le scnario de rfrence (cf. section III.3.1.3) et les puissances des
quipements performants.

La formule gnrale est du type :

rduction de la puissance installe =
(Prf * FCMrf Pperf * FCMperf) * nombre d'actions * effet de persistance * (1 effet
d'aubaine)

avec :
- ? rf : paramtres dfinis pour le scnario de rfrence (cf. B31 dans la section V.2)
- ? perf : paramtres dfinis pour la situation aprs l'opration (quipement performant)
- P : Puissance nominale moyenne
- FCM : Facteur de Charge Moyen

Le facteur de charge moyen correspond la charge moyenne de fonctionnement des quipe-
ments. Il ne s'applique que lorsque les quipements fonctionnent puissance variable. Ce pa-
ramtre peut soit tre estim ex-ante partir d'tudes existantes ou de donnes fabricant, soit
tre dfini ex-post par une campagne de mesures (directement de puissance ou par le biais
d'une grandeur intermdiaire proportionnelle).

Les termes de puissance et de facteur de charge peuvent dpendre d'autres paramtres qui
devront alors tre introduits dans la formule.


Dans le cas d'opration visant la rduction des utilisations pendant les priodes de pointe, il
s'agit alors d'estimer les puissances concernes, soit ex-post partir de relevs ou enqutes,
soit ex-ante partir de valeurs moyennes sur le parc d'quipement (puissance moyenne et taux
d'quipement).

Ce premier calcul n'est pas un rsultat effectif d'impact sur la charge. Mais il permet de
connatre la rduction maximale possible de la pointe de charge du fait de l'opration. Cet
indicateur permet de savoir s'il est intressant de rechercher un impact sur la pointe de charge
au niveau des donnes du rseau (donnes GRD).

Si la rduction de puissance installe reste infrieure l'ordre de grandeur du taux de crois-
Annexe C.3.1 Calcul des autres rsultats
259
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
sance annuel moyen, alors l'impact sur la charge reste minime et ne pourra pas tre dtect
dans la pratique. Dans le cas inverse, il est intressant d'approfondir l'valuation de l'impact
sur la charge.


Estimation de la rduction de la pointe de charge

Il s'agit d'une estimation base sur l'application d'un facteur correctif la rduction de puis-
sance installe (ou aux puissances effaables), pour tenir compte du fait que tous les quipe-
ments ne sont pas tous appels (ou effacs) au moment de l'appel de pointe.

Ce facteur est le facteur d'appel, i.e. l'estimation du pourcentage des quipements qui fonc-
tionnent (ou qui sont effacs) simultanment lors de l'appel de pointe.

Il est soit estim partir de statistiques existantes, soit dfini de manire empirique par en-
qute ou ventuellement mesure (lorsque l'impact attendu le justifie).

Si le rsultat alors obtenu est suprieur au taux de croissance annuel moyen de la pointe pour
la zone concerne, cette estimation peut alors tre compare avec les donnes GRD :

- soit une comparaison entre l'estimation de la rduction de la pointe (en kW) et l'augmenta-
tion tendancielle prvue (diffrence entre les donnes de pointe d'avant l'opration et les
donnes d'volution tendancielle prvue)

- soit une comparaison entre la rduction relative estime (rapport entre l'estimation de la
rduction de la pointe et les donnes GRD de pointe de charge) et l'volution du taux de
croissance annuel moyen de la pointe donne par le GRD

Lorsque la rduction de la pointe est l'objectif principal de l'opration et de l'valuation, une
tude complmentaire peut tre mene pour tudier les impacts au niveau le plus dsagrg
possible (en termes de zones gographiques), ce qui dpend des donnes GRD accessibles (cf.
section II.3.2.1 et l'exemple fourni dans l'Annexe B.3.3).


C.3.1.4 Calcul des indicateurs d'efficacit


Les indicateurs d'efficacit rendent compte de l'analyse cots / bnfices de l'opration. Les
cots prendre en compte varient selon les points de vue adopts (socit, matre d'ouvrage,
participant). Les bnfices comptabiliser dpendent des objectifs tudis.

Ces indicateurs sont un rapport entre des dpenses (en ) et rsultats (soit dans l'unit du r-
sultat, soit en s'il est montaris).

Exemples d'indicateurs :
- cot moyen des conomies d'nergie ralises (en c/kWh conomis)
- cot moyen des missions vites (en /tCO2)
- conomies moyennes par participant (en )
- temps de retour sur investissement (en annes)
- ratio global bnfices / cots selon les diffrents points de vue (sans unit, tous les para-
Annexe C.3.1 Calcul des autres rsultats
260
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
mtres sont montariss)

Le guide europen fournit le dtail des cots et bnfices prendre en compte selon les points
de vue [SRCI 2001 p.59].

Lorsque les cots et les bnfices sont pris en compte sur la dure de vie des actions, alors ils
doivent tre actualiss. Le taux d'actualisation par dfaut est celui appliqu pour les certificats
dconomies dnergie, soit 4%.

Nous dtaillons ci-aprs deux exemples d'indicateurs.


Cots des conomies d'nergie

Cest lindicateur le plus souvent utilis. Il permet notamment :
- de comparer le rsultat obtenu du point de vue global avec des valeurs connues de cots
marginaux de long terme de production dlectricit (le kWh net conomis tait-il plus
ou moins cher que le kWh supplmentaire produire ?)
- de comparer le rsultat obtenu du point de vue des matres douvrage avec des rsultats de
cet indicateur obtenus pour dautres oprations du mme type ET dautres types (le kWh
net conomis grce cette opration tait-il plus ou moins cher que celui conomis lors
dautres oprations ?)

Son calcul est diffrent selon les points de vue adopts. Nous dcrivons ici le calcul du point
de vue de la socit.

cot du kWh conomis
=
s actualise totales nergie d' conomies
ts participan les pour actualis surcot opration l' de actualis total budget +


Ce calcul relate le point de vue de la socit. Les dpenses prendre en compte ici sont donc
des dpenses dues l'opration et qui ne correspondent pas une redistribution entre les
diffrents acteurs de l'opration. Ainsi il ne faut pas prendre en compte ici dans le budget total
les ventuelles subventions. Le budget total correspond donc la somme des dpenses des
partenaires financiers de l'opration, l'exception des subventions.

Le surcot pour les participants correspond aux investissements supplmentaires que les
participants ont d raliser par rapport au scnario de rfrence. Le nombre de participants
prendre en compte ici est le nombre de participants hors effet daubaine et en tenant compte
en plus des investissements supplmentaires ventuels lis l'effet d'entranement.


Ratio global bnfices/cots

Cet indicateur est utilis pour les tests de rentabilit (cf. Tableau 1). Nous dcrivons ici l'indi-
cateur du test du point de vue des fournisseurs d'nergie :

=
affaire d' chiffre de pertes nergie d' r fournisseu du dpenses part
blancs s certificat des valeur nergie d' achat d' ou production de vits cots
+
+


Annexe C.3.1 Calcul des autres rsultats
261
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Selon que le fournisseur est lui-mme producteur ou non d'nergie, il faut prendre en compte
les cots de production ou les cots moyens d'achat d'nergie.

La valeur des certificats dconomies dnergie n'est prendre en compte que si l'opration
est ligible et que le fournisseur est le porteur du projet qui recevra les certificats. Cette valeur
peut tre base soit sur la pnalit libratoire (2 c/kWh cumac), soit sur le prix moyen du
march pour acqurir un certificat (ce prix moyen est public de part la loi).

Les pertes de chiffre d'affaire correspondent aux pertes lies la diminution des ventes du fait
des conomies d'nergie ralises.




262
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006










Annexes D au Chapitre IV





263
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Les Annexes D viennent en complments des conclusions prsentes dans le Chapitre IV sur
l'application de notre mthodologie trois concrets et le test des mthodes obtenues sur des
oprations du Plan Eco Energie (programme de MDE ralis dans l'Est de la Rgion PACA,
cf. Annexe D.1.1).

La premire mthode a t mise au point pour l'valuation des oprations locales de promo-
tion des LBC. Nous dtaillons d'abord la prparation de cette mthode (Annexe D.1.2) et
l'analyse du contexte de ce type d'opration (Annexe D.1.3). Puis nous prsentons la fiche de
synthse, document central de la mthode (Annexe D.1.4). Nous proposons ensuite des indi-
cateurs pour accompagner la partie d'analyse de la logique d'intervention (Annexe D.1.5).
Concernant la quantification des rsultats, nous examinons les paramtres utiliss dans le mo-
dle de calcul pour regrouper les valeurs ex-ante disponibles (Annexe D.1.6), et nous compa-
rons notre modle avec celui des certificats d'conomies d'nergie (Annexe D.1.7). Nous nous
intressons enfin la question des incertitudes au travers de l'tude de l'influence de chacun
des paramtres sur les rsultats finals d'conomies d'nergie et d'impact sur la charge (Annexe
D.1.8).

Nous exposons ensuite les principaux rsultats issus de l'valuation de l'opration de promo-
tion de LBC ralise en PACA en 2004 : rsum de l'opration (Annexe D.1.9), conclusions
issues de l'analyse de la logique d'intervention (Annexe D.1.10 et Annexe D.1.11), dtails des
calculs des rsultats (Annexe D.1.12 et Annexe D.1.13).

L'tude des oprations de substitution d'halognes n'a pas abouti sur une mthode complte,
faute de terrain d'exprience. En revanche, elle constitue un bon exemple de synthse biblio-
graphique sur un type d'opration (Annexe D.2.1). Nous rapportons galement un exemple
d'valuation trouv lors de nos recherches bibliographiques (Annexe D.2.2).

Enfin, l'tude des oprations de sensibilisation dans le tertiaire a t l'occasion de complter la
partie [analyse de la logique d'intervention] de la mthode d'valuation correspondante au
travers d'une liste d'indicateurs possibles (Annexe D.3.1). Concernant le calcul des rsultats,
cette partie de la mthode n'a pu tre finalise faute de retours d'exprience suffisamment
consquents sur ce point, mais nous avons pu tester une mthode simplifie sur une opration
pilote (Annexe D.3.2).




Sommaire des Annexes D
264
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Annexes D.1 Complments pour la mthode d'valuation pour les oprations de
promotion de LBC................................................................................................................ 266
Annexe D.1.1 Prsentation du Plan Eco Energie ............................................................ 267
D.1.1.1 Prsentation gnrale du Plan Eco Energie (PEE).................................................................. 267
D.1.1.2 Dtails des oprations engages ............................................................................................. 267
Annexe D.1.2 Prparation de la mthode ........................................................................ 270
D.1.2.1 Synthse bibliographique ....................................................................................................... 270
D.1.2.2 Leons partir d'tudes de cas et/ou de rapports d'valuation................................................ 273
Annexe D.1.3 Contexte des oprations locales de promotion de LBC ........................... 275
D.1.3.1 Besoins et barrires identifis................................................................................................. 275
D.1.3.2 Objectifs et stratgies de ce type d'opration.......................................................................... 276
D.1.3.3 Hypothses de ce type d'opration.......................................................................................... 276
D.1.3.4 Contexte pour la promotion de LBC ...................................................................................... 277
Annexe D.1.4 Fiche de synthse de l'opration de promotion de LBC PACA 2004 ...... 280
D.1.4.1 Caractristiques de l'opration................................................................................................ 280
D.1.4.2 Caractristiques de la mthode d'valuation........................................................................... 285
D.1.4.3 Rsultats de l'opration........................................................................................................... 287
D.1.4.4 Conclusions sur l'opration..................................................................................................... 293
Annexe D.1.5 Indicateurs proposs pour l'analyse de la logique d'intervention pour les
oprations de promotion des LBC................................................................................... 300
D.1.5.1 Les indicateurs de participation.............................................................................................. 300
D.1.5.2 Indicateurs de transformation de march................................................................................ 301
D.1.5.3 Impacts du plan de communication........................................................................................ 302
Annexe D.1.6 Dfinition des valeurs ex-ante des paramtres de calcul pour les oprations
de promotion de LBC...................................................................................................... 303
D.1.6.1 Taux d'effet d'aubaine (Aub) .................................................................................................. 304
D.1.6.2 Dure annuelle moyenne d'utilisation (Dj) et rpartition des LBC installes par type de pice
(%Picej) ............................................................................................................................................. 305
D.1.6.3 Taux d'effet d'entranement (Ent) ........................................................................................... 306
D.1.6.4 Nombre total de LBC diffuses pendant l'opration (Nlbc) ................................................... 306
D.1.6.5 Puissance moyenne des LBC installes (Plbc) ....................................................................... 306
D.1.6.6 Puissance moyenne des ampoules incandescentes substitues (Psub).................................... 307
D.1.6.7 Dure de vie moyenne des LBC (Dlbc).................................................................................. 308
D.1.6.8 Facteur d'Appel (FA).............................................................................................................. 308
D.1.6.9 Taux d'effet rebond sur les dures d'utilisation (Rbj) ............................................................. 308
D.1.6.10 Part de LBC utilises pour un nouveau point lumineux (Rb2) ............................................. 310
D.1.6.11 Taux de participation relle (PR).......................................................................................... 310
Annexe D.1.7 Comparaison avec les certificats d'conomies d'nergie.......................... 311
D.1.7.1 Diffrence d'objectifs et de modles de calcul ....................................................................... 311
D.1.7.2 Valeurs ex-ante pour les puissances et les dures d'utilisation............................................... 311
D.1.7.3 Additionnalit et effet d'aubaine............................................................................................. 312
D.1.7.4 Conclusions ............................................................................................................................ 313
Annexe D.1.8 Influence des plages de variation par paramtre pour les rsultats
d'conomies d'nergie et d'impacts sur la charge pour les oprations de promotion de LBC
......................................................................................................................................... 314
Annexe D.1.9 Rsum de l'opration de promotion de LBC PACA 2004...................... 316
Annexe D.1.10 Organisation de la grande distribution et rapport avec les oprations de
promotion de LBC et leur valuation .............................................................................. 317
D.1.10.1 Les diffrents types d'enseignes ........................................................................................... 317
D.1.10.2 L'importance relative d'une opration locale dans la stratgie des fabricants....................... 318
D.1.10.3 Consquences pour la conception d'une opration de promotion des LBC.......................... 318
D.1.10.4 Consquences pour l'valuation............................................................................................ 320
Annexe D.1.11 Enseignements sur la logique d'intervention.......................................... 322
Sommaire des Annexes D
265
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
D.1.11.1 Perception de l'opration par les fabricants .......................................................................... 322
D.1.11.2 Importance du rapport avec la grande distribution ............................................................... 323
D.1.11.3 Dimension locale.................................................................................................................. 324
D.1.11.4 Des enqutes auprs du grand public souvent subjectives.................................................... 325
Annexe D.1.12 Valeurs utilises pour les calculs des rsultats de l'opration de promotion
de LBC PACA 2004........................................................................................................ 326
D.1.12.1 Nombre brut de LBC diffuses............................................................................................. 326
D.1.12.2 Effet d'aubaine...................................................................................................................... 327
D.1.12.3 Effet d'entranement.............................................................................................................. 327
D.1.12.4 Rpartition par pice et dure d'utilisation ........................................................................... 328
Annexe D.1.13 Etude des incertitudes pour les rsultats de l'opration de promotion de
LBC de PACA 2004........................................................................................................ 329
D.1.13.1 Economies d'nergie annuelles brutes .................................................................................. 329
D.1.13.2 Economies d'nergies annuelles nettes ................................................................................. 330
D.1.13.3 Emissions vites annuelles brutes....................................................................................... 331
D.1.13.4 Rduction de la pointe de charge.......................................................................................... 332
Annexe D.1.14 Comparaison de l'opration de promotion des LBC PACA 2004 avec
d'autres retours d'exprience............................................................................................ 333
D.1.14.1 Comparaison gnrale de PACA 2004 avec les autres REx................................................. 333
D.1.14.2 Comparaison dtaille des indicateurs de rsultats............................................................... 334
D.1.14.3 Comparaison des lments qualitatifs .................................................................................. 336
Annexes D.2 sur les oprations de substitution des halognes ......................................... 340
Annexe D.2.1 Synthse bibliographique sur les oprations de substitution des halognes
......................................................................................................................................... 341
D.2.1.1 Historique de la problmatique des torchres aux USA......................................................... 341
D.2.1.2 Les types d'opration.............................................................................................................. 345
Annexe D.2.2 Exemple d'valuation d'une opration de substitution d'halogne ........... 347
Annexes D.3 sur les oprations de sensibilisation cible dans le tertiaire....................... 349
Annexe D.3.1 Indicateurs proposs pour l'analyse de la logique d'intervention pour les
oprations de sensibilisation dans le tertiaire .................................................................. 350
D.3.1.1 Indicateurs sur la stratgie de communication........................................................................ 350
D.3.1.2 Indicateurs de sensibilisation.................................................................................................. 350
D.3.1.3 Indicateurs de participation .................................................................................................... 351
Annexe D.3.2 Calculs des volutions de consommations d'nergie pour l'opration pilote
de sensibilisation dans les btiments de bureaux d'EDF en PACA................................. 352
D.3.2.1 Mthodes et hypothses pour corriger les consommations du site 1 ...................................... 352
D.3.2.2 Rsultats partir des scnarios tests pour le site 1 ............................................................... 356
D.3.2.3 Liens entre les volutions dgages et les actions ralises (pour le site 1) ........................... 360
D.3.2.4 Comparaisons avec les autres sites......................................................................................... 364




266
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Annexes D.1 Complments pour la mthode d'valuation pour les
oprations de promotion de LBC


Ces annexes apportent les dtails de l'application de notre mthodologie au cas des oprations
de promotion de LBC, puis du test de la mthode obtenue sur une opration du Plan Eco
Energie.

Nous prsentons d'abord de manire gnrale le Plan Eco Energie (Annexe D.1.1).

Les dtails fournis sur la mthode d'valuation sont ensuite les suivants :
- prparation de la mthode au travers de la synthse bibliographique et des leons tires
des REx disponibles (Annexe D.1.2)
- analyse du contexte de ce type d'opration : barrires, objectifs, hypothses sous-jacentes,
march des LBC en France (Annexe D.1.3).
- laboration de la fiche de synthse (Annexe D.1.4)
- proposition d'indicateurs pour accompagner la partie d'analyse de la logique d'intervention
(Annexe D.1.5)
- valeurs ex-ante disponibles pour les paramtres du modle de calcul (Annexe D.1.6)
- comparaison avec le modle des certificats d'conomies d'nergie (Annexe D.1.7)
- tude de l'influence de chacun des paramtres sur les rsultats finals d'conomies d'nergie
et d'impact sur la charge (Annexe D.1.8)

Les dtails sur le test de la mthode d'valuation sur l'opration ralise en PACA en 2004 :
- rsum de l'opration (Annexe D.1.9)
- conclusions issues de l'analyse de la logique d'intervention (Annexe D.1.11), avec un
clairage particulier sur l'influence de l'organisation de la grande distribution (Annexe
D.1.10)
- dtails des calculs des rsultats, avec les valeurs utilises (Annexe D.1.12) et l'tude des
incertitudes (Annexe D.1.13)



267
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Annexe D.1.1 Prsentation du Plan Eco Energie


D.1.1.1 Prsentation gnrale du Plan Eco Energie (PEE)


Nous reprenons ici la prsentation gnrale faite dans les documents de communication du
PEE
341
.

La Rgion Provence Alpes Cte dAzur est une grande consommatrice d'lectricit. Mais
elle ne produit que 50 % de llectricit dont elle a besoin.

La partie Est de la rgion (Alpes-Maritimes,
Est du Var et Alpes-de-Haute-Provence) est
alimente par le rseau national de transport
trs haute tension via deux axes de 400
kV, vritables autoroutes de lnergie.

Mais aujourd'hui, en hiver, des pointes
d'appel de puissance lectrique se
produisent presque quotidiennement autour
de 19h. Lexprience dmontre quen cas
d'incident sur l'un des deux axes de 400
kV, lalimentation lectrique de PACA-
Est ne peut tre totalement garantie.

Un programme pluriannuel de Matrise de la
Demande dElectricit et de Dveloppement
des Energies Renouvelables sur lEst de la Rgion PACA, le Plan Eco Energie, a t lanc
en 2002 pour participer la scurisation de l'alimentation lectrique de cette zone.

Le Plan Eco Energie est co-pilot par la Prfecture des Alpes-Maritimes et le Conseil Rgio-
nal de PACA. La majeure partie des oprations sont mises en uvre par les Dlgations R-
gionales de l'ADEME et d'EDF, principaux partenaires du PEE.


D.1.1.2 Dtails des oprations engages


Le PEE est dclin selon 8 thmes d'action, regroupant chacun diffrentes oprations [Garri-
gues 2004]:

- thme 1 : communication et information :
- la communication et l'information grand public : campagne mdiatique gnrale)
- force nergtique pour les enfants : opration de sensibilisation dans les coles)
- conseil nergtique personnalis en maison individuelle : formation des conseillers
Espace Info Energie et diagnostic gratuit pour les particuliers
- kit MDE agents EDF : sensibilisation des agents EDF par le biais de distribution

341
cf. www.planecoenergie.org
Annexe D.1.1 Prsentation du Plan Eco Energie
268
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
de LBC

- thme 2 : formation :
- formation au diagnostic MDE du patrimoine communal : conception d'un logiciel
de gestion de l'nergie pour les petites communes et formation des responsables
techniques
- formation des bureaux d'tudes l'clairage performant
- mobilisation MDE des professionnels du btiment : charte pour valoriser les ma-
tres d'uvre qui s'engagent suivre des formations et appliquer une liste de bonnes
pratiques

- thme 3 : clairage et lectromnager performants :
- opration de promotion des LBC en grande distribution (cf. Annexe D.1.9)
- promotion sur les LBC pour les professionnels : accord avec Philips pour une r-
duction chez les grossistes pour les clients professionnels
- btiments tertiaires connaissance bureautique et clairage : campagne de mesures
des consommations d'nergie
- opration luminaires efficaces et retrait des halognes (cf. section IV.2.1.1)
- prts bonifis EDF pour l'amlioration de l'clairage des professionnels

- thme 4 : gros consommateurs et production dcentralise :
- groupe de travail cognration : ralisation de documents pour promouvoir la co-
gnration auprs des matres d'ouvrage
- groupe de travail petite hydraulique : inventaire du potentiel
- production dcentralise : aide l'investissement en capacits dcentralises de
production d'lectricit
- btiments bleus : aide l'investissement pour les panneaux photovoltaques
- gros consommateurs : identification des gros consommateurs et du potentiel d'effa-
cement

- thme 5 : l'Etat, les institutionnels, les collectivits locales, EDF et l'ADEME mon-
trent l'exemple
- base de donnes des btiments de 06 : tude des consommations des btiments des
partenaires de l'opration en Alpes-Maritimes
- base de donnes des btiments de 83 : id. pour le Var
- communes pilotes en 06 : audit et conseil de travaux MDE
- conventions collectivits locales : accords entre des collectivits et des partenaires
du PEE pour des tudes et des financements de solutions MDE
- conseils d'orientation nergtique et diagnostics MDE pour les communes

- thme 6 : la MDE dans l'habitat social
- oprations exemplaires avec l'OPAM : financement de pr-diagnostic MDE en vue
avant la rhabilitation de logements de l'Office Public HLM des Alpes-Maritimes
- information des gestionnaires : ateliers techniques et visites de terrain pour les or-
ganismes membres de l'Association Rgionale des organismes HLM
- information des locataires : formation la sensibilisation MDE pour les gardiens
d'immeuble et les conseillers en conomie sociale et familiale
- opration de l'OPHLM Cannes et Rive droite du Var : actions pour amliorer la
gestion de l'nergie dans le parc de logements
- conseils express MDE pour PALULOS : offre de conseil en MDE pour les opra-
Annexe D.1.1 Prsentation du Plan Eco Energie
269
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
tions ligibles la PALULOS
- appui technique la programmation : document prsentant les solutions techniques
performantes pour de nouveaux btiments

- thme 7 : la MDE dans le btiment

- label mditerranen pour maison individuelle : label pour valoriser le recours aux
EnR et les solutions qui rduisent les besoins en climatisation
- services nergtiques : tude pour mettre en vidence l'offre de services nergti-
ques dans la Rgion

- thme 8 : la MDE dans le btiment
- sensibilisation et suivi des consommations de 100 htels-restaurants

Cette liste date de fin 2004 et a pu voluer depuis.





270
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Annexe D.1.2 Prparation de la mthode


D.1.2.1 Synthse bibliographique


Nous avons ralis une recherche bibliographique en utilisant les sources prsentes dans
l'Encadr 9 (p.248). L'ensemble des rsultats est prsent dans le Tableau 50.

Sources Mots-cls / remarques Publications / tudes de cas
www.sciencedirect.com,
www.scopus.com,
http://scholar.google.com
"Compact Fluorescent Lamp
(or Light Bulb)" ; "light-
ing"AND ("energy efficiency"
OR "energy savings")
[Anjali Sastry 1996, Johnson
1993, Kazakevicius 1999,
Kumar 2003, Lund 2006,
Menanteau 2000, Olerup
1994, Birner 2005, Martinot
1998, Mills 1991, Mills
1993, Nadel 1993, Nielsen
1993, Vine 2006, Sumi 2000,
Swisher 1994, Urge-Vorsatz
2001]
www.scopus.com "clairage" AND ("economies
d'lectricit" OR "efficacit
nergtique")
[Bonduelle 2001]
www.eceee.org,
www.aceee.org,
www.iepec.org et confren-
ces spcialises
Les communications les plus intressantes sont issues de la
confrence spcialise Right Light (cf. www.rightlight6.org)
http://www.cee1.org/db/sea
rch/search.php3
Catgories "lighting" + "resi-
dential"
38 rapports d'valuation dont
8 slectionns
http://www.calmac.org/sear
ch.asp
"CFL" AND "residential" 24 rapports d'valuation dont
6 slectionns
http://ec.europa.eu/energy/i
ebase/index.cfm
"lighting" 2 projets achevs et 1 en
cours
342

http://www.caddet.org/infos
tore/
Catgories "lighting"-"CFL" +
"buildings"-"residential"
1 cas non exploitable
http://www.energie-
cites.org/
Catgories "matrise de la de-
mande d'lectricit"
11 fiches dont 5 ont une
composante LBC dans le
rsidentiel. Une fiche utilise
au final (Clermont-Ferrand)
http://www.managenergy.n
et/casestudies.html
Catgorie "lighting" Une seule fiche exploitable
(Clermont-Ferrand)
http://dsm.iea.org/INDEEP/
prog/home.new.asp
"CFL" 17 fiches dont 16 consultes

342
liste des projets :
- "Co-ordinated action for marketing of the EU competition for CFL-dedicated luminaries" projet coor-
donn par Future Energy Solutions (Royaume-Uni) en 2000-2001
- "Monitoring energy efficiency trends of refrigerators, freezers, washing machines, washer-dryers and
household lamps sold in the EU" coordon par l'ADEME en 2000-2001
- "European Efficient Residential Lighting Initiative" lanc en 2006 (cf. www.enerlin.enea.it)
Annexe D.1.2 Prparation de la mthode
271
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
http://eega.cpuc.ca.gov/deer
/
Secteur : "Non-Weather Sensi-
tive Residential" et usage :
"lamp"
Rsultats de 73 oprations
(cots, conomies d'nergie,
impacts sur la charge)
volume II du guide de l'AIE
[Vreuls 2005b]
2 programmes ont une com-
posante LBC, dont avec des
informations intressantes
(Flandres)
annexe A du guide euro-
pen [SRCI 2001]
1 tude de cas en lien avec
les LBC (Royaume-Uni, pro-
gramme EESoP)
recensement des oprations
locales de MDE en France
(section II.2.1)
14 oprations ont un objectif
de diffusion de LBC, dont 3
ont pu donner lieu une
tude de cas (section II.3.2.2)
www.google.fr "LBC" + "MDE" + "clairage"
; "consommations" + "clai-
rage" + "kWh"
tudes faites pour l'ARE
PACA
343
, menes par le ple
PEPS
344
, [ENERTCH 2004,
Menanteau 1997]
www.ADEME.fr [ADEME 1998, ADEME
1999]
Tableau 50 - rsultats des recherches d'information sur les oprations de promotion de
LBC dans le secteur rsidentiel


Les publications trouves peuvent tre regroupes en cinq thmatiques principales :
- les analyses des programmes dans les pays de l'OCDE
- les analyses des programmes dans les pays mergents
- les analyses sur les barrires et les possibilits de transformation de march pour les LBC
- les tudes portant sur les consommations d'nergie lies l'clairage
- les tudes portant sur les comportements lis l'clairage


Programmes dans les pays de l'OCDE

Mills [1991, 1993] a ralis une synthse sur les programmes de promotion des LBC en l'Eu-
rope dans les annes 1980-1990. Nadel et al. [1993] propose une synthse analogue pour
l'Amrique du Nord.

En France, le GERES [Buchet 1998] a analys 44 programmes de sensibilisation et de diffu-
sion de LBC et dclairage performant en Europe pour prparer les oprations du Plan Eco
Energie en PACA.

Les confrences Right Light apportent des exemples de programmes plus rcents, comme

343
cf. les fiches "clairage et style de vie" < http://www.regionpaca.fr/uploads/media/MDE41.pdf > et "LBC et
clairage performant" < http://www.regionpaca.fr/uploads/media/MDE40.pdf >. Voir aussi la prsentation de
l'tude sur le site du GERES : http://geres.free.fr/fr/enr-mde/mde-fr.php ?art=079
344
Ple de recherch "Politiques Environnementales et Pratiques Sociales" du CERTOP (Centre dEtude et de
Recherche Travail Organisation Pouvoir) de l'Universit de Toulouse 2. Voir en particulier l'tude sur l'analyse
des jeux d'acteurs sur le march de l'clairage (cf. http://www.univ-tlse2.fr/certop/IMG/pdf/Projet_PEPS.pdf )
Annexe D.1.2 Prparation de la mthode
272
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
celui du Danemark [Bergstrom 1997], du programme amricain Energy Star [Nirk 1997] ou le
cas des Pays-Bas [de Nijs 2002].

Dernirement, les LBC ont souvent t parmi les "cibles phares" de programmes d'obligations
aux fournisseurs d'nergie, comme dans le cadre des programmes EESoP et EEC au
Royaume-Uni, ou dans les Flandres. Une telle croissance de la diffusion des LBC est aussi
prvisible en France avec la mise en uvre des certificats d'conomies d'nergie.


Programmes dans les pays mergents

Les LBC sont souvent le fer de lance pour initier des programmes de MDE dans les pays
mergents, que ce soit en Asie (cas de l'Inde [Anjali Sastry 1996, Kumar 2003]), en Europe de
l'Est (cas de la Hongrie et la Lithuanie [Urge-Vorsatz 2001]), ou en Amrique latine (cas du
Mexique [Sumi 2000]).

Une synthse de ces types de programmes a t faite par Martinot et al. [1998], puis Birner et
al. [2005].


Barrires et possibilits de transformation de march
pour les LBC

Certaines publications approfondissent les questions des barrires et des possibilits de trans-
formation du march des ampoules en faveur des LBC (cf. Annexe D.1.3) :

- les impacts possibles sur le march et les problmes poss par un effort massif et soudain
des utilits pour dvelopper les ventes de LBC, notamment risques de ruptures de stock
[Johnson 1993]

- tude des vitesses de pntration de nouvelles technologies (comparaison des LBC avec
d'autres quipements performants) [Lund 2006]

- concurrence entre LBC et incandescentes et barrires surmonter pour les LBC par
rapport aux incandescentes [Menanteau 2000]

- tude des effets probables des programmes de LBC sur le march des ampoules partir
de l'exemple de la Sude [Swisher 1994]


Etudes lies aux consommations d'nergie

Des campagnes de mesure ont t ralises pour mieux connatre les consommations d'nergie
lies l'clairage dans le rsidentiel, et les potentiels d'conomies d'nergie associs [Palmer
1998, ENERTCH 2004, National Energy Services 2004]. Ces tudes fournissent des donnes
de rfrence pour la quantification des conomies d'nergie (cf. Annexe D.1.6).

De manire plus dtaille, Vine tudie la question des dures d'utilisation des LBC [Vine
2006]. De mme, Bent [1993] s'intresse aux impacts possibles sur la courbe de charge. Mais
les rsultats de ces tudes ne sont pas directement transposables pour notre cas, car ils ne
Annexe D.1.2 Prparation de la mthode
273
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
correspondent pas au contexte franais. Les mthodes employes sont cependant intressan-
tes.

Pour la France, Bonduelle [2001] a discut de la question des missions de CO2 lies
l'clairage partir de l'tude de la contribution de l'clairage aux appels de pointe.


Etudes lies aux comportements

La SOFRES a ralis pour l'ADEME plusieurs enqutes auprs d'un panel de particuliers
concernant leurs rapports avec les consommations d'nergie et la MDE, et le cas des LBC en
particulier [ADEME 1998, ADEME 1999]. Des tudes plus rcentes ont pu tre ralises,
mais nous n'avons malheureusement pas pu nous les procurer. Les rsultats de ces enqutes
restent des sources de donnes de rfrence pour notre mthode (cf. Annexe D.1.6).

L'tude du GERES [Buchet 1998] dans le cadre de la prparation du Plan Eco Energie cou-
vrait aussi les questions de comportements lis l'clairage, en distinguant trois modes prin-
cipaux : le comportements fonctionnel, esthtique et conomique.


La synthse du cahier du CLIP

Le CLIP (Club dIngnierie Prospective Energie et Environnement) a ralis un cahier sur la
MDE et l'clairage [Menanteau 1997] qui constitue un exemple de synthse bibliographique,
comme nous l'entendons au sens de la premire tape de notre mthodologie. Cette synthse
date de 1997. Elle fournit des lments de rfrence, que nous avons complts et mis jour
suite nos propres recherches bibliographiques.


Les confrences spcialises

Des confrences internationales cibles permettent d'avoir rgulirement un retour sur les
nouvelles technologies de l'clairage, leurs impacts en termes nergtiques et les programmes
pour les diffuser : Right Light
345
, EEDAL
346
, Light Focus
347



D.1.2.2 Leons partir d'tudes de cas et/ou de rapports d'valuation


Retours d'exprience en France

Les retours d'expriences d'oprations locales en France ont t traits par les tudes de cas
que nous avons ralises (cf. section II.3.2.2). Elles font ressortir la difficult pour obtenir le
nombre de LBC diffuses pendant une opration. De plus, les calculs d'conomies d'nergie
se basent le plus souvent sur des estimations ex-ante, qui ne sont pas explicites et restent
discutables. En outre, l'effet d'aubaine n'est pas pris en compte, alors qu'il peut tre important.

345
cf. www.iaeel.org et www.rightlight6.org
346
International Energy Efficiency in Domestic Appliances & Lighting Conference, http://livegroup.co.uk/eedal/
347
confrence du Building Performance Congress qui se tient tous les deux ans Francfort conjointement avec la
salon international des professionnels de l'clairage, cf. http://light-building.messefrankfurt.com
Annexe D.1.2 Prparation de la mthode
274
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006

Ces REx fournissent cependant des informations intressantes, notamment concernant la
rpartition des LBC par pice et les problmes rencontrs dans les partenariats avec les
fabricants et les magasins.

Par ailleurs, il faut noter la grande diffrence entre l'ampleur des oprations locales ralises
en mtropole (avec des rsultats de quelques dizaines de milliers de LBC diffuses) et celles
faites dans les DOM (qui, cumules, dpassent le million de LBC).


Retours d'exprience en Europe

Nous avons pu profiter des tudes de cas ralises par Stefan Thomas et Wolfgang Irrek du
Wuppertal Institute, lors de notre collaboration dans le cadre de l'tude faite pour EDF R&D.
Ces exemples sont des oprations de plus grande ampleur que les oprations franaises et ont
donn lieu des valuations beaucoup plus dtailles. Cependant, certaines donnes utilises
pour quantifier les rsultats restent subjectives (notamment les dures et priodes d'utilisation)
car obtenues partir d'enqutes auprs de participants. Vine [2006] a en effet montr que la
validit de donnes dclaratives de ce type tait discutable.


Retours d'exprience aux Etats-Unis

La base de donnes des programmes californiens et de leurs valuations est une ressource
riche en retours d'expriences trs approfondis, notamment sur la question de la persistance
des rsultats lis aux LBC. Cependant, ces programmes oprent dans un contexte diffrent de
celui des oprations locales franaises, et leurs rsultats sont rarement transposables. Cepen-
dant, un tel dispositif d'valuation est un exemple suivre.






275
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Annexe D.1.3 Contexte des oprations locales de promotion de LBC


D.1.3.1 Besoins et barrires identifis


Les LBC sont un des symboles de la MDE. Elles permettent un gain d'efficacit lumineuse
d'un facteur suprieur 4 par rapport l'quipement standard, les ampoules incandescentes
348
.
Elles reprsentent donc un potentiel non ngligeable de MDE, aussi bien en termes d'co-
nomies d'nergie que de rduction de la pointe.

L'tude ralise par ENERTECH pour EDF et l'ADEME en 2004 [ENERTCH 2004 pp.85-86]
estimait le potentiel technique
349
de MDE pour l'clairage dans le secteur rsidentiel prs de
6 TWh/an d'conomies d'nergie (soit un peu plus de 1% des 470 TWh d'lectricit consom-
ms en 2004, [RTE 2005 p.11]) et prs de 3 GW de rduction de la pointe du soir (soit prs de
4% de la pointe de 77 GW de 2004, [RTE 2005 p.13]). Ce potentiel est certes plus un maxi-
mum qu'un gisement rellement disponible
350
. L'tude de ce potentiel sous contrainte cono-
mique fait cependant ressortir qu'avec un prix unitaire de LBC 6 et pour un temps de re-
tour sur investissement maximal de trois ans, environ 60% du potentiel technique pourrait tre
atteint.

Si les LBC sont un symbole de la MDE du fait du gain d'efficacit nergtique qu'elles per-
mettent, elles sont aussi un parfait exemple des difficults que peut rencontrer la diffusion
d'une technologie efficiente [Menanteau 1997 p.8].

Les barrires les plus frquemment rencontres pour les LBC sont :
- le surcot l'achat (par rapport l'achat d'une ampoule incandescente)
- le manque d'information des mnages sur les avantages des LBC
- les problmes pour trouver des LBC adaptes aux les luminaires des clients (et/ou pour
trouver des luminaires sur lesquels peuvent tre installs des LBC)
- l'esthtique des LBC

Les efforts des fabricants pour diversifier les gammes de LBC font que la question de l'esth-
tique n'est plus aujourd'hui une barrire importante. Dans une moindre mesure, la baisse du
prix moyen d'une LBC entre le dbut des annes 1990 (environ 15 puis 9,5 en 1998
351
) et
aujourd'hui (environ 7 en 2001
351
) a aussi permis de rduire l'importance de cette barrire.
Mais le prix moyen d'une LBC reste bien suprieur celui d'une incandescente (infrieur
1). Et ce surcot l'achat reste un frein, car le raisonnement en cot global est loin d'tre
systmatique chez les particuliers.

348
L'efficacit lumineuse standard est d'environ 13 lm/W pour une incandescente, 16 pour un halogne, 20 pour
un halogne TBT (Trs Basse Tension) et 60 pour une LBC [Menanteau 1997 pp.23-24].
349
Hypothses faites : toutes les incandesentes et halognes remplaces par des LBC, en prenant une quiva-
lence de rapport des puissances de 1 5 (par ex. une incandescente de 75 W serait remplace par une LBC de 15
W)
350
Dans la pratique, non seulement certains points lumineux ne sont pas adapts pour tre utiliss avec des LBC
(du fait du luminaire, dure d'utilisation faible, allumages frquents, etc.), mais l'quivalence de rapport de puis-
sances pour conserver le mme confort lumineux est plutt de 1 4 (par ex. une LBC de 15 W pour une incan-
descente de 60 W). Cette quivalence de 1 4 est celle conseille dans les documents d'information de
l'ADEME.
351
Rsultats de l'tude GFK Marketing Services publis dans le rapport de l'ORE PACA pour le bilan rgional
2001
Annexe D.1.3 Contexte des oprations locales de promotion de LBC
276
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006


D.1.3.2 Objectifs et stratgies de ce type d'opration


Nous reprenons ici les trois catgories d'objectifs dfinis dans la section I.3.1.1, en y associant
les modalits les plus frquemment rencontres dans les REx disponibles :
- objectifs gnraux : transformation du march des LBC, sensibilisation des mnages la
MDE, engagements environnementaux, rduction de la prcarit nergtique
- objectifs spcifiques : conomies d'nergie, rduction de la pointe de charge, rduction
des missions de GES
- objectifs oprationnels : nombre donn de LBC vendues, pourcentage d'augmentation
des ventes de LBC ou de taux d'quipement des mnages, nombre de magasins partici-
pants, notorit des LBC chez les mnages


Les critres de segmentation dfinissant la stratgie de l'opration ont les modalits suivan-
tes :
- secteur et public vis : secteur rsidentiel, grand public (avec parfois des cibles particu-
lires, notamment les mnages faibles revenus)
- usage de l'nergie et solution performante : clairage LBC
- instruments d'intervention : combinaisons parmi les instruments suivants :
- incitation : offre promotionnelle, remise, leasing, distribution gratuite, au-
tre
- sensibilisation : information, rseaux d'acteurs pour relayer l'information,
dmonstration, autre

La stratgie de l'opration comprend deux autres critres aux modalits non prdfinies :
- priode et dure de l'opration : la priode la plus favorable est octobre fvrier car
c'est sur cette priode que la majorit des ventes d'ampoules sont ralises. La plupart des
oprations ont une dure allant de 3 semaines 3 mois
- partenariats conclus : choix d'un partenariat avec les fabricants et/ou les distributeurs,
implication d'autres acteurs (associations de consommateurs, collectivits locales, etc.)


D.1.3.3 Hypothses de ce type d'opration


Les REx disponibles montrent que les oprations ont surtout recherch surmonter les barri-
res lies au surcot l'achat et au manque d'information.

Les hypothses correspondantes sont donc que les actions menes se combinent comme suit :
- les actions de sensibilisation apportent aux particuliers l'information ncessaire sur les
avantages des LBC
- les actions du plan de communication informent le public vis de l'existence d'une offre
promotionnelle
- les actions promotionnelles incitent les particuliers acheter des LBC

Dans les REx disponibles, les objectifs court terme de l'opration sont souvent explicites
(en termes de nombre de LBC diffuses pendant l'opration ou de pourcentage d'amlioration
Annexe D.1.3 Contexte des oprations locales de promotion de LBC
277
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
des ventes). En revanche, les objectifs de moyen et long terme sont moins clairs.

Les LBC sont souvent prsents comme un point d'entre pour sensibiliser les mnages la
MDE en gnral. Mais aucune valuation ex-post n'a t ralise sur ce point.

Certains programmes (par ex. en Californie) ont t raliss et suivis dans la dure, notam-
ment pour valuer l'impact moyen terme des oprations sur le march. Les oprations loca-
les ralises en France taient ponctuelles et n'ont quasiment pas donn lieu un suivi aprs
coup. Le cadre pluriannuel du Plan Eco Energie dans la Rgion PACA pourrait permettre une
telle dmarche.

Par ailleurs la SOFRES ralise annuellement la demande de l'ADEME une enqute sur les
quipements et les comportements des particuliers en matire de gestion de l'nergie dans
l'habitat. Cette tude permet de suivre les impacts de la politique mene par l'ADEME et les
pouvoirs publics l'gard de la matrise de l'nergie dans l'habitat et de mesurer l'volution
des comportements des mnages : suivi des volutions d'quipements, des dpenses nergti-
ques et des travaux d'amlioration nergtique des logements
352
.

Cette enqute permet notamment l'ADEME de mettre jour son CD-ROM des Chiffres-cls
du btiment publi chaque anne. Mais ce CD-ROM ne contient malheureusement pas les
informations concernant l'clairage et les LBC. Les derniers rsultats dtaills des enqutes
SOFRES concernant l'clairage datent de 1998 et 1999 [ADEME 1998, ADEME 1999].


D.1.3.4 Contexte pour la promotion de LBC


Nous ne disposons pas d'un historique des donnes du march des ampoules en France. Le
Tableau 51 ci-dessous prsente les chiffres que nous avons pu trouver. Ils ne proviennent pas
de la mme source, et ces sources ne dtaillent pas leur obtention (chiffres du secteur rsiden-
tiel uniquement ? estimations ou donnes vrifies fournies par les fabricants et/ou la grande
distribution ?). Ils sont donc difficiles comparer.

Anne 1998
353
2001
353
2003
354
2005
355

Nombre total d'ampoules ven-
dues (en millions)
148,5 151 180
Nombre d'incandescentes (en
millions)
135,0 135,6 152
% incandescentes 90,9% 89,8% 71,5% 84,4%
Nombre LBC et tubes fluo-
rescents (en millions)
6,68 6,79 8
% LBC et tubes fluorescents 4,5% 4,5% 4,5% 4,5%

352
Etudes socio-conomiques du dpartement Btiment et Urbanisme, document ralis par Rgine Trotignon en
janvier 2005 et disponible sur
http://www2.ADEME.fr/servlet/getBin ?name=SocioEco_0CA2D69830E48BBA742D72E00E7EE0B01106738
071696.doc
353
Rsultats de l'tude GFK Marketing Services publis dans le rapport de l'ORE PACA pour le bilan rgional
2001
354
chiffres du Syndicat de l'Eclairage pour 2003, cf. http://www.feder-eclairage.fr/qui_marche.htm
355
chiffres indiqus dans la fiche de calcul concernant les LBC pour les certificats d'conomies d'nergie
Annexe D.1.3 Contexte des oprations locales de promotion de LBC
278
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Nombre halognes et autres
(en millions)
6,83 8,61 20
% halognes et autres 4,6% 5,7% 8,5% 11,1%
Tableau 51 - march des ampoules en France
Cependant, ces chiffres font ressortir que les LBC reprsentent encore aujourd'hui une part
faible des ventes d'ampoules. La croissance des LBC semble suivre celle des ventes d'am-
poules et il semble que les ventes de LBC ne font pas reculer celles d'incandescentes.

La substitution une incandescente reste la premire finalit des achats de LBC, mais les
parts de LBC remplaant d'autres LBC ou venant quiper de nouveaux points lumineux repr-
sentent prs d'un tiers des achats de LBC
356
. La croissance des ventes des LBC s'accompagne
d'une augmentation du nombre de mnages ayant au moins une LBC
357
.

Concernant les incandescentes, il semblerait que les parts de march prises par les LBC sont
compenses par la croissance du nombre de points lumineux par logement.

Pour le secteur rsidentiel, la trs grande majorit des ventes de LBC est assure par la
grande distribution (70% en 1999 [ADEME 1999], 80% en 2005
355
). Les grandes surfaces
(alimentaires (GSA), et de bricolage (GSB)) sont donc des acteurs importants pour la pro-
motion des LBC.

L'tude du CLIP fait par ailleurs ressortir la situation d'oligopole, i.e. de domination du mar-
ch de l'clairage par trois groupes General Electric Lighting, Osram et surtout Philips pour le
march rsidentiel des ampoules en France. Ces trois fabricants sont aussi des acteurs cls
pour la promotion des LBC. En parallle, les grandes surfaces ont pass des accords avec ces
fabricants pour distribuer des LBC leur enseigne (LBC de MDD, Marque De Distributeurs)
[Menanteau 1997 pp.31-40].

Plus rcemment sont apparus sur le march des LBC bas prix en provenance de pays asia-
tiques, et en particulier de Chine. Ces LBC sont en gnral des produits de moindre qualit
(mauvais rendu lumineux, dure de vie plus courte) et reprsentent un risque rel de contre-
rfrence.

Des programmes nationaux ont t mens pour sensibiliser le grand public aux LBC. Cel-
les-ci ont ainsi toujours fait partie des actions concrtes promues par l'ADEME pour la ma-
trise des consommations, notamment au travers des campagnes nationales de sensibilisation
de 2001 et de 2004-2006, et des plaquettes qu'elles diffusent sur les bonnes pratiques concer-
nant l'clairage.

Le dispositif des certificats d'conomies d'nergie est entr en vigueur le 1
er
juillet 2006.
Dans ce cadre, la promotion des LBC fait partie des actions que devrait dvelopper massive-

356
Selon l'enqute SOFRES de 1999, 58% des LBC taient achetes pour remplacer des ampoules incandes-
cence ou des halognes, 27% pour remplacer une autre LBC, 15% pour un nouveau point lumineux [ADEME
1999]. La fiche LBC pour les CEE sa base sur l'enqute SOFRES 2001 selon laquelle la part de substitution
des incandescentes tait de 70%, les 30% restant tant des remplacements d'autres LBC.
357
- part des mnages ayant au moins une LBC : 24% en 1998, 33% en 2000, 44% en 2001 (rsultats des enqu-
tes SOFRES pour l'ADEME relats dans un article du Monde du 18-09-2002 Les ampoules conomiques pn-
trent lentement le secteur rsidentiel), 52% en 2002 [ENERTCH 2004]
- taux d'quipement moyen : 1,5 LBC/mnages en 1999 [ADEME 1999], 2,2 LBC/mnage en 2002 [ENERTCH
2004]
Annexe D.1.3 Contexte des oprations locales de promotion de LBC
279
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
ment les fournisseurs d'nergie. EDF et GDF communiquent largement pour sensibiliser
leurs clients aux LBC, notamment en joignant des prospectus d'information la facturation.

Au niveau local, les actions de l'ADEME et d'EDF et GDF sont relayes par leurs espaces
ouverts au public, Espaces Info Energie et agences EDF et GDF. D'autres acteurs locaux
s'impliquent aussi parfois (par exemple des associations ou des collectivits locales).






280
L'valuation ex-post des oprations locales de MDE Broc Jean-Sbastien, dcembre 2006
Annexe D.1.4 Fiche de synthse de l'opration de promotion de LBC PACA 2004


D.1.4.1 Caractristiques de l'opration


A1- Informations gnrales
A11-Nom de l'opration Eclairage performant avec les lampes conomie d'nergie
(opration dans le cadre du Plan Eco-Energie)
A12-Organisme(s) res-
ponsable(s)
Matre(s) d'ouvrage : EDF, ADEME, Conseil Rgional PACA
contacts / coordonnes :
pour EDF : Marie-Isabelle Fernandez (04.91.29.70.11 marie-
isabelle.fernandez@EDF.fr), Bertrand Combes (04.93.69.68.30
bertrand.combes@EDFgdf.fr)
pour l'ADEME : Jean-Pierre Harinck (01.91.32.84.44 - jean-
pierre.harinck@ADEME.fr)

Matre(s) d'uvre : EDF et agence CO2 pour la campagne de
communication ; les fabricants de LBC pour la coordination avec
les rseaux de grande distribution

A13-Zone concerne Zone(s) administrative(s) : Est de la rgion PACA (dpartements
des Alpes Maritimes (06), du Var (83) et le sud des Alpes de Haute
Provence (04))

Nombre d'habitants : environ 2.140.000 (estimation INSEE, jan-
vier 2003) (dont 1.046.000 pour 06 ; 144.500 pour 04 et 946.300 <