Universite Paris 3 Sorbonne Nouvelle

Cas dun projet pilote dvaluation des enseignements par les tudiants (EEE) systmatise en Licence 1

Gouvernance et valuation des enseignements par les tudiants : un nouvel enjeu pour luniversit franaise

Barbara Smel
2011-2012

Master 2 AIGEME
Applications Informatiques, Gestion, Etudes, Multimdia, e-Formation Parcours Ingnierie de la Formation distance

Dirig par Mme Divina Frau-Meigs

Remerciements
Puisque cest le meilleur moment, on va y passer un peu de temps.

Benot Roques, sur qui lon peut toujours compter, auprs duquel jai le plaisir de travailler (et dapprendre normment) depuis 5 ans dj. Jaimerais un jour arriver galer son esprit de synthse, son intelligence des situations et ses qualits relationnelles. Mon ancien directeur, Michel Moreau-Belliard, qui est arriv fin 2007 dans mon bureau alors que jtais toute nouvelle dans le service en me disant : Regarde ce quil est possible de faire en matire dvaluation des enseignements en ligne . Ctait une demande du prsident de luniversit. Et ctait aussi le premier projet denvergure quon me confiait, pour lequel je partais de rien mais en tant si bien entoure. Mon directeur actuel, Christian Vanin, qui na de cesse de mencourager rflchir, penser, crire. On se supporte bien, dans les deux sens du terme ! Nathalie Youns, qui a t la premire rpondre mes questions, quand jai dmarr ltude fin 2007 puis qui a accept, 4 ans plus tard, de venir changer avec les enseignants de mon universit et a contribu stimuler le dialogue si ncessaire une EEE efficace. Le rseau PENSERA, pour toutes les discussions stimulantes et passionnantes en matire de TICE et plus largement de pdagogie universitaire que jai pu avoir avec eux. Claudine Mhlstein-Joliette pour avoir insist, anne aprs anne, pour que je reprenne ce master. Divina Frau-Meigs pour sa lecture critique mais bienveillante qui pourra, je lespre, me permettre de faire de ce travail une base dans ma rflexion pour un futur travail de thse. Ma merveilleuse mre, mes frres, mon pre tant aim qui malheureusement nest plus et qui nous a quitts alors que javais entam ce master, il y a presque 5 ans. A lpoque, javais tout arrt, aujourdhui je termine Et Guillaume, pour sa prsence, de la plus prosaque (feuilles de style, numrotation, conventions bibliographiques) la plus potique.

 Toute leur vie tait dirige non par les lois, statuts ou rgles, mais selon leur bon vouloir et libre-arbitre.
Rabelais, Gargantua, chapitre LVII (1534).

Table des matires

Introduction ............................................................................................................................. 9 I. Elments de contexte ......................................................................................................... 14 A. Un contexte de concurrence ......................................................................................................... 14 1. Le financement des universits ................................................................................................. 14 2. Les classements internationaux ................................................................................................ 14 B. Le cadrage politique ...................................................................................................................... 15 1. Le cadre europen ..................................................................................................................... 15 2. Le cadre franais ........................................................................................................................ 16 a) Les textes rglementaires ..................................................................................................... 16 b) Les rapports et recommandations qui mettent laccent sur la ncessaire formation des enseignants-chercheurs ............................................................................................................ 19 3. La contractualisation ................................................................................................................. 21 C. Le corps universitaire .................................................................................................................... 22 II. Les apports de la recherche ............................................................................................... 25 A. Limportance du contexte ............................................................................................................. 25 B. Les objectifs de lEEE, entre vise formative et vise de contrle ................................................ 26 C. La question de la validit des critres dvaluation ...................................................................... 27 D. Les spcificits lies une pratique informatise de lEEE........................................................... 29 III. La dmarche EEE lUFR dEconomie de Paris 1 : un outil de pilotage ........................... 31 A. Luniversit Paris 1, un contexte spcifique ................................................................................. 31 1. Une universit de masse, interdisciplinaire et disperse gographiquement .......................... 31 2. Le projet dtablissement de Paris 1 ........................................................................................ 31 3. Situation de lEEE Paris 1 ....................................................................................................... 32 B. Le projet pdagogique numrique (PPN) Evaluation des enseignements en ligne par les tudiants en L1 Economie .............................................................................................................. 33 1. Origine du projet EEE lUFR dconomie ................................................................................ 33

2. Objectifs du projet ..................................................................................................................... 34 3. Droulement du projet.............................................................................................................. 35 4. Bilan du projet ........................................................................................................................... 35 C. Les ractions des parties prenantes .............................................................................................. 37 1. Prsentation du corpus ............................................................................................................. 37 2. Mthodologie ............................................................................................................................ 38 3. Analyse des rsultats ................................................................................................................. 39 a) Carte 1/3 : synthse des diffrents aspects dune dmarche dEEE pour les directions dUFR ......................................................................................................................................... 39 b) Carte 2/3 : synthse des diffrents aspects dune dmarche dEEE pour les enseignants .. 42 c) Carte 3/3 : les points de jonction et de tension .................................................................... 44 d) Positionnement des observations mises par les tudiants ................................................. 46 IV. Recommandations pour diffuser les usages en matire dEEE Paris 1 ......................... 50 A. LEEE, une pratique instituer pour et par la gouvernance ......................................................... 50 B. Communiquer sur lutilisation des rsultats ................................................................................. 51 C. LEEE, une dmarche intgrer dans un dispositif global ............................................................ 52 D. LEEE comme levier dune gouvernance renouvele .................................................................... 53 Conclusion .............................................................................................................................. 54 Bibliographie .......................................................................................................................... 56 Annexes .................................................................................................................................. 58 1. Avant projet Paris 1 valuation des enseignements par les tudiants (EEE) ...................... 58 2. Prsentation du dispositif EEE Paris 1 .................................................................................... 58 3. Fiche projet et fiche bilan Evaluation des enseignements par les tudiants UFR02 ........... 58 4. Charte EEE Paris 1 ...................................................................................................................... 58 5. Questionnaire dvaluation des enseignements L1 Economie ................................................. 58 6. Retranscription des changes du 8 mars 2012 ......................................................................... 58 7. Rsum de lintervention de Nathalie Youns .......................................................................... 58 8. Carte synthse des diffrents aspects dune EEE pour les directions dUFR ...................... 58

9. Carte synthse des diffrents aspects dune EEE pour les enseignants .............................. 58 10. Carte les points de jonction et de tension ......................................................................... 58 11. Carte positionnement des observations mises par les tudiants ................................... 58 12. Synthse des rponses des tudiants ..................................................................................... 58

Introduction
Dans le cadre du plan russite en licence en 2008, une rflexion sur lvaluation des enseignements par les tudiants (EEE) a t engage luniversit Paris 1 PanthonSorbonne et a t confie, pour sa mise en uvre, au service TICE Pdagogie et numrique. Aprs une phase dexamen des dispositifs existants dans lenseignement suprieur suivie, en 2009-2010, dune phase exploratoire dexprimentations avec des enseignants volontaires, nous avons conduit cette anne le premier projet pilote dEEE systmatise tous les enseignements dune formation, la premire anne de licence de lUFR dEconomie 1. lissue de ce projet, il nous semble maintenant dterminant, pour accompagner la diffusion des usages auprs des enseignants, des quipes de direction et des instances de pilotage de notre universit, de prendre un moment de recul afin de confronter les apports de la recherche sur la question aux ractions des diffrentes personnes qui ont t impliques dans ce projet. De la conviction au rejet, lEEE ne laisse pas indiffrent et suscite un certain nombre de tensions quil convient donc de comprendre et de prendre en compte. Comme le montre un ouvrage paru en 2009, Lvaluation de lenseignement par les tudiants dirig par Marc Romainville et Cristina Coggi, les pratiques sont encore htrognes mais surtout, elles peinent sinstaller, notamment en France. Pourtant, diffrentes contraintes tendent imposer lvaluation aux universits, ne serait-ce que les textes rglementaires nationaux comme larrt du 9 avril 1997 qui dispose que pour chaque cursus doit tre mise en place une procdure dvaluation des enseignements et de la formation qui prenne en compte lapprciation des tudiants (art.23). Jacques Dejean, galement auteur dun rapport sur la situation de lvaluation de lenseignement dans les universits franaises en 2002, propose une rflexion sur le sujet dans un article dont le titre lui-mme est loquent : les rticences lvaluation de lenseignement en France, signe de la culture professionnelle des enseignantschercheurs ou trait de la culture franaise 2 ? . Il est tonnant en effet que nos voisins belges et suisses, soumis des contraintes identiques aux ntres dans le cadre du

Les diffrents aspects relatifs la gense et la conduite de ce projet sont dcrits dans notre rapport de stage et brivement rappels pour introduire la troisime partie de ce mmoire. 2 In Lvaluation de lenseignement par les tudiants, M.Romainville, C.Coggi (dir), De Boeck, collection Perspectives en ducation et formation , Bruxelles, 2009

processus de Bologne, semblent plus en avance que nous sur la question. Lcart est similaire, voire plus important encore, avec dautres pays, anglo-saxons notamment. La cration dun espace europen de lenseignement suprieur suppose pourtant de coordonner les politiques, notamment en matire dvaluation de la qualit. ces contraintes europennes sajoutent, en France, les changements rcents lis la loi du 10 aot 2007 relative aux liberts et responsabilits des universits (LRU). Puisque le contexte institutionnel et politique ne semble pas mettre directement en cause, faut-il, comme le suggre Jacques Dejean, voir dans la culture franaise dans son ensemble et/ou plus prcisment dans la culture professionnelle des enseignants-chercheurs ellemme les freins ce dveloppement des pratiques dEEE ? Cest en tout cas partir du constat de ce hiatus que nous avons dcid dapprocher la question de lEEE en France sous langle de la gouvernance universitaire. Dans son Rapport sur la situation de lassurance de la qualit dans lenseignement suprieur , la Commission europenne rappelle quelle a appel de ses vux une modernisation des programmes dtudes ainsi qu'un financement et une gouvernance plus efficaces de lenseignement suprieur 3 . En 2005, le groupe de travail du Conseil de lEurope ddi la gouvernance de lenseignement suprieur a conclu que par gouvernance, il faut entendre un processus de dfinition dobjectifs long terme et dlaboration de stratgies pour raliser ces objectifs 4 . Pour se lancer dans cette dynamique et pouvoir laborer des stratgies, il est ncessaire de disposer dinformations sur lesquelles sappuyer. Une valuation de la qualit des pratiques existantes, quelle que soit la forme que prenne cette valuation, apparat ainsi indispensable. La recherche a ses procdures ; en ce qui concerne lenseignement, lautre grande mission de luniversit, lvaluation par les tudiants est la mthode la plus utilise travers le monde (Detroz, 2007). Comme le souligne Marc Romainville, cette pratique semble constituer une opration de bon sens : Les tudiants tant des adultes, ou du moins des pr-adultes, susceptibles de regards rflexifs sur leur formation, il nest videmment pas sans intrt,

Rapport sur la situation de lassurance de la qualit dans lenseignement suprieur , COM(2009) 487 final, Bruxelles, 21 septembre 2009, p.3 4 La gouvernance de lenseignement suprieur en Europe. Politiques, structures, financement et personnel acadmique , Eurydice, le rseau dinformation sur lducation en Europe, 2008, p.105

pour lamlioration de la qualit de cette dernire, de solliciter leur avis sur les enseignements quils reoivent luniversit 5. Les objections identifies par M. Romainville cette pratique de bon sens, comme la crainte dcorner la sacro-sainte libert acadmique, le risque dune baisse de niveau des exigences ou [] la naissance dune dictature tudiante ont fait lobjet de nombreux travaux de recherche qui montrent au bout du compte que les tudiants constituent globalement une source dinformation valide et pertinente propos de lvaluation de certains aspects de leur formation. Les rsistances pourraient donc concerner les mthodes et les techniques employes pour raliser ces EEE. Cest donc dans la sphre de la gouvernance que nous pourrions trouver des pistes de rponse. A lorigine, le terme anglais de governance apparat dans les travaux de recherche conomique la fin des annes 1930, aux Etats-Unis. Cette notion sinscrit dans le domaine de lentreprise et notamment de sa gestion managriale. Nous entendons ici la gouvernance comme le pilotage de luniversit par ceux de ses membres investis dune fonction dlaboration de stratgie et/ou de mise en uvre de mcanismes de rgulation et de contrle. Nous considrons le pilotage dans sa totalit, en englobant ses mthodes, ses techniques et ses outils. Conue comme la participation active dune multiplicit dacteurs et ldification de plusieurs centres de dcisions, [comme] un gouvernement multipartite gnrateur defficacit et dadaptabilit des systmes 6 , la notion de gouvernance peut aider apprhender les nouvelles formes dorganisation, de rpartition des rles et des responsabilits qui se font jour luniversit et qui sont fortement influences, on la voqu pour Bologne, par des exigences relatives la qualit. Dans lenseignement suprieur, la qualit est souvent rattache des notions aussi diverses que la qualit totale, lamlioration continue, le contrle, lvaluation, etc expliquent M. Sylin et N. Delausnay, ajoutant que la dfinition et la gestion de la qualit dans lenseignement suprieur posent des questions conceptuelles essentielles qui impliquent trs directement les ralits dimplantation et de gestion des dmarches 7. Cest sous langle de ces questions dimplantation et de gestion de la dmarche, que nous avons choisi dobserver les pratiques dvaluation des
M.Romainville, une exprience dlaboration collective de critres de qualit , in Lvaluation de lenseignement par les tudiants, M.Romainville, C.Coggi (dir), De Boeck, collection Perspectives en ducation et formation , Bruxelles, 2009, p.146 6 Y.Mercian, La professionnalisation des diplmes universitaires : la gouvernance des formations en question, Thse de doctorat, prsente et soutenue publiquement le 13 dcembre 2010, Universit Nancy 2, p.204 7 M.Sylin, N. Delausnay, Les dmarches de qualit dans lenseignement suprieur : quels choix mthodologiques fondamentaux , 8e Biennale de lEducation et de la formation, INRP, 2006 , p.1
5

enseignements par les tudiants qui se dveloppent dans le contexte spcifique de Paris 1. En termes de mthodologie, jai souhait confronter des textes officiels ainsi que des ouvrages et articles de rfrence, en particulier les textes relatifs aux pratiques observes dans lenseignement suprieur franais, aux ractions des enseignants et directions dUFR de Paris 1 dune part et, dautre part, des tudiants de Paris 1 qui ont t concerns par le dploiement dune EEE cette anne. Dans une perspective socioculturelle, les lments de contexte ncessaires la comprhension du projet seront apports en pour clairer lanalyse du corpus retenu. Lobjectif de ce travail est dtablir des recommandations pour mettre en place, partir de lclairage de la recherche et de la comprhension du contexte spcifique de Paris 1, une dmarche dvaluation des enseignements en ligne par les tudiants articulant les enjeux qui se posent en termes de gouvernance aux diffrentes instances de direction et de pilotage de luniversit (prsidence, CEVU, directions dUFR, quipes pdagogiques) ceux lis la russite des tudiants travers lamlioration de la qualit des enseignements. Pour ce faire, nous brosserons dabord grands traits les lments de contexte prendre en compte pour mieux saisir notre objet et plus particulirement ceux qui nous semblent influer directement sur les problmatiques de gouvernance. Aux chelles internationales, nationales et locales, les universits sont de plus en plus installes dans un climat de concurrence qui gnre un certain nombre de contraintes informelles auxquelles sajoutent celles des diffrents cadrages politiques, europen comme franais. Une problmatique subsidiaire mais essentielle est celle de lidentit professionnelle des enseignants-chercheurs dans une priode o luniversit fait face de profondes volutions. Dans un deuxime temps, nous prsenterons les apports de la recherche en matire dvaluation des enseignements par les tudiants ; les travaux les plus rcents rappellent limportance de la prise en compte du contexte dans lequel elles seffectuent et questionnent certaines vidences, notamment celles relatives aux diffrentes vises possibles de lEEE dans la gouvernance de luniversit. Dans cette partie, nous prsenterons galement quelques conclusions spcifiquement lies une pratique informatise de lEEE. la lumire de cette double contextualisation, problmatiques lies la gouvernance universitaire et apports de la recherche en matire dEEE, nous prsenterons un projet pilote dEEE systmatise tous les enseignements de la formation Licence 1 dEconomie (environ 1 000 tudiants) de luniversit Paris 1 Panthon-Sorbonne. Nous analyserons les ractions des parties prenantes de ce projet

en les cartographiant thmatiquement afin de faire merger les carts et les points de jonction entre directions dUFR, enseignants et tudiants sur la question. Nous tenterons ainsi dtablir des constantes qui pourront contribuer tablir des convergences, mais aussi formuler des recommandations pouvant guider la rflexion et laction dans la diffusion des usages en matire dEEE dans le contexte spcifique de Paris 1.