Colloque Promosciences 2011

La formation des enseignants du suprieur : une ncessit face aux nouveaux publics de la Licence Sciences, Technologies, Sant ?

Atelier 2 : Lvaluation des apprentissages

Denis BERTHIAUME
Universit de Lausanne (Suisse)

Lvaluation des apprentissages

Denis Berthiaume Centre de soutien lenseignement (CSE) Universit de Lausanne, Suisse

Promosciences, Marseilles 1er avril 2011

Droulement de la formation
Evaluation formative vs sommative Le processus dvaluation des apprentissages Clarifier les apprentissages viss par lvaluation Choisir des mthodes dvaluation adaptes Dvelopper les instruments ncessaires la mise en uvre de chaque mthode dvaluation

Evaluation formative vs sommative

Evaluation sommative (certificative) Vise la prise de dcision Jugement ou verdict A la fin du processus dapprentissage Gnralement accompagne dune note Evaluation formative (feed-back) Vise lamlioration et la croissance Permet lauto-valuation et lajustement Durant le processus dapprentissage Souvent pas accompagne dune note

Lvaluation des apprentissages

1. CLARIFICATION Quel(s) apprentissage(s) veut-on valuer?

Evaluation
2. OBSERVATION Comment obtenir une preuve de lapprentissage ? 3. INTERPRETATION Comment analyser cette preuve de lapprentissage ?

Adapt de Pellegrino, J. W., Chudowsky, N., & Glaser, R. (2001). Knowing what students know: The Science and Design of Educational Assessment. Washington, DC: National Academy Press.

1. Quel(s) apprentissage(s) veut-on valuer ?

Domaine Cognitif Niveau En surface
Rtention Rception Perception

Affectif

Psychomoteur

Intermdiaire

Comprhension

Valorisation

Reproduction

En profondeur

Rflexion

Adoption

Perfectionnement

1.Quels apprentissages veut-on valuer ?

Exercice individuel (5 min) Nommez/dcrivez 2 3 apprentissages (comptences) raliss par les tudiant-e-s dont vous aimeriez obtenir la preuve la fin du cours ? Pour chaque apprentissage, identifiez le domaine et le niveau dapprentissage.

2. Comment obtenir une preuve de lapprentissage ?

Comment savoir ce que les tudiant-e-s ont appris ? Quoi valuer ? - le produit fini - le processus de pense - la performance - le progrs - aprs lenseignement - en cours denseignement - avant lenseignement

Quand valuer ?

2. Comment obtenir une preuve de lapprentissage ?

Objective QCM Vrai/Faux Matching Interprtation Rponses complter Rponses brves Observation (sans chelle) Observation (avec chelle) Rponses dveloppement Travail long Subjective Expos oral

Choisir une mthode dvaluation selon le domaine/niveau dapprentissage

DOMAINE NIVEAU
Rtention

DISPOSITIFS DEVALUATION

Cognitif

QCM, Vrai/Faux, Matching, Rponses complter, Rponses brves Rponses brves, Rponses dveloppement, Comprhension Travail long, Expos oral Rflexion Rception Travail long, Expos oral
QCM, Vrai/Faux, Rponses brves, Observation (sans chelle) Rponses dveloppement, Observation (avec chelle) Travail long, Expos oral, Observation (avec chelle) Observation (sans chelle) Observation (avec chelle) Observation (avec chelle), Travail long, Expos oral

Affectif

Valorisation Adoption Perception

Psychomoteur

Reproduction
Perfectionnement

Questionnaire choix multiple

Rapide corriger Interprtation des rponses gnralement peu subjective Permet de diagnostiquer les difficults ou erreurs dapprentissage

Avantages

Construction dun QCM valide et fiable assez complexe (travail de spcialiste) Inconvnients Construction dun QCM prend du temps (validit des noncs et des rponses) Ne permet dvaluer que les apprentissages de surface Evalue principalement les apprentissages du domaine cognitif et quelques fois ceux du domaine affectif

A retenir

Vrai/Faux
Rapide corriger Interprtation des rponses gnralement peu subjective

Avantages

Possibilit pour les tudiant-e-s de deviner ou dduire la bonne rponse Inconvnients Difficile de rdiger un nonc qui soit absolument et toujours vrai Ne permet dvaluer que les apprentissages de surface Evalue principalement les apprentissages du domaine cognitif et quelques fois ceux du domaine affectif

A retenir

Matching (association/appariement)
Rapide corriger et assez rapide construire Interprtation des rponses gnralement peu subjective

Avantages

Possibilit pour les tudiant-e-s de deviner ou dduire la bonne rponse Inconvnients Evalue parfois la capacit rechercher et liminer les mauvaises rponses Ne permet dvaluer que les apprentissages de surface Evalue principalement les apprentissages du domaine cognitif

A retenir

Rponses complter
Assez rapide construire et corriger Interprtation des rponses gnralement peu subjective (mais davantage que les valuations rponse choisie)

Avantages

Peut encourager les tudiant-e-s apprendre le contenu du cours par cur Inconvnients Enonc peut tre difficile comprendre si le trou est au dbut de lnonc Ne permet dvaluer que les apprentissages de surface Evalue principalement les apprentissages du domaine cognitif

A retenir

Rponses brves
Assez rapide construire Interprtation des rponses gnralement peu subjective (mais davantage que les valuations rponse choisie)

Avantages

Doit chercher les lments de rponse dans la construction par ltudiant-e Inconvnients Essentiel de prparer une grille de correction (par souci de fiabilit) Permet dvaluer les apprentissages de surface et parfois intermdiaire Evalue principalement les apprentissages du domaine cognitif mais aussi affectif

A retenir

Rponses dveloppement
Rapide construire Interprtation subjective des rponses Peut cibler un contenu assez vaste

Avantages

Essentiel didentifier des critres dvaluation (par souci de fiabilit) Inconvnients Obstacle potentiel provenant de lexpression crite de ltudiant-e Permet surtout dvaluer les apprentissages intermdiaires Permet dvaluer les apprentissages des domaines cognitif et affectif

A retenir

Travail long
Rapide construire Interprtation subjective des rponses Laisse davantage dautonomie aux tudiant-e-s (selon la situation)

Avantages

Essentiel didentifier des critres dvaluation (par souci de fiabilit) Inconvnients Obstacle potentiel provenant de lexpression crite de ltudiant-e Permet dvaluer les apprentissages intermdiaires ou en profondeur Evalue les apprentissages des domaines cognitif et affectif (et parfois psychomoteur)

A retenir

Expos oral
Rapide construire Interprtation subjective des rponses Laisse davantage dautonomie aux tudiant-e-s (selon la situation)

Avantages

Essentiel didentifier des critres dvaluation (par souci de fiabilit) Inconvnients Obstacle potentiel provenant de lexpression orale de ltudiant-e Permet dvaluer les apprentissages intermdiaires ou en profondeur Evalue les apprentissages des domaines cognitif et affectif (et parfois psychomoteur)

A retenir

2. Comment obtenir une preuve de lapprentissage ?

En fonction de lapprentissage vis En fonction du temps disposition (pour la construction ou la correction) En fonction des contraintes logistiques (dlais de retour aux tudiant-e-s, salles disponibles, etc.) En fonction de sa propre matrise de la mthode En fonction de la matrise de cette mthode par les tudiant-e-s En fonction de son utilit relativement au feed-back rendu aux tudiant-e-s

2. Comment obtenir une preuve de lapprentissage ?

Exercice individuel (5 min) Choisissez lun de vos apprentissages Pour cet apprentissage, identifiez une mthode dvaluation qui serait adapte au domaine et au niveau dapprentissage

3. Comment interprter la preuve de lapprentissage ?

Quelle valeur attribuer aux apprentissages observs ? Quelle rfrence ? - courbe normale (de Gauss) - critre absolu

Qui juge ?

- enseignant-e-s - tudiant-e - autres tudiant-e-s - tierces parties

Les critres
Servent de premire lentille pour examiner la preuve dapprentissage Clarifient ce qui est important dvaluer Sont directement relis aux objectifs pdagogiques (ce que lon cherche faire apprendre) Fournissent une description relativement dtaille de ce qui doit tre appris/acquis/matris/construit Peuvent tre davantage spcifiques (micro) ou davantage gnraux (macro)

Des exemples de critres

Comptences rdactionnelles : tre en mesure de rdiger un rapport la fois informatif et concis Professionnalisme : se soucier ou sassurer de la qualit de la prestation offerte Exactitude des connaissances : utiliser des concepts selon le sens qui leur est communment donn Travail en quipe : collaborer avec des collgues dans le but daccrotre lefficacit du groupe

Les niveaux/indicateurs de performance

Servent de seconde lentille pour examiner la preuve dapprentissage Clarifient les performances possibles Sont directement relis des niveaux distincts de comptence Fournissent une description relativement dtaille du niveau de matrise/acquisition/apprentissage Peuvent comprendre de deux plusieurs niveaux Peuvent tre quantitativement ou qualitativement diffrents

Exemples de niveaux de performance

Succs : Echec : Excellent : Acceptable : Inacceptable : rencontre toutes les exigences ne rencontre pas toutes les exigences dpasse les exigences minimales rencontre les exigences minimales ne rencontre pas les exigences minimales

Matrise complte : peut poser plus de 25 gestes Matrise partielle : peut poser entre 10 et 25 gestes Matrise insuffisante: peut poser moins de 10 gestes

Les rubriques (grilles critries)

Excellent
Professionnalisme Se soucier ou sassurer de la qualit des soins offerts Travail en quipe Collaborer avec des collgues dans le but daccrotre lefficacit du groupe
Dpasse les attentes minimales en recherchant les occasions de collaboration Recontre les attentes minimales en collaborant lorsque ncessaire Ne rencontre pas les attentes minimales en vitant les situations de collaboration Va au-del des attentes minimales en sassurant, de faon constante, du bien-tre du/de la patient-e Rencontre les attentes minimales en sassurant, la majeure partie du temps, du bien-tre du/de la patient-e Ne rencontre pas les attentes minimales en ne sassurant pas, la majeure partie du temps, du bien-tre du/de la patient-e

Acceptable

Inacceptable

Les rubriques (grilles critries)

Lvaluation des apprentissages Validit et fiabilit

Validit (cohrence)
Compatibilit avec les objectifs pdagogiques Tient compte du poids relatif des objectifs Assure de bien valuer ce quil faut valuer

Fiabilit (constance)
Entre correcteurs (inter) Pour un seul correcteur (intra) Assure de toujours valuer de la mme faon

3. Comment analyser la preuve dapprentissage ?

Exercice individuel (5 min) A partir de lapprentissage identifi prcdemment, pour lequel vous avez choisi une mthode dvaluation, identifiez un/des critre(s) et des niveaux de performance

Rfrences
Cranton, P. (1989). Planning instruction for adult learners. Toronto : Wall & Emerson. Fenwick, T., & Parsons, J. (2000). The art of evaluation. Toronto : Thompson Educational Publishing. Morissette, D. (1996). Lvaluation sommative. Montral : Editions du Renouveau Pdagogique. Pellegrino, J. W., Chudowsky, N., & Glaser, R. (2001). Knowing what students know: The Science and Design of Educational Assessment. Washington, DC : National Academy Press. Scallon, G. (2000). Lvaluation formative. Montral : Editions du Renouveau Pdagogique.