Vous êtes sur la page 1sur 101

Licence de Psychologie 2ème année

Licence Pro Education pour la santé


2011 - 2012

La construction de questionnaires

Marine Beaudoin
Maitre de Conférences en psychologie
Université de Savoie
bureau 613 / 04.79.75.91.90 / marine.beaudoin@univ-savoie.fr

8h CM + 6h TD
MCC : dossier = 40% note EC (+ 60% CT Techniques d'entretien)
Introduction

Un questionnaire est un outil d'évaluation proche des tests, mais qui


s'étend à une utilisation plus générale (aptitudes, mais également
attitudes, fréquences de comportements, personnalité…)

Connaissances en psychologie
Attitude envers l'avortement
Fréquence d'utilisation de la télévision
Anxiété
Etc.

2
Introduction

Echelle de motivation dans le sport (Brière et al., 1995)

3
Introduction

Questionnaire d'auto-efficacité mnésique (Beaudoin & Desrichard, 2008)

4
Introduction

Questionnaire d'auto-efficacité mnésique (Beaudoin & Desrichard, 2008)

5
Introduction

Inventaire d'anxiété d'évaluation (Spielberger, 1980 )

6
Introduction

Un questionnaire permet de recueillir une information qui est fournie


par le répondant

Une réponse à une question est considérée comme une mesure d’une
variable
variable = qui peut prendre différentes valeurs prises dans un ensemble

... utilisable comme outil de mesure pourvu que :


- répondant et enquêteur comprennent la même chose
- le répondant connaisse la réponse
- le répondant soit prêt à la révéler

4
Introduction

Exemple

Objectif mesurer la variable "anxiété"

Outil de mesure question "est-ce qu'il vous arrive de vous bloquer lors
d'examens importants ?"

Réponse "presque jamais"

Valeur de la variable = pas d'anxiété d'évaluation trait


sauf si
- pas même compréhension ("bloquer" = physique)
- réponse inconnue (pas d'expérience des situations d'examen)
4
- révélation indésirée (situation d'entretien d'embauche, anxiété délicate à révéler)
Introduction

Problème

Entre la réponse qui correspondrait à la valeur réelle de la variable que


l’on souhaite mesurer et la réponse fournie par la personne il peut y avoir
un écart : l'erreur de mesure

Une réponse à une question est une mesure probablement erronée


(biaisée) d’une variable

X Y e

variable réponse erreur


9
Introduction

Problème

Entre la réponse qui correspondrait à l’état réel de la variable que l’on


souhaite mesurer et la réponse fournie par la personne il peut y avoir un
écart : l'erreur de mesure

Une réponse à une question est une mesure probablement erronée


(biaisée) d’une variable

Une réponse à une question est considérée comme un


donc indicateur de plus ou moins bonne qualité de la
variable qu’elle est censée refléter

10
Introduction

Nécessité de créer des questions qui soient des indicateurs de la


meilleure qualité possible

Développement de techniques élaborées de développement de


questionnaires :

techniques de construction de questionnaires


(ce cours)

techniques de validation de questionnaires


(cours Psychométrie)

11
Plan du cours

Comment construit-on un questionnaire ?

1. Connaitre les différents types de questions

2. Bien savoir ce que l'on veut mesurer (se doter d'une théorie)

3. Considérer l'erreur de mesure

4. Lutter contre l'erreur aléatoire en multipliant les questions

5. Lutter contre l'erreur systématique en anticipant les biais de réponse

12
Les différents types de questions

Les questions de fait versus les questions d'opinion

Les questions de fait destinées à recueillir des infos précises et


"objectives" sur les sujets : informations
sociodémographiques, comportements,
expérience

Quel est votre âge ?


Quel métier exercez-vous ?
Vous arrive-t-il de manger des abats ?
Utilisez-vous les transports en commun ?
Combien d'opération avec-vous subies ?

13
Les différents types de questions

Les questions de fait et les questions d'opinion

Les questions d'opinion destinées à recueillir des infos "subjectives"


sur les sujets : ce qu'ils pensent,
souhaitent, ressentent (mesure attitudes,
émotions, personnalité, etc.)

Dans quelle mesure êtes-vous favorable à l'avortement ?


Pensez-vous que les américains sont trop puritains ?
Dans quelle mesure votre but dans ce cours est-il d’éviter de mal réussir ?
Qui aimeriez-vous voir gagner les primaires socialistes ?
Dans l'ensemble, vous sentez-vous fier de vous ?
Vous arrive-t-il de vous bloquer pendant un examen ?
14
Les différents types de questions

Les questions qualitatives et quantitatives

Qui aimeriez-vous voir gagner les primaires socialistes ?


Quel métier exercez-vous ?
Dans quelle mesure êtes-vous favorable à l'avortement ?
Pas du tout favorable ! ! ! ! ! ! ! Très favorable

Combien d'opération avec-vous subies ?


Quel est votre âge (en mois) ?

15
Les différents types de questions

La question ouverte Aucune réponse n'est proposée, le sujet


doit générer lui-même sa réponse

Quel est votre homme politique préféré ?

Comment recherchez-vous de l’information sur la contraception


sur internet ?

Quel est votre âge (en mois) ?

Combien de relations sexuelles non protégées avez-vous eu


dans le dernier mois ?

16
Les différents types de questions

La question fermée des options de réponse sont proposée, le


sujet doit choisir celle correspondant à sa
réponse

Plusieurs types…

17
Les différents types de questions

Questions fermées à réponses non-ordonnées

1 réponse attendue, ou plusieurs réponses possibles

Vous êtes : Qu'aimez-vous dans le fait de voyager ?

célibataire la détente
marié(e) la découverte de paysage
divorcé(e) la découverte d'une culture différente
veuf-veuve l'excitation
le changement de mode de vie

18
Les différents types de questions

Questions fermées à réponses non-ordonnées

L'échelle des intervalles d'égalités apparentes (Thurstone)

Mesure d'opinions
Liste de propositions + ou – caractéristiques d'une opinion donnée
Sujet choisit les propositions qui correspondent à ce qu'il pense

19
Les différents types de questions

Questions fermées à réponses ordonnées

1 réponse attendue, ou plusieurs réponses possibles (avec ordre!)

Combien de fois avez-vous Qu'est-ce qui caractérise selon vous un


ressenti des douleurs à homme de gauche ? (cochez deux
l'abdomen aujourd'hui ? réponses par ordre de préférence)

0 fois l'anticléricalisme
1 à 2 fois le soucis de défendre les libertés
3 à 5 fois l'attention portée au prolétariat
plus de 5 fois le pacifisme

20
Les différents types de questions

Questions fermées à réponses ordonnées

Les échelles d'évaluation (rating scales)

21
Les différents types de questions

Questions fermées à réponses ordonnées

Les échelles d'évaluation (rating scales)

La douleur que vous ressentez est :


Supportable ! ! ! ! ! ! ! Insupportable

22
Les différents types de questions

Questions fermées à réponses ordonnées

Les échelles d'évaluation (rating scales)

L'échelle visuelle analogique

Comment évaluez-vous votre mémoire ?


Indiquez votre réponse en dessinant un trait vertical sur la ligne
horizontale ci-dessous

Très mauvaise Très bonne

23
Les différents types de questions

Questions fermées à réponses ordonnées

Les échelles d'évaluation (rating scales)

L'échelle d'accord (échelle de Likert)


= exprime une adhésion à une proposition

Je peux trouver des moyens d'améliorer ma mémoire


Pas du tout d’accord
Plutôt pas d’accord
Légèrement pas d’accord
Légèrement d’accord
Plutôt d’accord
Tout à fait d’accord
24
Les différents types de questions

Questions fermées à réponses ordonnées

Les échelles d'évaluation (rating scales)

L'échelle d'accord (échelle de Likert)


= exprime une adhésion à une proposition

tout à fait faux ! ! ! ! ! ! ! tout à fait vrai


me décrit ! ! ! ! ! ne me décrit pas

25
Les différents types de questions

Comment choisir ses questions ?

Selon les propriétés de la variable que l’on cherche à mesurer

Exemples
Question fermée versus question ouverte : est-ce qu'on connait toutes les
réponses possibles ?
Mesure attitude avec échelle Likert versus Thurstone : est-ce que le sujet est
susceptible d'avoir facilement accès à son attitude ?
Likert versus visuelle analogique : est-ce que les catégories de réponses ont un
sens suffisamment clair ?

26
Les différents types de questions

Comment choisir ses questions ?

Selon notre utilisation de la variable

Exemples

Etes-vous favorable au Dans quelle mesure êtes-vous favorable au


mariage homosexuel ? mariage homosexuel ?
plutôt oui Tout à fait ! ! ! ! ! ! ! Pas du tout
plutôt non

Comparaison du % de Évaluation de l'effet de la présentation


personnes favorables selon d'un film d'information sur l'attitude
les catégories d'âge 27
Bien définir ce que l'on veut mesurer

Que veut-on mesurer ?

En psychologie, on mesure le plus souvent des construits

= variable psychologique que l’on


ne peut pas observer directement
anxiété, racisme, personnalité,
intelligence…
(variables latentes)

28
Bien définir ce que l'on veut mesurer

Que veut-on mesurer ?

En psychologie, on mesure le plus souvent des construits

Nécessite de se poser la question de :


- la définition du construit
- la structure du construit Bien connaitre la théorie !
- la manifestation du construit
- la "coopération" du répondant

29
Bien définir ce que l'on veut mesurer

Exemple de l'anxiété d'évaluation

Définition Anxiété ressentie en situation d'évaluation


2 dimensions :
État : anxiété transitoire lors d'une évaluation donnée
Trait : tendance à l'anxiété en situation d'évaluation

Structure 2 composantes :
Émotionnelle : réactions somatiques, physiologiques
Cognitive : pensées intrusives sur soi, sur le test

30
Bien définir ce que l'on veut mesurer

Exemple de l'anxiété d'évaluation

Manifestation Anxiété état émotionnelle


activation du système nerveux sympathique (augm.
rythme cardiaque, respiratoire, sudation, etc.)

Anxiété état cognitive


attentes d'échec, pensées intrusives, distraction, etc.

Anxiété trait
idem mais avec stabilité inter-situations

Coopération ? Manifestations assez claires (compréhension ok)


Manifestations conscientisables
Révélation ? Ok (anxiété pas tabou), quoique…
(auto-handicap)
31
Bien définir ce que l'on veut mesurer

Exemple de l'anxiété d'évaluation

Et si vous n'aviez pas bien pris connaissance du construit ?

Si
Objectif = mesurer l'anxiété d'évaluation pour prévenir ses effets lors de
l'épreuve du permis de conduire

Alors
Mesure de l'activation physiologique pas de lien avec la perf. (échelle inutile)
Mesure anxiété état code pas prédiction perf situation permis (échelle inutile)
Mesure anxiété état avant code, pas anonymat réponses biaisée par auto-
handicap

32
Bien définir ce que l'on veut mesurer

Ou trouver les réponses ?

Analyse de la littérature sur le sujet


Passation d'entretiens
Hypothèse du concepteur du questionnaire (+ entretien)

33
Considérer l'erreur de mesure

X Y e

variable indicateur erreur


(réponse)
température degré perçu (lu) lecture
de dilatation du
mercure
estime de soi accord avec "je modestie
suis quelqu'un de
bien"
34
Considérer l'erreur de mesure

ma lecture du thermomètre

e1 erreur aléatoire

X Y

e2 erreur systématique
variable réponse
température degré perçu (lu) thermomètre avec graduation
de dilatation du manquante
mercure

35
Considérer l'erreur de mesure

interprétation de l'item

e1 erreur aléatoire

X Y

e2 erreur systématique
variable réponse
estime de soi accord avec "je biais de désirabilité sociale
suis quelqu'un de
bien"

36
Considérer l'erreur de mesure

L’erreur aléatoire

= composante de l'erreur de mesure qui, dans des


mesurages répétés, varie de façon imprévisible (BIPM)

37
Considérer l'erreur de mesure

L’erreur aléatoire

Exemple : thermomètre
Valeur vraie de la variable = 37,2 °C
Lecture n°1 = 37,3 °C indicateur 37,3 = valeur vraie 37,2 + erreur lecture +0,1
Lecture n°2 = 37,0 °C indicateur 37,0 = valeur vraie 37,2 + erreur lecture -0,2
Lecture n°3 = 37,5 °C indicateur 37,5 = valeur vraie 37,2 + erreur lecture +0,3
Lecture n°4 = 37,1 °C indicateur 37,1 = valeur vraie 37,2 + erreur lecture -0,1

38
Considérer l'erreur de mesure

L’erreur aléatoire

Exemple : thermomètre
Valeur vraie de la variable = 37,2 °C
Lecture n°1 = 37,3 °C
Lecture n°2 = 37,0 °C
Lecture n°3 = 37,5 °C
Lecture n°4 = 37,1 °C
Moyenne = 37,225 °C
meilleur indicateur de la valeur vraie que chaque mesure

La moyenne de l’erreur aléatoire tend vers 0


39
Considérer l'erreur de mesure

L’erreur aléatoire

La moyenne de l’erreur aléatoire tend vers 0


Intérêt de multiplier les mesures et d'en prendre la moyenne

erreurs
variable n indicateurs
aléatoires
n lectures, n thermomètres…

X Y1 e1

Yi ei

40
Yn en
Considérer l'erreur de mesure

L’erreur aléatoire (ou pourquoi poser plusieurs fois la même question)

Même principe pour la mesure d’un construit psychologique


avec un questionnaire : les questions multiples

erreurs
variable n indicateurs
aléatoires
n questions

X Y1 e1

Yi ei

41
Yn en
Considérer l'erreur de mesure

L’erreur aléatoire (ou pourquoi poser plusieurs fois la même question)

Exemple : estime de soi

« je suis plutôt fier de moi » e1

estime « je suis quelqu’un de bien » e2


de soi

« je suis quelqu’un de valeur » e3

« je suis satisfait de qui je suis » e4


42
Considérer l'erreur de mesure

L’erreur aléatoire (ou pourquoi poser plusieurs fois la même question)

Exemple : estime de soi


Valeur vraie de la variable = tout à fait faux ! ! ! ! ! tout à fait vrai
("je m'estime")

Indicateurs
« je suis plutôt fier de moi » tout à fait faux ! ! ! ! ! tout à fait vrai
« je suis quelqu’un de bien » tout à fait faux ! ! ! ! ! tout à fait vrai
« je suis quelqu’un de valeur » tout à fait faux ! ! ! ! ! tout à fait vrai
« je suis satisfait de qui je suis » tout à fait faux ! ! ! ! ! tout à fait vrai

Moyenne = 3
meilleur (ou aussi bon) indicateur de la valeur vraie que chaque
indicateur pris isolément 43
Considérer l'erreur de mesure

L’erreur aléatoire

Valeur vraie de la variable = 37,2 °C

Thermomètre A Thermomètre B
Lecture n°1 = 37,3 °C Lecture n°1 = 37,5 °C
Lecture n°2 = 37,0 °C Lecture n°2 = 36,8 °C
Lecture n°3 = 37,5 °C Lecture n°3 = 37,7 °C
Lecture n°4 = 37,1 °C Lecture n°4 = 36,9 °C

ET = 0.19 (M = 37,225) ET = 0.38 (M = 37,225)

affecte la fidélité de la mesure


44
Considérer l'erreur de mesure

Fidélité

= étroitesse de l'accord entre les indications (valeurs


mesurées) obtenues par des mesurages répétés du même
objet (BIPM)

45
Considérer l'erreur de mesure

L’erreur systématique

= composante de l'erreur de mesure qui, dans des


mesurages répétés, demeure constante ou varie de façon
prévisible (BIPM)

46
Considérer l'erreur de mesure

L’erreur systématique

Exemple : thermomètre avec graduation 36 manquante


Valeur vraie de la variable = 36,2 °C
Lecture n°1 = 37,3 °C 38

Lecture n°2 = 37,0 °C


Lecture n°3 = 37,5 °C 37

Lecture n°4 = 37,1 °C 35

M = 37,225
indicateur biaisé de la valeur vraie

(37,225 – 36,2 = erreur systématique)


47
Considérer l'erreur de mesure

L’erreur systématique

Exemple : thermomètre avec graduation 36 manquante


Valeur vraie de la variable = 36,2 °C
Thermomètre biaisé Thermomètre non biaisé
Lecture n°1 = 37,3 °C 38 Lecture n°1 = 36,3 °C 37

Lecture n°2 = 37,0 °C Lecture n°2 = 36,0 °C


37 36
Lecture n°3 = 37,5 °C Lecture n°3 = 36,5 °C
Lecture n°4 = 37,1 °C 35 Lecture n°4 = 36,1 °C 35

M = 37,225 ET = 0.19 M = 36,225 ET = 0.19

affecte la justesse de la mesure


48
Considérer l'erreur de mesure

Justesse

= étroitesse de l'accord entre la moyenne d'un nombre


infini de valeurs mesurées répétées et une valeur de
référence (BIPM)

49
Considérer l'erreur de mesure

L’erreur systématique

Exemple : estime de soi et désirabilité sociale


Valeur vraie de la variable = tout à fait faux ! ! ! ! ! tout à fait vrai
("je m'estime" : pas vraiment)

Indicateurs
« je suis plutôt fier de moi » tout à fait faux ! ! ! ! ! tout à fait vrai
« je suis quelqu’un de bien » tout à fait faux ! ! ! ! ! tout à fait vrai
« je suis quelqu’un de valeur » tout à fait faux ! ! ! ! ! tout à fait vrai
« je suis satisfait de qui je suis » tout à fait faux ! ! ! ! ! tout à fait vrai

Moyenne = 3 erreur aléatoire


indicateur biaisé de la valeur vraie 2
erreur aléatoire +
systématique 50
Considérer l'erreur de mesure

La fidélité et la justesse d'un outil de mesure affectent son exactitude

étroitesse de l'accord entre une valeur


mesurée (indicateur) et la valeur vraie de
la variable que l'on souhaite mesurer

La fidélité et la justesse d'un questionnaire affectent son exactitude

étroitesse de l'accord entre les réponses au


questionnaire (indicateurs) et la valeur vraie du
construit que l'on souhaite mesurer
51
Considérer l'erreur de mesure

Remarque

Une erreur systématique au niveau d’un sujet peut devenir


une erreur aléatoire au niveau du groupe

Exemple

Sujet A : valeur vraie 10 + stratégie de réponse libérale (aventureuse) = 12 (score 4)


Sujet B : valeur vraie 10 + stratégie de réponse conservatrice (prudente) = 8 (score 3)
52
Considérer l'erreur de mesure

Exemple (suite)

Sujet A :
valeur vraie 12 + stratégie réponse libérale = 14 (score 4)
Sujet B :
valeur vraie 12 + stratégie réponse conservatrice = 10 (3)

Sujet A :
valeur vraie 6 + stratégie réponse libérale = 7 (score 4)
Sujet B :
valeur vraie 6 + stratégie réponse conservatrice = 5 (3)
53
Considérer l'erreur de mesure

Exemple (suite)

Les réponses du sujet A surestiment systématiquement la valeur vraie


Les réponses du sujet B sous-estiment systématiquement la valeur vraie
Les réponses des sujets varient dans un sens ou dans l'autre selon leur
style de réponse (erreur aléatoire)

Une source d'erreur systématique au niveau d'un sujet peut devenir une
source d'erreur aléatoire au niveau du groupe
(ce questionnaire donne une mesure plus juste au niveau collectif (moyenne
des réponses des sujets) qu'au niveau individuel (moyenne des réponses
d'un sujet))

54
Considérer l'erreur de mesure

Lutter contre l'erreur de mesure

2 grands ennemis de l'exactitude

Le satisficing

= mode de réponse économique où le but n’est


pas de donner la bonne réponse mais simplement
de donner une réponse suffisante dans le
contexte de l’interaction enquêteur-répondant

55
Considérer l'erreur de mesure

Lutter contre l'erreur de mesure

2 grands ennemis de l'exactitude

Le satisficing

Quelles conséquences ?
Réponses rapides, peu réfléchies, etc. manque d'exactitude
Source d'erreur aléatoire (interprétation hasardeuse…)
Source d'erreur systématique (biais de demande expérimentale,
biais d'acquiescement…)

56
Considérer l'erreur de mesure

Lutter contre l'erreur de mesure

2 grands ennemis de l'exactitude

Le satisficing

Dans quelles circonstances ?


Questionnaire trop long quand
Manque d’intérêt ressources
Sentiment d'obligation cognitives
Questions complexes insuffisantes
Echelle de réponse complexe

57
Considérer l'erreur de mesure

Lutter contre l'erreur de mesure

2 grands ennemis de l'exactitude

Le biais de désirabilité sociale

= tendance à donner des réponses allant dans le


sens de ce qui nous parait socialement valorisé

DONC source d'erreur systématique

hétéro-duperie - minimisée par anonymat, réponses privées


- mesurable
auto-duperie - difficile à éviter
- mesurable 58
Considérer l'erreur de mesure

Lutter contre l'erreur de mesure

2 grands ennemis de l'exactitude, entre autres!

Globalement, comment lutter ?

prévenir le satificing
multiplier les questions
erreur aléatoire
minimiser les problèmes de compréhension
(source d'erreur d'interprétation)

prévenir le satificing
erreur systématique anticiper les biais de réponse pour les contrôler
(chapitre 5) 59
Différents types de questionnaires

Trois techniques courantes de construction de questionnaires

A. Technique d’addition des estimations


(Likert, 1932-1933)

B. Méthode des intervalles d’égalité apparente


(Thurstone, 1931)

C. Méthode du différenciateur sémantique


(Osgood, Suci & Tannenbaum, 1957)

60
A. Technique d'addition des estimations

Exemple

61
Inventaire d'anxiété d'évaluation (Spielberger, 1980 )
A. Technique d'addition des estimations

Applications

Variées (attitudes, affects, personnalité, etc.)

Echelle de sexisme ambivalent (Dardenne et al., 2006)


Échelle d'estime de soi (Rosenberg)
Test Anxiety Inventory (Spielberger)
Positive And Negative Affect Scale (PANAS)
NEO Personality Inventory-Revised (NEO PI-R)

62
A. Technique d'addition des estimations

Construction des items (questions)

1. Bien définir ce que l'on veut mesurer

a) définition, structure anxiété émotionnelle, anxiété cognitive

b) identifier les manifestations


- dans la littérature scientifique
anxiété émotionnelle : sudation, accélération rythmes
cardiaque et respiratoire, nervosité
anxiété cognitive : inquiétudes à l'égard de soi ou de l'objet
d'anxiété

63
A. Technique d'addition des estimations

Construction des items

1. Bien définir ce que l'on veut mesurer

a) définition, structure anxiété émotionnelle, anxiété cognitive

b) identifier les manifestations


- dans la littérature scientifique
- par des entretiens / études
création d'une situation anxiogène (évaluation intelligence)
"que ressentez-vous ?" manifestations anxiété émotionnelle
"que pensez-vous ?" manifestations anxiété cognitive
(face à un objet d'anxiété donné : ici l'évaluation)
64
A. Technique d'addition des estimations

Construction des items

2. Elaborer un ensemble d’énoncés exprimant a priori le construit mesuré


- à partir des manifestations connues du construit

Manifestations connues Enoncés (items)


sudation "j'ai les mains moites"
accélération rythmes cardiaque "mon cœur bat vite"
accélération rythme respiratoire "ma respiration s'accélère"
nervosité "je suis nerveux"
inquiétudes sur soi "j'ai peur de paraitre mauvais"
inquiétudes sur le test "je suis inquiet de la façon dont
l'évaluation va se passer" 65
A. Technique d'addition des estimations

Construction des items

2. Elaborer un ensemble d’énoncés exprimant a priori le construit mesuré


- à partir des manifestations connues du construit
- en tenant compte de quelques règles

Item Questionnaire
- Court - Couvrir les extrêmes (absence à
- N'exprime qu'une seule idée présence du construit)
- Non ambigu (items négatifs et positifs)
"j'ai les mains moites et le cœur "je me sens calme"
qui bat vite" "je pense que le test va bien se passer"
66
A. Technique d'addition des estimations

Construction des items

2. Elaborer un ensemble d’énoncés exprimant a priori le construit mesuré


- à partir des manifestations connues du construit
- en tenant compte de quelques règles
- en prévoyant plus d'items que voulu (surplus de 30 à 50%)

67
A. Technique d'addition des estimations

Construction d'une échelle de réponse

Échelle d'évaluation (rating scale)


Combien d'options ? 7 +/- 2

Quels labels ? Labels ordonnés avec espacement régulier


Partout si ont du sens, aux extrêmes si
problèmes de compréhension possible
Associer numéros ? Attention à leur sens (-5 à +5 ≠ 0 à 10)

Option NSP ? Si pertinente oui, sinon non (utilisée comme


non-réponse)
À l'écart (sinon utilisée comme réponse neutre)
68
A. Technique d'addition des estimations

Rédaction des consignes

Indiquer tout ce qui peut contribuer à réduire les problèmes de


compréhension (explication de l'échelle, exemples, etc.) et
augmenter la "coopération" du sujet (anonymat, confidentialité,
possibilité de non-réponse,"pas de bonnes ou de mauvaises
réponses", etc.)

69
A. Technique d'addition des estimations

Sélection des items

1. Soumettre le pré-questionnaire à un échantillon de sujets


(représentatif de la population d'intérêt)
+ entretien

2. Analyser les protocoles d'entretien


compréhension, intérêt, difficultés…
3. Analyser les réponses au questionnaire
(attention à l'inversion des scores à certains items!)
"mains moites" jamais ! ! X ! toujours =3
"détendu" jamais ! ! X ! toujours =2
70
A. Technique d'addition des estimations

Sélection des items

a) pour chaque item, analyser la fréquence des réponses

TAI, item 9
"Même lorsque je suis
bien préparé pour un
examen il me rend très
nerveux"
Presque jamais (1)
Parfois (2)
Souvent (3)
Presque toujours (4)

71
A. Technique d'addition des estimations

Sélection des items

a) pour chaque item, analyser la fréquence des réponses


b) éliminer les items qui ont une distribution anormale

Pré-EAEE, item "j'ai la


gorge un peu sèche"

Me décrit…
- pas du tout (1)
- mal (2)
- plutôt mal (3)
- plutôt bien (4)
- bien (5)
- tout à fait (6)
72
A. Technique d'addition des estimations

Sélection des items

a) pour chaque item, analyser la fréquence des réponses


b) éliminer les items qui ont une distribution anormale
c) soumettre les items retenus à l'analyse factorielle

Cours "psychométrie"
Globalement, l'analyse factorielle permet de répondre à la question
"y'a-t-il une similitude du classement interindividuel sur différents items ?"
Si un construit commun est censé sous-tendre les réponses à un
ensemble de questions, alors on attend à une similitude

73
A. Technique d'addition des estimations

Sélection des items

a) pour chaque item, analyser la fréquence des réponses


b) éliminer les items qui ont une distribution anormale
c) soumettre les items retenus à l'analyse factorielle
élimination des items pour lesquels le classement est "différent des autres"

74
B. Méth. des intervalles d’égalité apparente

Exemple

Cochez les propositions qui correspondent à ce que vous pensez

!
!
!
!
!
!
!

75
Attitude envers la guerre (Droba, 1930 )
B. Méth. des intervalles d’égalité apparente

Application

Mesure des attitudes (tendance psychologique qui s'exprime par


l'évaluation d'un objet avec un certain degré de faveur ou défaveur)

Attitude envers la guerre


Attitude envers l'avortement
Attitude envers la liberté d'expression

76
B. Méth. des intervalles d’égalité apparente

Étape 1

Rédiger une série d’énoncés (~ 100) reflétant des attitudes plus ou


moins favorables, défavorables et neutres face à un objet

"lorsque la guerre est déclarée on doit s'engager"


"toutes les nations doivent immédiatement procéder à leur désarmement"
"la paix et la guerre sont toutes deux essentielles au progrès"

etc.
77
B. Méth. des intervalles d’égalité apparente

Étape 2

Des juges doivent évaluer dans quelle mesure chaque énoncé est
favorable-défavorable envers l’objet

"la paix et la guerre sont toutes deux essentielles au progrès"

Cette proposition est ...

Très favorable 1234567891011 Pas du tout favorable

... à la guerre

78
B. Méth. des intervalles d’égalité apparente

Étape 3

1. calcul de la moyenne et de l’écart type pour chacun des énoncés


2. les énoncés avec des écarts types élevés sont éliminés (manque
d’accord chez les juges)
3. la valeur définitive de l’énoncé est données par la moyenne

Exemple après évaluation par des juges…

"lorsque la guerre est déclarée on doit s'engager" M = 2,5


"la paix et la guerre sont toutes deux essentielles au M = 5,4
progrès"
"toutes les nations doivent immédiatement procéder M = 10,6
à leur désarmement"
79
B. Méth. des intervalles d’égalité apparente

Étape 4

Garder les items qui balayent régulièrement le continuum favorable -


défavorable
1,3
2,5
5,2
5,4
5,6
8,4
10,6

80
B. Méth. des intervalles d’égalité apparente

Étape 5

Organiser le questionnaire final


- réarrangement des énoncés
- consigne
- échelle de réponse

Cochez les propositions qui correspondent à ce que vous pensez


!
!
!
!
!
!
81
!
B. Méth. des intervalles d’égalité apparente

Calcul des scores

Score du sujet = médiane des scores des réponses cochées

Exemple, sujet A
!
X
!
X
!
!
X
10,6 – 8,4 – 5,6 82
Mdn = 8,4 (attitude plutôt défavorable envers la guerre)
B. Méth. des intervalles d’égalité apparente

Calcul des scores

Score du sujet = médiane des scores des réponses cochées

Exemple, sujet B
X
!
X
!
!
X
X
1,3 – 5,4 – 5,2 – 5,6 1,3 – 5,2 – 5,4 – 5,6 83
Mdn = 5,3 (attitude plutôt neutre envers la guerre)
C. Méthode du différenciateur sémantique

Application

Mesures d'évaluations (bon-mauvais, composante affective de l'attitude)

Principe

Décrire un objet d'attitude sur des caractéristiques bipolaires à forte


connotation évaluative

84
C. Méthode du différenciateur sémantique

Exemple
Julian BUGIER est :
Actif ! ! ! ! ! ! ! Passif
Froid ! ! ! ! ! ! ! Chaleureux
Rapide ! ! ! ! ! ! ! Lent
Sympathique ! ! ! ! ! ! ! Antipathique
Peu important ! ! ! ! ! ! ! Important
Sincère ! ! ! ! ! ! ! Non sincère
Agréable ! ! ! ! ! ! ! Désagréable
Intéressant ! ! ! ! ! ! ! Inintéressant
85
Mesure de l'attitude envers un nouveau présentateur TV (Kjeldergaard, 1961)
C. Méthode du différenciateur sémantique

Calcul des scores

Inverser les scores aux items de sens inversé


Faire la moyenne des scores

La part des réponses liées au sens (variable) s'annule, la part liée à


l'évaluation (constante) s'additionne
le score moyen représente la positivité-négativité de l'évaluation

86
Les biais de réponse

Le modèle standard de réponse aux questions

Compréhension Récupération Choix de Evaluation Réponse


de la question des éléments la réponse de la
permettant la réponse
réponse

" Combien de fois avez-vous consulté le médecin généraliste ce dernier mois? "

87
Les biais de réponse

Le modèle standard de réponse aux questions

Compréhension Récupération Choix de Evaluation Réponse


de la question des éléments la réponse de la
permettant la réponse
réponse

MAIS des erreurs peuvent se produire à chaque étape

88
Fiche 1: biais d’acquiescement

Problème : présenter une assertion Exemple : (Schuman & Presser, 1980)


peut suffire à la voir acceptée -Les individus sont plus en cause que
les conditions sociales pour expliquer
la délinquance dans le pays:
Effet(s) : quelle que soit la formulation OUI = 59.6%
de la question, la probabilité d’obtenir -Les conditions sociales sont plus en
un accord ou un oui est supérieure à cause que les individus pour expliquer
celle d’obtenir un désaccord ou un non la délinquance dans le pays:
OUI = 56.8%

Taille de l’effet : élevée Solution(s) :


-Préférer les formulations équilibrées
Exemple: Qui est le plus en cause pour
Explication(s) :
expliquer la délinquance dans le pays:
-Effet de personnalité acquiesçante
les individus ou les conditions sociales?
-Limite des ressources cognitives
Ind : 46.4% / cond so : 53.6%
-Crainte de contredire l’enquêteur
- Alterner les propositions pour et contre
Fiche 2: biais de conformisme

Problème : certaines réponses à une Exemple : études de Asch :


question sont partagées par la majorité - 75% des participants à l’expérience
ou par une personne prestigieuse. Cela mentaient au moins une fois en
peut-il inciter le répondant à la choisir ? donnant une réponse fausse,
Effet(s) : simplement parce qu’elle était donnée
une réponse a plus de chance d’être par la majorité des autres personnes
choisie si elle est associée à un groupe présentes (complices de Ash).
majoritaire ou prestigieux - « Je pense qu’un peu de rébellion
est une bonne chose, aussi
nécessaire au monde politique que les
Taille de l’effet : élevée orages le sont au monde physique » :
cette phrase récolte plus d’accord de
la part d’étudiants si elle est attribuée
Explication(s) : à Jefferson plutôt qu’à Lénine.
-Effet de désirabilité sociale
-Satisficing
Fiche 2: biais de conformisme

Problème : certaines réponses à une


question sont partagées par la majorité
Solution(s) :
ou par une personne prestigieuse. Cela
• éviter les formulations qui font
peut-il inciter le répondant à la choisir ?
référence à une majorité (« Pensez-
Effet(s) : vous comme la majorité des français
une réponse a plus de chance d’être que la loi sur l’avortement a été une
choisie si elle est associée à un groupe évolution positive de notre société ? »)
majoritaire ou prestigieux • éviter les formulations qui font
référence à une personne prestigieuse
Taille de l’effet : élevée (« êtes-vous favorable à la loi sur
l’avortement qu’a fait voter Simone
Weil en 1975 ? »)
Explication(s) : • être vigilant sur les questions qui font
-Effet de désirabilité sociale référence à des attitudes ou cpts
-Satisficing majoritaires (« Pensez-vous que
fumer est bon pour la santé ? »)
Fiche 3: biais de désirabilité sociale

Problème : des répondants peuvent Exemple : Weeks et al. (1983)


mentir stratégiquement afin de présenter « Etes-vous allé chez le dentiste ces
une image favorable d’eux-mêmes à douze derniers mois ? »
l’enquêteur Une plus forte proportion de oui est
obtenue en face à face que par
Effet(s) : téléphone
en situation de visibilité sociale, les rép.
désirables sont plus souvent choisies Solution(s) :
• éviter les formulations à caractère
Taille de l’effet : élevée socialement désirable (ex: vous arrive-
t-il de ne pas comprendre
l’ordonnance faite par votre médecin?)
Explication(s) : • pré-tester le caractère socialement
• effet de gestion d’impression : la désirable des réponses
réponse est utilisée pour se présenter • si possible réduire la visibilité du
favorablement répondant par l’anonymat
Fiche 4: effet d'amorçage

Problème : le questionnaire (situation, Exemple :


questions, réponses) peut activer des
considérations qui seront utilisées pour Attitude envers assistance sociale est
répondre plus favorable après une question sur
la responsabilité du gouvernement
Effet(s) : envers les défavorisés qu'après une
Assimilation (réponses biaisées dans le question sur l'individualisme
sens de ce qui a été amorcé) économique.

Taille de l’effet : élevée Solution(s) :


Équilibrer les questions évoquant les
différents pôles de ce qu'on veut
Explication(s) :
mesurer
les considérations évoquées sont
pré-activées en mémoire et sont donc
plus facilement accessibles
Fiche 5: formulation équilibrée vs déséquilibrée

Problème : une formulation déséquilibrée Exemple : Schuman et Presser, 1980.


peut influencer la réponse - Pensez-vous qu’une femme devrait
avoir le droit d’avorter au cours des
Effet(s) : premiers de sa grossesse ?
effet d’assimilation vers le pôle représenté Oui : 68%
dans la formulation. - Pensez-vous qu’une femme devrait
pouvoir avorter pendant les premiers
Taille de l’effet : faible mois de sa grossesse si le fœtus est
(apparaît surtout lorsque la formulation malformé ou pensez-vous qu’une
est très suggestive : exemple « pensez- femme ne devrait pas être autorisée à
vous qu’une femme devrait pouvoir retirer la vie à un fœtus ?
avorter pendant les premiers mois de sa Pour avorter : 61,4%
grossesse si le fœtus est malformé ? »)
Solution(s) :
Explication(s) :
• si la formulation est par nature
• effet d'amorçage
suggestive, équilibrer la formulation.
• biais d’acquiescement
Fiche 6: tonalité affective des formulations

Problème : certains mots provoquent des Exemple : Rugg, 1941


réactions affectives qui peuvent influencer -Les USA devraient interdire les
la réponse à la question discours antidémocratiques :
Effet(s) : NON : 46%
Effet de congruence à l'humeur -Les USA devraient autoriser les
(optimisme, acquiescement quand affect discours antidémocratiques :
positif, rejet quand affect négatif) OUI : 25%

Solution(s) :
Taille de l’effet : faible et instable
Eviter d’utiliser des termes qui
évoquent des affects positifs et
Explication(s) : négatifs
Effet de halo (affect positif ou négatif
diffusé sur la réponse à la question)
Fiche 7: les formulations subjectives

Problème : certains termes dans la Exemple : (Loftus, 1994)


question peuvent suggérer une réponse Des participants voient le film d’un
accident routier
Q1: A quelle vitesse roulait le véhicule
Effet(s) : lorsqu’il a heurté le mur ?
Effet d’assimilation par rapport au terme Q2: A quelle vitesse roulait le véhicule
suggéré lorsqu’il s’est fracassé contre le mur ?

Les participants proposent une vitesse


Taille de l’effet : moyen importante avec Q2.

Explication(s) : Solution(s) :
En situation de jugement, le terme - Éviter les termes suggestifs
suggestif peut suggérer un cadre de
référence pour la réponse
Fiche 8: ordre des questions globales et spécifiques

Problème : la réponse à une question Exemple :


spécifique peut exercer une influence sur
la réponse à une question générale Question générale sur le bruit du trafic
entraine des réponses moins sévères
Effet 1 : effet d'exclusion (la réponse à la quand posée après question plus
question générale n’inclue pas la spécifique sur le bruit du trafic
situation décrite dans la question occasionné par les camions
spécifique) quand format similaire et
juxtaposition

Taille de l’effet : élevée

Explication(s) : principe de coopération Solution(s) :


du discours : pas de redondance Placer la question générale avant la
question spécifique
Fiche 8: ordre des questions globales et spécifiques

Problème : la réponse à une question Exemples :


spécifique peut exercer une influence sur
Les répondants se disent moins
la réponse à une question générale
intéressés par la politique après avoir
Effet 2 : effet d'amorçage quand format dû répondre à une série de questions
différent et/ou quelques questions entre difficiles sur des élections passées
Question générale d'opinion envers la
publicité va être plus basée sur
certaines catégories de produit quand
des questions spécifiques sur ces
produits sont posées avant
Taille de l’effet : élevée

Explication(s) : effet d'amorçage (active Solution(s) :


des considérations particulières qui Placer la question générale avant la
influenceront réponse) question spécifique
Fiche 9: ordre des questions

Problème : de manière générale la Exemple : Desrichard & Monteil, 1994.


réponse à une question peut exercer une Q1 : Décrivez une fois où vous avez
influence sur les réponses aux questions commis volontairement une infraction
suivantes au code de la route
Q2 : Etes-vous favorable au respect
Effet(s) : du code de la route ?
-assimilation ou contraste Si Q1 posée avant Q2, les participants
se décrivent comme étant moins
favorables au respect du code de
Taille de l’effet : de nul si les questions
la route.
n’ont vraiment aucun lien, à élevé dans
le cas contraire Solution(s) :
• détecter les questions qui peuvent
s’influencer
Explication(s) :
• contre-balancer l’ordre
-Effet d'amorçage ou d'exclusion
• éviter de les placer côte à côte
Fiche 9: ordre des questions

Problème : de manière générale la Exemple :Schuman & Presser, 1980


réponse à une question peut exercer une Q1 : Pensez-vous qu’une femme
influence sur les réponses aux questions devrait pouvoir avorter légalement si
suivantes elle est mariée et qu’elle ne veut pas
d’autres enfants ?
Effet(s) : Q2 : Pensez-vous qu’une femme
-assimilation ou contraste devrait pouvoir avorter légalement si
elle enceinte d’un fœtus malformé ?
Pourcentage de OUI à Q1 :
Taille de l’effet : de nul si les questions
Ordre Q1 - Q2 : 60,7%.
n’ont vraiment aucun lien, à élevé dans
Ordre Q2 - Q1 : 48,1 %
le cas contraire

Explication(s) :
-Effet d'amorçage ou d'exclusion
Fiche 10: ordre des options de réponses

Problème : l’ordre des questions peut Exemple : Krosnick & Alwin (1987)
exercer une influence (lorsqu’il y a Cocher les 3 caractéristiques les plus
beaucoup d’options proposées) désirables chez un enfant, dans une
liste de 13 qualités.
Variation de l'ordre de présentation.
Effet(s) :
Les caractéristiques ont plus de
-Effet de récence en auditif
chances d'être choisies lorsqu'elles
-Effet de primauté en visuel
sont présentées en premiers

Solution(s) :
Taille de l’effet : faible • Limiter le nombre d’options
• Privilégier les formulations brèves
Explication(s) : • Inciter les participants à relire avant
-Propriété de la MCT de répondre, inciter l’enquêteur à
-Satisficing répéter
-1ères options = référence • Demander une réponse pour
chaque option

Vous aimerez peut-être aussi