Dossier de psychométrie - plan

30 mars 2023

1 I. Introduction
1.1 Motivation et intérêt de l’étude (2 pages)
Pourquoi ce sujet ? Votre motivation.

Données (statistiques, études, voire médias) pour décrire le phénomène étu-

dié, son ampleur dans la société, son évolution, l’intérêt qui lui est porté. . . ?

1.2 Revue de la littérature (4-5 pages)

Qu’en dit la littérature scientifique ?

Focus particulier sur les outils et méthodes utilisées dans la littérature pour
explorer le phénomène.
— résumé de ce que l’on sait
— zoom sur d’éventuels débats / zones d’ombres
En conclusion :
— que se propose d’apporter votre étude par rapport à ce que l’on sait déjà ?
— quelles sont vos hypothèses de travail ?

2 Les entretiens
Objectif des entretiens : mieux comprendre le phénomène et étayer la construc-
tion du questionnaire.

2.1 Présentation de la méthode d’entretien (1-2 pages)

2.1.1 Participants
— Quel public cible ?
— En quoi les participants sont-ils représentatifs de la population cible du
questionnaire ?
— Quels profils manquent / auraient été enquêtés si l’étude avait été pro-
longée

1
Détail de la stratégie de recrutement :
— quels canaux utilisés (pourquoi ceux-là / retour sur leur efficacité) ?
— quels messages de présentation de l’objet de l’étude ? (Pourquoi ce contenu ?)

2.1.2 Dispositif matériel

Mode de passation : quel dispositif matériel (lieu, moment, enregistrement,
etc) ?

Pourquoi ces choix ? Quels biais en attendre ?

2.1.3 La grille d’entretien

La grille d’entretien :
— thèmes : principaux souhaités / secondaires attendus
— organisation de la grille : pourquoi dans cet ordre ?

2.2 Analyse des résultats des entretiens

2.2.1 Analyse du dispositif pour chaque entretien (1-2 page par en-
tretien)
— Le dispositif matériel était-il adapté ? Quels axes d’amélioration pos-
sibles ?
— Retour analytique sur l’interaction avec le ou la participant-e. Quels axes
d’amélioration possibles ?
— La grille d’entretien : suivie ? Quelles adaptations nécessaires sur le ter-
rain ? Des thèmes « surprise » ?

2.2.2 Analyse globale de contenu (2-3 pages)

— Connaissances acquises sur les thèmes abordés
— Résultats communs
— Différences entre participants
— À quel point cela conforte-t-il / fait évoluer vos hypothèses de travail ?
Quels enseignements en tirer pour la construction du questionnaire ?

3 Le questionnaire
3.1 Contenu (1-2 pages)
Explication des choix faits lors de la construction du questionnaire + des-
cription du questionnaire.
— choix du nombre de questions / thèmes à aborder
— le test (existant adapté / original) qui sera évalué à l’aide des outils psy-
chométriques : lequel / pourquoi celui-là ? Explication des choix d’adap-
tation / de construction

2
 — objectif de chaque question / item : à quoi sert-elle au regard des hy-
pothèses de travail ? (item de test, question attitudinale, question de
contrôle). Pourquoi les choix de formulation des items ?

3.2 Dispositif de passation (1-2 pages)

3.2.1 Répondants
Quel public cible ? Quelle méthode de recrutement (ses objectifs / ses biais
et limites / son efficacité).

L’échantillon enquêté est-il représentatif ? Quels sont ses biais ?

Quelques statistiques descriptives sur l’échantillon (par exemple : nombre

d’hommes / de femmes, âge des répondants + toute autre caractéristique per-
tinente au regard du sujet d’étude).

3.2.2 Matériel et procédure

Quel dispositif matériel de passation (en ligne / sur papier) ? Quels biais
associés ? Quels avantages ?

Dates de passation, nombre de participants : décrire la passation du ques-

tionnaire.

4 Analyse du questionnaire
4.1 Résultats (au moins 5 pages)
NB. Ici le nombre de pages peut être plus important selon la richesse des
choses à dire, le retour sur la littérature, le nombre de tableaux et de gra-
phiques. . .
Qu’enseigne le questionnaire sur le phénomène étudié ?

— A quoi ressemblent les répondants ?

— Quels sont leurs attitudes/traits ?
— Sont-ils semblables ou différents ?
Cela conforte-t-il ou non les hypothèses de travail ? Cela fait-il écho ou non
aux résultats déjà publiés dans la littérature ? Cela ouvre-t-il de nouvelles pistes
de réflexion ?
Outils à utiliser
— Statistiques descriptives (tableaux avec effectifs et pourcentages + gra-
phiques si besoin, pour les échelles notamment)
— caractéristiques des répondants
— items des échelles (+ graphique présentant les scores sur tous les items
si cela apporte quelque chose)

3
 — score obtenu à la (ou les) échelle(s) utilisée(s)
— autres questions du questionnaire
— Tableaux de contingence, coefficients de corrélation et tests statistiques
le cas échéant pour étudier l’association entre variables / score obtenus
à l’échelle vs. autres caractéristiques. . .
NB. Pour le calcul des scores aux échelles
— ne pas oublier d’inverser les items si nécessaire
— utiliser en priorité les règles de calcul de score des échelles que vous avez
adaptées
— si échelle composée d’items de nature différente (binaire vs Likert, Li-
kert avec un nombre de cran différent) : solution simple = binariser les
réponses

4.2 Validation psychométrique du questionnaire (3-4 pages)

NB. Le nombre de pages est d’autant plus indicatif ici que le nombre d’indi-
cateurs à calculer est limité et que les interprétations sont très directes. Un seul
tableau demandé pour la mesure de la sensibilité.
Objectif : apporter une réponse aux questions suivantes : le questionnaire
construit était-il un bon outil ? Quels sont ses points forts ? Quelles sont ses
limites ?

Dans cette partie vous pouvez vous concentrer sur la partie « test créé ou
adapté » du questionnaire, mais il peut être intéressant également de regarder
les autres questions du questionnaire. On a tendance à être moins rigoureux sur
la validation des questions attitudinales et de contrôle, et c’est une erreur.
NB. Questions imposées dans le questionnaire
1. question directe sur le trait mesuré
2. question permettant de tester la validité de construct
3. question sur la capacité de l’échelle à mesurer correctement le trait mesuré

4.2.1 Sensibilité
Tableau de contingence (voir pages 49 et suivantes du support de cours)
croisant les scores et les scores dérivés de la question Q1 ci-dessus.
Calcul des indicateurs présents sur le support de cours
Votre échelle est-elle de bonne qualité au regard de ces indicateurs ?
Au regard du trait que vous souhaitez mesurer et de l’objectif d’une telle
échelle, faudrait-il plutôt privilégier une bonne sensibilité ou une bonne spécifi-
cité ?

4.2.2 Fidélité
Coefficient du split-half (après avoir tiré au sort les items à mettre dans
chaque groupe d’items).
Coefficient alpha de Cronbach (si échelle Likert) ou KR20 (si échelle binaire).

4
 Quelle est la performance de votre échelle ?
Quelle performance avec/sans les items que vous avez modifié ?

4.2.3 Validité
1. face validity en utilisant comme référence la question Q3 rajoutée au ques-
tionnaire (analyse simple des réponses)
2. validité de construct (corrélation entre le trait mesuré par le score de
l’échelle et la question Q2 rajoutée au questionnaire)
3. validité critérielle (corrélation entre le trait mesuré par le score de l’échelle
et la question Q3 rajoutée au questionnaire)
Analyse : quelle validité du questionnaire ?

4.2.4 Étalonnage
Sur la population des répondants, calculer les déciles des scores de l’échelle.
Interpréter à quoi cela sert + en quoi les répondants permettent de réaliser un
étalonnage correct ou non.
Vous pouvez utiliser d’autres échelles d’étalonnage vues en cours / sur le
support de cours.

5 Conclusion (1 à 2 pages)
Retour sur la question initiale, les hypothèses de travail et les grands résul-
tats obtenus.

Retour sur le protocole d’étude : était-il adapté à la question posée ?

Ouverture
— sur le sujet
— sur d’éventuels protocoles futurs pour poursuivre / améliorer l’étude
Vous pouvez choisir d’insérer en plus une analyse personnelle de ce que
le travail vous a apporté / les ouvertures ; ces éléments peuvent ne pas être
appréciés pareil par tous les membres du groupe de travail.

6 Références
Veiller à citer toutes les sources et à les présenter en adoptant un style de
présentation uniforme (par exemple le style de l’American Psychological Asso-
ciation ? cliquer ici pour sa description).

5
7 Annexes
7.1 Transcription des entretiens
7.2 Tableaux / graphiques annexes
7.3 Autres annexes pertinentes