Académique Documents
Professionnel Documents
Culture Documents
Reçu le :
6 octobre 2016
Accepté le :
Évaluation du stress : remplacer le
11 mars 2017
MSP 25 par une échelle visuelle analogique
informatisée (EVA) ? Expérimentation en
milieu industriel. Étude transversale
multicentrique réalisée sur un échantillon de
1986 salariés d’une entreprise automobile
er
entre le 1 avril 2016 et le 30 juillet 2016
Stress evaluation: To replace the PSM25 test by a
computerized Visual Analogue Scale (VAS)? Experimentation
in an industrial environment. Multicenter transversal study
performed on a 1986 sample of employees of an automotive
company between 1st April and 30th July 2016
P. Laurenta,*, S. Fofanab, H. Leloixa, N. Brosseta, I. Grotzingera
Disponible en ligne sur
a Service médical du groupe PSA, 75, avenue de la Grande-Armée, 75000 Paris, France
ScienceDirect b
Département MIASHS, université de Lille 3, domaine universitaire du Pont-de-Bois, 59650
www.sciencedirect.com Villeneuve d’Ascq, France
Summary Résumé
Purpose of study. Through a study of 1986 employees of the PSA Objectifs. Au travers d’une étude sur 1986 salariés du groupe PSA
Group, our objective is to evaluate the possibility of replacing the notre objectif est d’évaluer la possibilité de remplacer le question-
questionnaire MSP25 by a visual analogue scale (VAS) in Occupa- naire MSP25 par une échelle visuelle analogique (EVA) en santé au
tional Health. travail.
Materials and methods. Both MSP25 and VAS scores for each Matériels et méthodes. Les scores au MSP25 et à l’EVA de chaque
employee were collected between 1st April and 30th July 2016, by 23 salarié sont recueillis entre le 1er avril et le 30 juillet 2016, par
physicians in 20 occupational health services. The study focuses on 23 médecins dans 20 centres. L’étude porte sur l’évaluation de la
the assessment of the predictive performance of VAS compared to the performance prédictive de L’EVA par rapport aux résultats du MSP25
results of the MSP25 (sensitivity and specificity). Statistical analyses (Sensibilité et spécificité). Les analyses statistiques ont été effectuées
were performed using Excel 2013, SAS Enterprise Guide 7.11 and en utilisant Excel 2013, SAS Enterprise guide 7.11 et Gretl 1.9.4.
Gretl 1.9.4. Résultats. L’étude de l’échantillon d’apprentissage conduit à l’uti-
Results. The study of learning sample led to the use of an optimal lisation d’un seuil optimal à 61. En appliquant ce seuil à l’échantillon
threshold value of 61; applying this value to the validation sample de validation on obtient un bon couple sensibilité, spécificité
permit us to obtain a good couple sensitivity, specificity (79.7%, (79,7 %, 83,7 %). On note également une très forte Valeur Prédictive
83.7%). There is also a very strong Negative Predictive Value 97.9%, Négative à 97,9 %, cependant la Valeur Prédictive Positive est assez
* Auteur correspondant.
e-mail : pascal.laurent3@mpsa.com (P. Laurent).
437
P. Laurent et al. Archives des Maladies Professionnelles et de l’Environnement 2017;78:437-441
however, the Positive Predictive Value is quite low at 29.9%. Overall faible à 29,9 %. Globalement 83 % des salariés sont biens classés par
83% of employees are correctly classified by VAS. l’EVA.
Discussion. An analysis, by logistic regression, of employees who Discussion. Une analyse, par régression logistique, des salariés qui
are incorrectly classified highlights an age effect, a physician effect sont mal classés met en évidence un effet âge, médecin et catégorie
and a socio-professional category effect. Protocol compliance by socioprofessionnelle. Le respect du protocole par les médecins et les
physicians and employees then appears as essential to avoid varia- salariés apparaı̂t alors comme un élément essentiel pour éviter les
bility. Furthermore, biases can be caused by the computer interface variabilités. À cela s’ajoute des biais occasionnés par l’interface
used to measure the VAS score, problem linked to the use of the informatique utilisée pour mesurer le score EVA. Enfin la question
computer mouse or the scale and cursor width. Finally, the question sur l’interprétation même que chaque salarié a du mot « stress » n’est
on interpretation that each employee has of the word ‘‘stress’’ cannot pas à écarter.
be ruled out. Conclusion. L’EVA présente de nombreux atouts pour être un outil
Conclusion. The VAS has many advantages to be a stress assess- d’évaluation du stress adapté à la pratique des médecins du travail.
ment tool adapted to occupational physicians practice. However, in Cependant face aux difficultés rencontrées pour sa mise en œuvre,
front of difficulties highlighted, it might not, for now, be used instead elle ne pourrait être utilisée en remplacement du questionnaire
of MSP25 questionnaire but used as a complementary tool for MSP25 dans la pratique actuelle, mais constitue un outil de veille
screening. performant de dépistage utilisé en complément du MSP25.
ß 2017 Elsevier Masson SAS. All rights reserved. ß 2017 Elsevier Masson SAS. Tous droits réservés.
438
Évaluation du stress
Pearson [11] ou non linéaire en utilisant le coefficient Rho de Résultats des analyses
Spearman [11]. Une fois ces relations établies, nous voulons
La vérification des corrélations est comme suit :
évaluer la performance prédictive de l’EVA par rapport aux
le coefficient de corrélation de Pearson est égal
résultats du MSP25. Cependant, en l’absence de consensus
à + 0,6530045, ce coefficient est significatif, donc, pour
concernant le seuil de positivité de l’EVA à utiliser pour définir
un risque de 5 %, il existe une relation linéaire entre le score
les niveaux de stress, nous devons le déterminer. Ce seuil
EVA et le score MSP25 ;
devrait nous permettre de nous rapprocher le plus possible
le Rho de Spearman est égal à + 0,6654176, ce coefficient
des résultats obtenus par le MSP25. Il est obtenu en maxi-
est significatif, donc, pour un niveau de risque de 5 %, il
misant simultanément la sensibilité et la spécificité de l’EVA
existe une relation non linéaire entre le score EVA et le
grâce à la courbe ROC [4] et à l’indice de Youden [5,6]
score MSP25.
(sensibilité + spécificité) 1. Pratiquement, nous avons extrait
Nous avons besoin de définir qui est stressé et qui ne l’est pas
aléatoirement un échantillon des deux tiers de la population
avec l’EVA, puisque cette donnée est validée pour le score
totale (1311 salariés) qui constitue l’échantillon d’apprentis-
MSP25. Le seuil optimal de l’EVA stress obtenu à partir de
sage sur lequel nous avons déterminé le seuil optimal de
l’échantillon d’apprentissage est de 61 (Fig. 1).
positivité de l’EVA. Ce seuil a été ensuite testé en l’appliquant
Appliqué à l’échantillon de validation, nous observons une
sur la population restante (675 salariés) qui constitue l’échan-
bonne stabilité de la sensibilité, de la spécificité et des valeurs
tillon de validation.
prédictives positives et négatives (Fig. 1). Considérer le seuil de
l’EVA à 61 apparaı̂t comme un choix idéal.
Logiciels statistiques L’étude des rapports de vraisemblance nous montre que le
L’analyse des données a été effectuée sur les logiciels : rapport de vraisemblance positif (RV+) est à 4,7 et le rapport
SAS Enterprise guide (version 7.11); de vraisemblance négatif (RV ) est à 0,27. Or, pour que le
Gretl (version 1.9.4) ; diagnostic d’un test soit confirmé, il est demandé que le RV+
Excel (version 2013). soit supérieur à 5 et le RV soit inférieur à 0,1. L’utilisation de
l’EVA en lieu et place du MSP25 ne nous permettra pas de
confirmer le diagnostic. Le taux de salariés mal classés par
Résultats l’EVA s’élève à 17 %. Nous nous sommes intéressés aux
facteurs favorisants les erreurs de classification.
Données descriptives générales Le risque d’être mal ou bien classé a été étudié par régression
Deux mille dix questionnaires ont été colligés dont 1986 exploi- logistique en intégrant le sexe, l’âge, la CSP et le médecin
tables parce que complets. Il s’agit d’une population essentiel- ayant fait passer le questionnaire comme variables explica-
lement masculine avec 84 % d’hommes et 16 % de femmes, tives (Tableau 1). On note un effet âge, médecin et CSP. En
d’âge moyen 45 ans (+ ou 8 ans). Il n’y a pas de différence d’âge effet, les salariés qui ont entre 35 et 44 ans ont plus de
entre hommes et femmes. Nous enregistrons 43 % d’ingénieurs résultats incohérents que les autres. Les médecins 4, 5 et
et cadres, 36 % d’ouvriers et 21 % d’employés. 13 enregistrent des taux de mal classées plus élevés que les
[(Figure_1)TD$IG]
439
P. Laurent et al. Archives des Maladies Professionnelles et de l’Environnement 2017;78:437-441
Tableau 1
Facteurs de mauvais classement par l’EVA (régression logistique).
Variables Effectifs OR (IC OR) p
Âge
Autres 439 1
***
Entre 35 ans et 44 ans 236 2,11 (1,4–3,2)
Médecin
Autres 537 1
**
Médecin 4 40 2,43 (1,16–5)
***
Médecin 5 38 3 (1,37–6,8)
***
Médecin 13 60 2,9 (1,45–5,7)
CSP
Autres 424 1
***
Ouvrier 251 1,97 (1,23–3,16)
Age : tranches d’âges; médecin : médecins participants au recueil de données ; CSP: catégories socio-professionnelles.
autres médecins. Enfin, les ouvriers sont ceux qui ont ten- Toutes les études présentes dans la littérature utilisent une
dance à produire un plus fort taux de réponses discordantes. échelle d’EVA graduée de 0 à 100 mm. Nous avons donc
On peut supposer que la question posée n’est pas comprise de comparé nos résultats à ceux de la littérature. Une majorité
la même façon par tous les répondants. d’études [8–10] fixe le seuil EVA à 60 mm. Seule l’étude [7] de
F. X. Lesage et S. Berjot conseille l’utilisation d’un seuil à
Discussion 70 mm. Nos résultats sont donc proches de ceux retrouvés
dans la littérature.
Discussion sur la performance prédictive de l’EVA
sur l’échantillon de validation : facteurs techniques Critiques et perspectives de l’EVA
et facteurs liés à l’interface
Il ressort des différents travaux menés sur l’utilisation de
Les facteurs liés à l’utilisation de l’interface informatique sont l’EVA que le choix du seuil varie d’une étude à une autre.
comme suit : Plusieurs d’entre elles font mention du seuil à 60 mm, mais ce
sur l’interface actuelle, l’EVA est présentée de la façon seuil n’est pas consensuellement fixé. Il n’y aucune donnée
suivante au salarié (Fig. 2) ; dans la littérature concernant la reproductibilité de l’EVA dans
la largeur de l’échelle sur l’interface est inférieure à le cadre de l’évaluation du stress sur des populations diffé-
100 mm et varie en fonction de la taille de l’écran rentes.
d’ordinateur utilisée. La largeur du curseur est trop La performance de l’EVA pourrait être améliorée en prenant
importante et varie également en fonction de la taille de en compte les facteurs de biais que nous venons de citer :
l’écran utilisé. Ceci entraı̂ne une incertitude de la valeur du en considérant une échelle de taille uniforme de 100 mm,
stress mesurée ; un curseur de largeur fixe et le plus fin possible, privilégier
de plus, on constate plusieurs facteurs techniques l’échelle physique ?
(utilisation de la souris, déplacement du curseur) et des en veillant au respect strict du protocole par tous les
facteurs liés au mode de validation (possibilité de valider la professionnels de santé ;
question sans bouger le curseur ou déplacement inappro- en veillant à ce que le curseur soit obligatoirement déplacé
prié du curseur) qui entraı̂nent des biais de mesure. avant de pouvoir passer à l’étape suivante ;
en formulant la question de telle façon qu’elle ne
Comparaison avec la littérature
puisse donner lieu qu’à un minimum d’interprétation
Très peu d’études ont été menées sur l’utilisation de l’EVA personnelle.
dans le cadre de l’évaluation du stress en milieu professionnel.
[(Figure_2)TD$IG]
440
Évaluation du stress
441