LENQUETE PAR QUESTIONNAIRE

Pourquoi utiliser cet outil en valuation ?

L'enqute par questionnaire est un outil dobservation qui permet de quantifier et comparer linformation. Cette information est collecte auprs dun chantillon reprsentatif de la population vise par lvaluation. Un questionnaire est un ensemble de questions construit dans le but dobtenir l'information correspondant aux questions de lvaluation. Les rpondants ne sont pas sollicits pour rpondre directement celles-ci : un bon questionnaire dcline en effet la problmatique de base en questions lmentaires auxquelles le rpondant saura parfaitement rpondre. Les enqutes combinent souvent deux formes de questionnaire, avec une dominante de questions fermes et quelques questions ouvertes, plus riches mais aussi plus difficiles traiter statistiquement.

1.1

Le questionnaire ferm

Dans un questionnaire ferm, les questions imposent au rpondant une forme prcise de rponse et un nombre limit de choix de rponses. Les questionnaires ferms sont utiliss pour obtenir des renseignements factuels, juger d'un accord ou non avec une proposition, connatre la position du rpondant concernant une gamme de jugements, etc.

1.2

Le questionnaire ouvert

Dans un questionnaire ouvert, la personne interroge dveloppe une rponse que l'enquteur prend en note. Dans ce cas, l'enqute par questionnaire ouvert ressemble un entretien individuel de type directif. Une question ouverte laisse la rponse libre dans sa forme et dans sa longueur.

1.3

Quels usages peut-on faire de lenqute par questionnaire en valuation pays ?

Lenqute par questionnaire est loutil qui, dans une valuation pays, permet le mieux de collecter des informations auprs de la population avec possibilit de comparer et quantifier le poids respectif des opinions exprimes. Il convient particulirement pour connatre le degr de satisfaction des bnficiaires finaux. Le questionnaire ferm prsente lavantage de permettre un traitement statistique un cot limit. Il peut en cours de ralisation se rvler inadapt si lvaluateur saperoit que certaines questions ncessitent dtre plus finement analyses. En faisant le point quotidiennement avec les enquteurs, lvaluateur peut dcider dapprofondir certaines questions au cours des entretiens, voire dajouter aux questions des sousquestions permettant une analyse plus fine.

Comment mettre en uvre lenqute par questionnaire ?

Encadr 1 Schma global de la mise en uvre de lenqute par questionnaire

Conditions demploi de loutil Elaboration du questionnaire Prparation de lenqute Ladministration du questionnaire Analyse et interprtation Analyse et interprtation des des rsultats rsultats

Encadr 2 valuation Pour la rdaction des questions

Les

conditions

demploi

de

loutil

en

Une connaissance pralable du contexte de lvaluation et des enjeux du programme pour les bnficiaires. Avoir tous les lments pour couvrir le champ de lenqute.

Disposer dune base dinformations statistiques Pour minimales. llaboration de lchantillon Vrifier laccs physique et logistique des rpondants. Pour la mise en uvre du questionnaire Identifier un partenaire local fiable, capable de mettre disposition les ressources humaines et matrielles. Avoir le temps de raliser toutes les tapes prliminaires de mis au point du questionnaire et de lchantillon sans lesquelles les rsultats risquent dtre dcevants La bonne gestion du temps est un pr-requis de lenqute par questionnaire. Dans le cadre de la mission test de loutil au Bnin, lidentification du partenaire bninois eut lieu un mois et demi avant le lancement des missions de terrain ; une personne prpara larrive de lquipe dvaluation 2 semaines avant, pour finaliser lchantillon, les questionnaires et effectuer la formation des enquteurs.

2.1
2.1.1

Comment laborer le questionnaire ?

Se poser les bonnes questions Quest-ce que je cherche ? Chacune des questions est-elle strictement ncessaire ? Une seule question information? suffira-t-elle pour obtenir cette

La personne interroge sera-t-elle en mesure de rpondre? 3

La personne interroge voudra-t-elle fournir l'information exacte? Structurer et rdiger le questionnaire Cerner le sujet dinvestigation et cibler le questionnaire de faon prcise Prvoir des questions qui se recoupent pour vrifier la fiabilit et la cohrence des questions Formuler des questions claires pour les rpondants, concises, univoques, neutres, prcises, et impliquant la personne interroge

2.1.2

2.2
2.2.1

Comment prparer lenqute ?

Construire lchantillon

Le choix de la mthode est lie la dfinition de la population qui constituera le public-cible. Cette dfinition dpend : de lobjet de lenqute, des hypothses de travail choisies, de la nature des documents disponibles, des contraintes de lvaluation, du degr dhomognit de la population, et de ltendue du territoire de lenqute.

Diffrentes formes de construction de lchantillon peuvent donc tre dveloppes : chantillon simple, stratifi, sondage par grappes, par quotas, en boule de neige, etc. Mthode dchantillonnage utilise pour ladministration des questionnaires auprs des mnages de la mission test au Bnin : La mthode est celle de litinraire qui permet lenquteur didentifier les points d'enqute en dnombrant les mnages en longeant les rues, de les enregistrer dans le bordereau de dnombrement des mnages, afin de procder la slection des mnage-chantillons et dinterviewer le chef de mnage et/ou son pouse. Le dnombrement doit tre entam partir de la maison du chef de quartier/village et en voluant dans le sens des 4

aiguilles d'une montre, segment par segment, de manire balayer tout le quartier/village et atteindre le nombre de mnages enquter. Le numro dordre du premier mnage enquter est le numro alatoire fourni par le centre denqute. Les numros des autres points d'enqute seront obtenus en progressant avec le pas de tirage fourni galement par le centre denqute. Par exemple : si le premier numro fourni est 3 et si le pas de tirage est gal 5, cest le troisime mnage de la liste du bordereau qui sera enqut. Les autres mnages enquter devront porter les numro 8, 13, 18, 23, .etc.

2.3

Tester le questionnaire

Il sagit de vrifier la clart des questions, la facilit rpondre, la dure et la fluidit du questionnaire, les problmes que peuvent rencontrer les enquteurs, etc.

2.4

Comment administrer le questionnaire ?

En pays dvelopps : les enqutes par tlphone, mail ou Internet sont de plus en plus pratiques. En pays en dveloppement : l'enqute en face face reste le moyen le plus sr d'obtenir les informations recherches. Il est tout de mme possible d'utiliser les autres moyens en fonction des acteurs (agents locaux de dveloppement par exemple).

Ladministration du questionnaire dpend beaucoup du contexte :

Rappelons que pour des raisons linguistique (surtout auprs des bnficiaires finaux) et de temps de prparation, il est vivement conseill aux valuateurs davoir recours un partenaire local capable de mettre disposition les ressources humaines enquteurs, statisticiens, dmographes, etc. - et les ressources matrielles - transport, informatique, donnes dmographiques, etc. - dont lvaluateur ne peut disposer sur place.

2.5

Comment analyser et interprter les rsultats ?

Codage des questionnaire : attribution dun code chaque rponse en vue de leur inscription sur un support adapt un traitement informatique. Les rponses sont regroupes en catgories pertinentes. Comptage des rsultats et corrlations : toujours se rfrer au cadre dfini par les hypothses de travail Analyse des rsultats : dans les valuations, des traitements simples suffisent le plus souvent, mme si l'tablissement de corrlations entre des lments enrichit l'analyse. Lexploitation des questionnaires ferms risque de ne pas produire les rsultats attendus. Lors de la mission test au Bnin, bien que le partenaire local ait t quip pour ce type de traitements statistiques, lexploitation a t dcevante et moins complte que si elle avait t directement dirige par lvaluateur.

Quelles sont les ressources ncessaires ?

Encadr 3 Les ressources ncessaires En temps La ralisation d'une enqute par questionnaire exige une prparation minutieuse et un temps de ralisation proportionnel limportance du questionnaire, la taille de l'chantillon et aux difficults de terrain. La construction du questionnaire destination de groupes prcis ncessite de disposer de suffisamment dinformations et dhypothses, ce qui implique que lenqute ne peut se drouler en dbut dvaluation. Humaines Sil existe des spcificits culturelles ou dialectales, recruter les enquteurs localement. Sappuyer sur des organisations 6

spcialises. Organiser une ou plusieurs journes de formation-encadrement des enquteurs. Financires Prvoir la rmunration des enquteurs et les cots de logistique.

Quels sont les avantages et les limites de loutil ?

Encadr 4 Les avantages et les limites Avantages Information quantifie et fiable Utile pour mesurer le changement et faire des comparaisons entre opinions Permet de consulter un grand nombre de bnficiaires finaux Permet de travailler sur un "modle rduit" de la population cible Limites Permet de mesurer les rsultats dun programme ou dune politique

Demande un temps de ralisation qui excde la dure moyenne dune mission dvaluation Ncessite des ressources importantes et une logistique lourde fournies par un partenaire local fiable Ncessite de disposer de donnes sur la situation de dpart Mobilise une quipe de travail importante pour ladministration du questionnaire et le traitement des rsultats Difficults ventuelles l'chantillon reprsentatif constituer

Ne peut fournir qu'une image simplifie de la ralit 7

Check-lists
La mise en uvre dun questionnaire ferm sur un chantillon reprsentatif a-t-elle t justifie par le besoin dindicateurs statistiques ? Lenqute a-t-elle reprsentatif ? t mene auprs dun chantillon

Check-list destine aux valuateurs

Les questions poses et les rponses proposes taient-elles claires et simples ? La longueur du questionnaire tait-elle adapte ? Le questionnaire comportait-il des questions croises ? Le questionnaire a-t-il t test ? Les techniques d'administration du questionnaire utilis taient-elles adaptes au type de public enqut (face face, tlphone, etc.) ? A-t-on mis en place un mcanisme de suivi et de contrle des enquteurs ? A-t-on organis des formations ou des runions d'encadrement ? Les enquteurs taient-ils indpendants politique/ du programme valu(e) ? Le nombre de reprsentatif ? rpondants tait-il vis--vis pour de la

suffisant

tre

La prcision des rsultats quantitatifs attendus tait-elle suffisante pour leur utilisation dans lvaluation ? Les rsultats taient-ils prsents et prciss pour les diverses catgories d'acteurs et de bnficiaires ? Les rsultats ont-ils t articuls avec les autres outils d'information et d'analyses utiliss par les valuateurs ?

Check-list destine aux gestionnaires Lutilisation de loutil est-elle clairement justifie ? Lenqute a-t-elle reprsentatif ? t mene auprs dun chantillon

Le questionnaire a-t-il t test ? Lexploitation du questionnaire a-t-elle permis dobtenir les indicateurs recherchs avec une prcision suffisante ? Les rsultats ont-ils t articuls avec les autres outils d'information et d'analyses utiliss par les valuateurs ?