Laboratrio de Psicologia Experimental Departamento de Psicologia FUNREI Disciplina: Mtodo de Pesquisa Quantitativa

TEXTO 11: COMO ELABORAR UM QUESTIONRIO.

Autora: Prof. Marina Bandeira, Ph.D.

O Texto anterior programado para este curso, que trata dos Mtodos de Coleta de Dados de uma pesquisa, apresentou dentre os diversos mtodos possveis de coletar dados, o uso do questionrio. O texto que se segue servir para aprofundar seus conhecimentos sobre o questionrio como mtodo de coleta de dados em uma pesquisa. Este texto consiste em um captulo de um livro sobre Avaliao Psicolgica, que uma coletnia organizada pelo Dr. Pasquali do Instituto de Psicologia da UnB, onde h um Laboratrio de Avaliao Psicolgica. Neste texto voc aprender os princpios bsicos que devem nortear a elaborao de um questionrio visando colher dados em uma pesquisa. A elaborao de um questionrio para coleta de dados s aconselhvel se no existir nenhuma escala ou teste psicolgico j validado para avaliar o conceito que voc pretende medir. Por exemplo, se voc vai medir o grau de depresso dos sujeitos de uma pesquisa, voc dever utilizar testes conhecidos e validados deste construto de depresso, como por exemplo, o Inventrio de Beck. O uso dos mesmos instrumentos pelos diversos pesquisadores da rea serve para aumentar a comparabilidade dos resultados das diversas pesquisas. Caso contrrio, podemos obter resultados divergentes de outros pesquisadores devido ao instrumento de medida diferente que utilizamos. Entretanto, muitas vezes voc quer colher dados para os quais no existe nenhum instrumento de medida j desenvolvido. Neste caso, voc precisar desenvolver um questionrio.

Laboratrio de Psicologia Am biental S rie : Planejamento de Pesquisa nas Cincias Sociais, 2003, N 01

Universidade de Braslia Instituto de Psicologia

Como Elaborar um Questionrio

Hartmut Gnther
So trs os caminhos principais para compreender o comportamento humano no contexto das cincias sociais empricas: (1) observar o comportamento que ocorre naturalmente no mbito real; (2) criar situaes artificiais e observar o comportamento ante tarefas definidas para essas situaes; (3) perguntar s pessoas sobre o que fazem (fizeram) e pensam (pensaram). Cada uma das trs famlias de tcnicas para conduzir estudos empricos observao, experimento e survey apresenta vantagens e obstante as variaes dentro de cada uma destas trs grandes reas, podemos afirmar que o ponto forte da observao o realismo da situao estudada; que o experimento possibilita tanto a randomizao de caractersticas das pessoas estudadas quanto inferncias causais; e que o levantamento de dados por amostragem, ou survey, assegura melhor representatividade e permite generalizao para uma populao mais ampla. O presente captulo trata da elaborao de um

Figura 1: Estgios principais de um survey (Schuman & Kalton, 1985, p. 641) desvantagens distintas (Kish, 1987). Tais vantagens esto ligadas qualidade e utilizao dos dados obtidos, a serem consideradas pelo pesquisador quando escolher a mais apropriada para seu objetivo de pesquisa. No
O autor professor titular no Departamento de Psicologia Social e do Trabalho, Instituto de Psicologia, Universidade de Braslia. Email para contato: hartmut@unb.br. Uma verso anterior deste texto foi publicado como captulo do livro editado por L. Pasquali, (1999). Instrumentos psicolgicos: manual prtico de elaborao. Braslia, DF: UnB, LabPAM/IBAPP. A S rie : Planejamento de Pesquisa nas Cincias Sociais publicado pelo Laboratrio de Psicologia Ambiental da UnB. L Como citar Gnther, H. (2003). Como Elaborar um Questionrio (Srie: Planejamento de Pesquisa nas Cincias Sociais, N 01). Braslia, DF: UnB, Laboratrio de Psicologia Ambiental. URL: www.psiambiental.net/pdf/01Questionario.pdf.

questionrio, instrumento principal para o levantamento de dados por amostragem. Fink & Kosecoff (1985) definem survey, termo ingls geralmente traduzido como levantamento de dados, como mtodo para coletar informao de pessoas acerca de suas idias, sentimentos, planos, crenas, bem como origem social, educacional e financeira (p. 13). Importante apontar que levantamento de dados traduz, apenas, o termo survey. Como dados tambm so levantados atravs de observaes, de experimentos, de busca em arquivos, alm da interao perguntaresposta, ser utilizado o termo survey neste captulo. O segundo ponto a observar que, embora a qualificao por amostragem seja necessria para que os resultados de um survey possam ser generalizados para uma populao maior, no entraremos em detalhes sobre a questo, concentrando o captulo na construo de um questionrio (vide nota de rodap 1). 1

Hartmut Gnther
conforme a definio do objetivo, deve-se diferenciar conceitualmente (a) avaliao de algo existente e (b) levantamento de necessidades de algo inexistente, alm de distinguir entre existncia ou falta de algum objeto externo ao indivduo e de um estado de esprito interno. Embora objetivos e conceitos no sejam mutuamente excludentes, podendo at ser tratados numa mesma pesquisa, no faltam exemplos de confuso entre si. Num segundo momento, o objetivo do estudo determina as perguntas concretas a serem apresentadas (i., os itens), alm de existir uma relao recproca entre conceitos e itens. Dependendo dos conceitos a serem pesquisados, o contedo das perguntas ou itens varia. Igualmente, a possibilidade de fazer certas perguntas (mais facilmente) a determinadas pessoas (amostra) faz com que um ou outro conceito possa ser explorado numa dada pesquisa. Finalmente, os conceitos subjacentes e, especialmente, o contedo dos itens, determinam o instrumento e a maneira da sua apresentao.
POPULAO-ALVO - AMOSTRA

O instrumento utilizado no survey, o questionrio, pode ser definido como um conjunto de perguntas sobre um determinado tpico que no testa a habilidade do respondente, mas mede sua opinio, seus interesses, aspectos de personalidade e informao biogrfica (Yaremko, Harari, Harrison & Lynn, 1986, p. 186). Observa-se que a maneira de apresentar o conjunto de perguntas no faz parte da definio. O questionrio pode ser administrado em interao pessoal em forma de entrevista individual ou por telefone; e pode ser auto-aplicvel aps envio por correio ou em grupos. Nas definies de survey e questionrio est implcita sua aplicabilidade s mais diversas reas das cincias sociais. Trataremos do desenvolvimento de um instrumento para survey em cinco sees. A princpio, instrumento e questionrio so considerados sinnimos. A primeira seo lidar com as bases conceituais e populacionais de um questionrio. A segunda tratar do contexto social da aplicao do instrumento. A seguir apresenta-se a estrutura lgica do instrumento; e na quarta seo, os elementos do instrumento, i., questes e itens. Na quinta seo apontam-se diferenas nos instrumentos, conforme a maneira de sua aplicao: entrevista individual, pelo telefone, por correio convencional ou eletrnico, ou em grupos.

BASE CONCEITUAL E POPULACIONAL DO QUESTIONRIO

Na elaborao de um questionrio para um survey, deve-se partir da seguinte reflexo: qual o objetivo da pesquisa em termos dos conceitos a serem pesquisados e da populao-alvo? Utilizando-se como ponto de partida as consideraes de Schuman & Kalton (1985), sumariadas na Figura 1, verifica-se que os objetivos de uma pesquisa levam necessariamente relao conceito/ item e relao populao-alvo/amostra. Os dois binmios so correspondentes: item e amostra constituem a parte prtica dos termos abstratos conceito e populao, respectivamente. No desenvolvimento precisam ser tratados paralelamente, i., ao determinar os itens em funo dos conceitos subjacentes h que se levar em conta o binmio populao-alvo/amostra, da mesma maneira que a determinao da amostra a partir de uma populao-alvo exige considerao do binmio conceito/item. Imaginemos uma pesquisa tipo survey com o objetivo de conhecer opes de lazer (conceito) entre jovens (populao-alvo) de uma cidade. Lembramos, inicialmente, que os objetivos podem ser muito diferentes. Por exemplo: (a) avaliar as opes existentes (esporte, teatros, cinema, bares, clubes, etc.); (b) levantar a necessidade de opes novas e/ou adicionais; ou estudar, entre os jovens, o bem-estar psicolgico relacionado s opes de lazer disponveis.
CONCEITO - ITENS

No apenas o objetivo da pesquisa que determina a forma do instrumento via conceitos e itens. Dependendo do objetivo, a populao-alvo pode ser constituda, no nosso exemplo, por todos os jovens da cidade. Ou por determinados subgrupos, como crianas, meninos, meninas ou adolescentes. Dependendo do objetivo da pesquisa e da populao-alvo (especialmente do seu tamanho e da sua acessibilidade), definir-se-o diferentes tipos de amostra. Se a populao-alvo for constituda por todos' os jovens da cidade, necessrio que os subgrupos relevantes para o estudo sejam adequadamente representados na amostra. No caso da populao ser constituda por um determinado grupo - por exemplo, meninas adolescentes - o nmero e a maneira de selecionar os participantes do estudo dentro do grupo sofreria modificao1. Embutidas na seleo da populao-alvo e da amostra esto as caractersticas da amostra: nvel educacional, idade, gnero. Apesar do fato de que a determinao destas caractersticas (p. ex., percentual de meninas alfabetizadas com 12 anos de idade) pode ser, por si s, objetivo de um survey, estimativas - embora vagas - sobre as caractersticas so necessrias ao se tomarem decises sobre a maneira de administrar um instrumento (p. ex., uso de instrumento auto-aplicvel implica em populao-alvo alfabetizada).
RECIPROCIDADE ENTRE CONCEITO E POPULAO-ALVO

Sumariando, o objetivo de uma pesquisa determina a forma do instrumento, a maneira da sua aplicao por

O objetivo do estudo determinar os conceitos a serem investigados num dado survey. No presente exemplo, e

A questo da relao entre a populao alvo e a amostra dos participantes assunto de livros especializados sobre amostragem. O tema no ser tratado neste texto, uma vez que uma introduo detalhada fornecida por Kish (1965). A maioria dos textos de metodologia da pesquisa social inclui captulos sobre amostragem (por exemplo, Aday, 1989; Babbie, 1992; Frankel, 1983; Judd, Smith & Kidder, 1992; Sudman, 1983). Pode-se sugerir, ainda, Henry (1990, 1998) ou Williams (1978), dentre muitas outras fontes.

Como Elaborar um Questionrio

meio de conceitos e itens, da populao-alvo idealizada e da amostra. Verifica-se a seguinte interdependncia entre a elaborao de um instrumento e a estratgia de sua aplicao: (1) o grau de complexidade dos conceitos determina nmero de itens e forma de apresentao deles; (2) existe relao recproca entre as caractersticas da populao-alvo e a complexidade dos conceitos a serem investigados. Ambos determinam a maneira de transformao dos conceitos em itens (perguntas) e sua administrao; (3) o tamanho da amostra influencia a maneira de administrar o instrumento em termos de entrevista vs. questionrio e em termos de tamanho. Alm do mais, o tamanho da amostra determinado pelos recursos (tempo, dinheiro e recursos humanos) disponveis. Esta disponibilidade de recursos influencia o planejamento da administrao do instrumento, bem como a codificao das respostas, seu processamento e, eventualmente, as possveis anlises. Considerem-se os exemplos seguintes. Uma pesquisa que visa determinar a satisfao com a disponibilidade de opes bsicas de lazer como quadra de esporte, clubes, teatros, pode ter como populao-alvo jovens com telefone em casa. Caso o pesquisador tenha disposio recursos para contratar entrevistadores, trein-los e instalar dez linhas telefnicas e microcomputadores para registro das respostas no ato da entrevista, ser possvel levantar dados junto a um grande nmero de pessoas dentro de pouco tempo. Quando se pretende explorar conceitos como clima social, confiana mtua e solidariedade entre moradores de um bairro perifrico, idealizando como populao-alvo jovens desconfiados, exigido outro tipo de instrumento, outra maneira de aplicao e administrao, resultando em mtodo de codificao, processamento e anlise diferentes. Em suma, embora este captulo trate da construo do questionrio para surveys de maneira geral e faa consideraes sobre sua aplicao, o leitor deve lembrar que os detalhes do instrumento dependero da populao-alvo, do tamanho da amostra, dos conceitos a serem explorados, bem como dos recursos disponveis para aplicao e processamento do instrumento. Alm de considerar a interdependncia de populao e amostra, de um lado, e conceitos e itens do outro, ao elaborar um questionrio o pesquisador deve atentar para os tpicos tratados nas sees: (a) o contexto social da aplicao do instrumento; (b) a estrutura lgica do instrumento na organizao de seus elementos;(c) os elementos do instrumento, i., questes e itens; (d) diferenas nos instrumentos.

obter os dados desejados, varia conforme a situao. Mencionem-se alguns exemplos: confessionrio (padre fiel), interrogatrio (policial suspeito), declarao de renda (receita contribuinte), seleo e concurso (comisso de admisso candidato), prova (professor aluno), aconselhamento (psiclogo cliente voluntrio), manicmio (psiquiatra paciente), procura de emprego (funcionrio de RH candidato), pesquisa de opinio e marketing (firma de pesquisa, podendo ou no oferecer brindes respondente), pesquisa social acadmica (pesquisador sujeito). A este trabalho interessam os dois ltimos exemplos, caracterizados pelo fato de que o pesquisador no tem poder sobre o respondente e precisa convenc-lo de que vale a pena participar da pesquisa. A seguir consideramos alguns aspectos do contexto social e cultural desta interao pergunta-resposta: (a) o fundo cultural, (b) o background do pesquisador, (c) o contexto da pesquisa e (d) o background do respondente (Pareek & Rao, 1980, p. 154)2.
BACKGROUND CULTURAL

At onde se aceita ser indagado por um estranho acerca de assuntos pessoais? Quais assuntos so considerados pblicos? Quais so privados? As vertentes so nvel de reticncia e cortesia (senso de obrigao de agradar o outro) e, finalmente, levar tal interao a srio, fornecendo respostas autnticas.
BACKGROUND DO PESQUISADOR

Nesta dimenso entram as consideraes: imagem e afiliao do pesquisador, inclusive a imagem da organizao qual o pesquisador afiliado; a distncia social e cultural pesquisador/organizao e respondente; relevncia do assunto para o respondente; vis do pesquisador/organizao.
CONTEXTO DA PESQUISA

Alm do ambiente fsico e social no qual a pesquisa seria conduzida (p. ex., na casa do respondente, num local pblico como shopping, no local de trabalho do pesquisador ou do respondente), relevncia e sensitividade temtica tero notvel influncia sobre a disposio do respondente de participar da pesquisa. Acrescenta-se relevncia cultural e aspectos de desejabilidade do tema (i. poca de Natal ser difcil realizar uma pesquisa autntica sobre a desejabilidade em dar esmolas a crianas pobres). O potencial do instrumento de aprofundar, com tamanho e estrutura adequados, importante para a consecuo de dados vlidos.
BACKGROUND DO RESPONDENTE

CONTEXTO SOCIAL DA APLICAO DO INSTRUMENTO

Diante do fato de que o respondente de um survey gasta seu tempo e faz algum esforo mental, uma reflexo bsica deve ser: quem deseja algo de quem numa determinada pesquisa? A disposio do respondente em revelar algo sobre si mesmo, permitindo ao pesquisador

No que diz respeito s caractersticas do respondente, h que considerar inicialmente a distncia entre opinio pblica e particular. Estamos interessados na opinio do respondente, no na opinio de outros. Relacionada a este aspecto encontra-se a situao do respondente que se
2 Vide, tambm, Gnther, Brito & Silva (1989) para uma discusso mais ampla deste assunto.

Hartmut Gnther
survey deve refletir as trs fases. No cumprimento a introduo reconhece-se o outro e estabelece-se o nvel de confiana apropriado e necessrio. Segue-se a transao social em si, a interao perguntaresposta. Na despedida refora-se qualquer sinalizao de benefcios (futuros) j demonstrada. Estes segmentos correspondem, de maneira geral, aos pontos 3, 2 e 1 de Dillman, respectivamente.
INTRODUO: ESTABELECER CONFIANA

considera capaz de opinar sobre qualquer assunto. Embora uma experincia anterior como participante em pesquisa possa ser desejvel, a experincia no recomendvel quando se pesquisa um mesmo assunto; quando a participao for recente, no se deve tentar pesquisar o respondente se ele se mostrar desinteressado. Ao desenvolver o instrumento, convm lembrar essas dimenses preferencialmente antes de iniciar o processo de planejamento. Apesar de as consideraes terem sido levantadas no contexto da pesquisa trans-cultural, com intuito de ajudar o pesquisador a desenvolver um instrumento a ser aplicado numa cultura que no a sua, no h razo para supor que o pesquisador conhea sua prpria cultura a ponto de se comportar intuitivamente de modo correto diante dos respondentes pretendidos.

ESTRUTURA LGICA DO INSTRUMENTO

Consideramos, inicialmente, as razes que levam uma pessoa a responder a um instrumento de pesquisa. Falando de survey via correio, Dillman (1978) afirma que o processo de mandar um questionrio a respondentes em potencial, conseguir que completem e devolvam o questionrio de maneira honesta pode ser visto como caso especial de troca social (p. 12). Aplicando a teoria de troca social a survey, Dillman chega seguinte concluso, Assim, h trs coisas que precisam ser feitas para maximizar a resposta a survey: minimize o custo para o respondente, maximize as recompensas para faz-lo e estabelea confiana de que a recompensa ser concedida (p. 12). Traduzida em detalhes operacionais, o autor aponta as aes que um pesquisador poderia fazer num survey: 1 Recompensar o respondente: a) demonstrando considerao; b) oferecendo apreciao verbal usando uma abordagem consultiva; c) apoiando seus valores; d) oferecendo recompensas concretas; e) tornando o instrumento interessante; 2 Reduzir o custo de responder: a) fazendo com que a tarefa parea breve; b) reduzindo esforos fsico e mental requeridos; c) eliminando a possibilidade de embaraos; d) eliminando qualquer implicao de subordinao; e) eliminando qualquer custo financeiro imediato; 3 Estabelecer confiana: a) oferecendo um sinal de apreciao antecipadamente; b) identificando-se com uma instituio conhecida e legitimada; c) aproveitando outros relacionamentos de troca (Dillman, 1978, p. 18). Consideramos que as recomendaes se aplicam a qualquer tipo de survey, no apenas aos enviados por correio. Pode-se observar a estrutura de um instrumento de survey de maneira mais ampla. Numa afirmao clssica, Bingham e Moore (1934) definem entrevista como conversa com um objetivo. Da mesma maneira que qualquer interao social consiste em um cumprimento, na interao em si e em uma despedida, o instrumento que estrutura a interao entre pesquisador e respondente num

A primeira tarefa estabelecer contato com o respondente em potencial e assegurar sua cooperao. Para estabelecer confiana, o pesquisador/ entrevistador precisa apresentar-se e indicar com e para quem trabalha. A seguir, precisa capturar o interesse do respondente pelo tema, por qu o tema importante, especialmente para o respondente. Nada melhor para expressar apreciao do que ressaltar o quanto opinies e experincias do respondente so importantes. Do ponto de vista prtico, o primeiro passo neste processo uma boa apresentao do instrumento e/ou da pessoa que o administra. Caso o questionrio seja remetido pelo correio, ir acompanhado de uma carta de apresentao da qual constar a informao sobre quem est por trs da pesquisa e para qu serve. Em se tratando de entrevista, o entrevistador pode explicar quem ele , para quem trabalha, identificar-se (p. ex., com crach) ou entregar alguma carta ao candidato a respondente. Como os primeiros momentos decidem sobre a disposio do respondente em cooperar, a que qualidade e quantidade de informao sobre a pesquisa precisam se concentrar. No caso de instrumento auto-aplicvel (p. ex., enviado via correio), a introduo no somente precisa ser persuasiva, mas deve conter toda a informao necessria para poder agir da maneira esperada pelo pesquisador. Embora se devam incluir indicaes claras de como entrar em contato com o responsvel pela pesquisa, caso existam dvidas, o esforo para pedir instrues adicionais pode fazer com que a maioria dos potenciais respondentes ignore o instrumento, em vez de se informar com o pesquisador. No caso da aplicao pessoal de um instrumento, o entrevistador, apropriadamente treinado, tem oportunidade de explicitar e tirar dvidas sobre: (a) quem responsvel pela pesquisa, (b) quais os objetivos e o qu o respondente deve fazer. A nfase est no apropriadamente treinado', porque existe um contnuo desde comear a esclarecer dvidas, a tentar persuadir pessoas relutantes em responder, at insistir no contedo da resposta. Idealmente, as instrues padronizadas so to claras que no necessrio pedir esclarecimentos adicionais ao entrevistador. Mas na medida em que boa parte da recompensa que um pesquisador pode oferecer consiste, justamente, na oportunidade de interao social (veja Gnther, Brito e Silva, 1989), o entrevistador precisa de treinamento para fornecer informaes sem enviesar as eventuais respostas do respondente. Nas duas situaes, instrumento auto-aplicvel e interao pessoal, vantajoso manter contato prvio com

Como Elaborar um Questionrio

os membros da amostra. Aviso prvio pode variar, conforme recursos disponveis e abrangncia da pesquisa, de uma carta at uma campanha de outdoors ou anncios na televiso. Tais avisos da chegada de entrevistadores, explicitando os objetivos da pesquisa, facilitam a recepo do entrevistador (Solrzano, 1991) e aumentam a disposio para responder a um questionrio enviado pelo correio (Gouveia e Gnther, 1995).
INTERAO PERGUNTARESPOSTA: REDUZINDO O CUSTO PARA RESPONDER

Identificao do pesquisador e legitimao dos objetivos da pesquisa so passos que permitem que se comece com o survey. Como o respondente pode desistir da pesquisa a qualquer momento, continua a necessidade de convenc-lo, de manter seu interesse a cada etapa da interao. Evitar que desista no meio do processo depende da forma e do contedo do instrumento. Foram citados os pontos indicados por Dillmann para reduzir o custo de responder a um survey: a) fazendo com que a tarefa parea breve; b) reduzindo o esforo fsico e mental requerido; c) eliminando a possibilidade de embaraos; d) eliminando qualquer implicao de subordinao; e) eliminando qualquer custo financeiro. Rodeghier (1996, p. 9) sumaria regras gerais como a) manter a tarefa do respondente o mais fcil possvel, (b) manter o nvel de interesse do respondente o mais alto possvel e manter o nvel de ateno do respondente o mais alto possvel. Os dois primeiros pontos de Dillman e o primeiro de Rodeghier dizem respeito, explicitamente, estruturao do instrumento. So conseqncia direta da constatao de que, no contexto de pesquisa social aqui considerado, o pesquisador que deseja algo do respondente. Assim, alm de refletir boas maneiras, considerar as necessidades do respondente mostra bom senso por parte do pesquisador. O assunto ser tratado na seo Estrutura e Seqncia. Os demais pontos de Rodeghier, manter interesse e ateno do respondente, tambm sero abordados. Quanto possibilidade de embaraos, tratar-se- deste tema no contexto de perguntas sensveis a seguir. A questo da subordinao diz respeito ao direito do respondente de poder suspender a qualquer momento sua participao na pesquisa, se desejar. Jamais a participao deve ser obrigatria ou condicionada concesso de algum benefcio vide a parte recompensa. Quanto a custos financeiros, Dillmann refere-se a selos no caso de uma pesquisa via correio, mas as consideraes podem estender-se a transporte para o local da entrevista ou renda perdida pelo entrevistado durante o tempo da entrevista vide a seco recompensas e incentivos financeiros.
DESPEDIDA: REFORAR BENEFCIOS DA PESQUISA

uma pesquisa o pesquisador, no o respondente, embora no signifique que a participao em pesquisa no implique beneficio para o respondente. Sentir-se importante por ter sua opinio valorizada ou por poder falar e ser ouvido so motivos fortes para que muitas pessoas procurem participar em surveys. Salientar a importncia da opinio daquele candidato a respondente condizente para com esses sentimentos. A maioria dos participantes de survey sabe que o pesquisador o maior beneficiado, que pouco h para o respondente alm da satisfao de ter sido ouvido. Por esta razo, no se deve fazer promessas irreais como Sua participao nesta pesquisa importante, uma vez que suas respostas resultaro na melhoria da sua vida. A afirmao irresponsvel e anti-tica, alm de ser percebida como engodo pelo respondente, minando a credibilidade das pesquisas. Comunicar resultados e/ou facilitar o acesso a eles forma importante de recompensar os respondentes. Se a conversa com um objetivo foi suficientemente interessante para que o participante mantivesse o nvel de ateno, os resultados apresentados em linguagem no acadmica tambm sero. Alm do mais, na hiptese de os resultados provocarem reflexo ou conscientizao entre os respondentes sobre o tema da pesquisa, os resultados contero uma semente para possvel melhoria da vida dos respondentes, numa dada temtica.
RECOMPENSAS E INCENTIVOS FINANCEIROS

O mnimo de cortesia na despedida consiste em um agradecimento pela valiosa colaborao do respondente, seja de maneira verbalizada aps uma entrevista, seja de maneira escrita ao fim do questionrio. No que se refere a benefcios tangvis e imediatos, o maior beneficiado de

Por serem mais concretos, incentivos/recompensas financeiras e brindes merecem maior reflexo. Aplica-se a estes, mais explicitamente do que aos demais incentivos, a norma de tica 6.14(b) da American Psychological Association (APA): Psiclogos no oferecem incentivos financeiros excessivos ou imprprios ou outros incentivos para obter participantes para pesquisa, especialmente quando isto possa obrigar participao (APA, 1992, p. 1609). Esclarecendo, a questo no se mas quanto possvel pagar aos participantes de uma pesquisa. Embora do ponto de vista prtico o problema seja muitas vezes resolvido pela limitao de recursos do pesquisador, vale lembrar que quanto maior a distncia social e/ou financeira entre pesquisador e respondente, maior a possibilidade de criar dependncia no incentivo a ponto de o respondente ser privado do direito de suspender sua participao a qualquer momento e dizer (ou fazer) o que julga necessrio para continuar na pesquisa (no por acaso se utiliza a palavra obrigado). Considerando a norma de tica 6.06(d) psiclogos tomam medidas razoveis para implementar protees apropriadas dos direitos e do bem-estar dos participantes humanos... (APA, 1992, p. 1608), parece razovel tentar oferecer recompensa no caso do respondente perder uma renda por causa da sua participao na pesquisa, como o caso de pessoas que trabalham por conta prpria, cujo tempo significa dinheiro, sejam profissionais liberais ou crianas de rua (Gnther & al., 1989). Em suma, o pesquisador tem de contrabalanar que o respondente no deve perder recursos e assegurar que a compensao no

Hartmut Gnther
Exem plo 1

seja excessivamente generosa ou desproporcional, de modo a causar dependncia que possa ser explorada. A questo se apresenta justamente com os socialmente mais fracos (p. ex. crianas, idosos e/ou pobres) ou dependentes (crianas, estudantes ou idosos), visto verificar-se relativa ausncia de estudos com respondentes socialmente mais poderosos que o pesquisador. Mangione (1998) enumera uma srie de estudos que demonstram que a oferta de incentivos financeiros tende a aumentar a taxa de resposta em survey pelo correio. Afirma que o que surpreendente nestes resultados de pesquisa no o fato de que pagamento adiantado de recompensa tem algum impacto, mas que no parece ser necessria uma grande recompensa para obter taxas de resposta maiores (p. 409), mencionando-se valores de aproximadamente um dlar norte-americano. Conclui sua discusso afirmando: A chave da efetividade parece estar em criar um clima no qual o pagamento antecipado seja visto como algo para se sentir bem, em vez de uma tcnica manipuladora que constranja o respondente a participar (p. 410). Aspecto semelhante acrescentado por Singer, van Hoewyk e Maher (1998), quando argumentam que o pagamento de incentivos a respondentes no cria, necessariamente, expectativas para futuras participaes em pesquisa.
ESTRUTURA E SEQNCIA

H quanto tempo mora nesta cidade? [Caso apropriado] Onde morava antes? Em geral, est satisfeito em morar aqui?

Como fazer a tarefa ser breve e fcil, ou pelo menos no torn-la aborrecedora ou aversiva? Uma estrutura bem pensada contribui significativamente para reduzir o esforo fsico e/ou mental do respondente, alm de assegurar que todos os temas de interesse do pesquisador sejam tratados numa ordem que sugira uma conversa com objetivo, mantendo-se o interesse do respondente em continuar. Antes de mais nada, focalizar-se no objetivo da pesquisa, nas perguntas que o pesquisador quer responder por meio dela. Saber claramente por que est incluindo cada item no instrumento. Saber o que as respostas implicam para o andamento da pesquisa. No estudo piloto, haveria margem para uma pescaria, i., para incluir itens sobre os quais o pesquisador no tem certeza se vale perguntar. Mas o instrumento final deve conter apenas os itens que sero analisados. Um primeiro princpio de estruturao direcionar-se do mais geral para o mais especfico; do menos delicado, menos pessoal, para o mais delicado, mais pessoal. Esta ordem se aplica a conjuntos temticos de itens e a um grupo de itens que tratam de uma temtica em comum. Aplicada seqncia de conjuntos temticos de itens, significa que o primeiro conjunto de itens/perguntas deve ser mais geral e menos sensvel. Esta parte pode at consistir, especialmente em entrevistas pessoais, de uma conversa preliminar': Numa pesquisa hipottica entre jovens de um bairro sobre opes de lazer, realizada em forma de entrevista pessoal, a parte formal da coleta de dados poderia ser precedida de perguntas gerais sobre a situao do respondente na cidade e no bairro (exemplo 1). As perguntas iniciais serviriam menos para obter

informao do respondente e mais para estabelecer um relacionamento de confiana entre respondente e pesquisador. Deve-se atentar para que essas perguntas tero de ser repetidas de maneira formal adiante, dentro da entrevista, enquadrando-se as duas primeiras entre os itens do conjunto scio-econmico e a terceira no conjunto de itens sobre satisfao com o bairro (exemplo 1). Aps conseguir convencer um respondente em potencial a dar sua ateno pelo argumento de que a pesquisa trata de assunto de interesse do respondente, no convm comear a interao por perguntas burocrticas (nome, sexo, idade) e at delicadas (renda familiar). Em outras palavras, se o participante concorda em responder a pesquisa, porque considera a temtica interessante, a primeira pergunta (e as seguintes) deve(m) tratar desta temtica. Conquistado e mantido o interesse do respondente, podem ser levantadas perguntas no to obviamente relacionadas temtica inicialmente sugerida. Lembre-se o contexto social da pesquisa social. Contrria situao de concurso ou procura de emprego, na qual o respondente est na situao de pedinte, podendo ser sujeitado a qualquer tipo de ficha a preencher, a pesquisa social representa uma situao na qual o pesquisador o pedinte. Como itens pessoais e scio-econmicos podem ter contedos sensveis como idade, nvel educacional (no fcil admitir baixo nvel educacional de si ou da famlia), renda individual ou familiar, chegando a estilo de vida, preferncias sexuais etc., os itens s tero respostas autnticas quando o participante desenvolver certo grau de confiana no responsvel pela pesquisa (representado, no caso de interao pessoal, pelo entrevistador). Mais uma vez vale a reflexo: necessria esta pergunta; necessrio este item? Somente o ltimo conjunto de itens trata das caractersticas scio-econmicas do respondente. Um erro mais que comum comear um instrumento com o levantamento de dados pessoais, s vezes at chamando seo de Identificao. Em se tratando de pesquisa, no convm identificar o respondente. Pelo contrrio. Geralmente h que assegurar que a pesquisa no visa identificar indivduos, mas que perguntas scio-demogrficas como educao, estado civil, sexo, idade, composio da famlia, renda, tempo de moradia, etc. servem apenas para caracterizar a amostra. Perguntar o nome no incio de uma entrevista pessoal pode facilitar trato interpessoal, mas mesmo sem registr-lo pode contradizer qualquer afirmao sobre o carter confidencial da entrevista. Dependendo do assunto, a regra do geral para o especfico pode ser aplicada seqncia dos itens, dentro de um grupo que trata de uma temtica em comum.

Como Elaborar um Questionrio

Exem plo 2 Exem plo 3

Conclundo, gostaramos de fazer algumas perguntas para melhor caracterizar os respondentes desta pesquisa ...

Inicialmente, gostara de saber sua opinio sobre asa opes de lazer neste bairro ...

Ressalta-se que ao tratarem aspectos de um conjunto que constitui uma escala, os itens devem ser misturados para evitar que dois deles sejam apresentados um aps o outro, ao se tratarem aspectos semelhantes. Um segundo princpio de organizao do instrumento que, na medida apropriada, deve seguir uma ordem lgica. Usando uma hipottica pesquisa sobre moradia, pergunta-se inicialmente sobre a cidade, depois sobre o bairro, a rua e o prdio onde o respondente mora. Alm de progredir do geral para o especfico, aproxima-se do respondente. Uma pergunta sobre o relacionamento entre moradores da cidade menos pessoal, menos ameaadora do que sobre o relacionamento do respondente com seu vizinho. Fazendo perguntas mais pessoais s aps haver estabelecido bom nvel de confiana, o entrevistador contribui para obter respostas autnticas. Assim, perguntas pessoais sobre o respondente constituiriam o ltimo conjunto (exemplo 2). Um terceiro princpio, implcito no segundo, sugere que itens tratando de uma mesma temtica fiquem juntos e recebam uma introduo que ajude o respondente a concentrar-se na temtica a ser tratada (exemplo 3).

ELEMENTOS DO INSTRUMENTO
A parte central do instrumento de survey so as perguntas, pelas quais se tenta obter a informao desejada. Esta seo do captulo iniciada com consideraes gerais sobre como escrever bons itens. Seguem-se as consideraes temticas, os aspectos tcnicos e as consideraes estatsticas.
CONSIDERAES GERAIS

Fowler (1998, p. 344) define um bom item como aquele que gera respostas fidedignas e vlidas. Apresenta cinco caractersticas bsicas: (a) a pergunta precisa ser compreendida consistentemente; (b) a pergunta precisa ser comunicada consistentemente; (c) as expectativas quanto resposta adequada precisam ser claras para o respondente; (d) a menos que se esteja verificando conhecimento, os respondentes devem ter toda informao necessria; e (e) os respondentes precisam estar dispostos a responder. Para assegurar tais atributos, cada pergunta deve ser especfica, breve, clara, alm de escrita em vocabulrio apropriado e correto. - Quanto especificidade, contrasta-se: Qual o parque que voc gosta? com Em que parque voc gosta de passear? - Quanto brevidade, contrasta-se: Voc pode enumerar as atividades que realiza no parque e se as mesmas envolvem poucas ou muitos colegas? com Quais as atividades no parque? - Quanto clareza, contrasta-se: De maneira geral, o

que voc pensa sobre se as atividades planejadas para o clube so importantes? com Que grau de influncia voc tem no planejamento das atividades do clube? - Quanto a vocabulrio, preciso pensar no nvel educacional dos respondentes. A linguagem no pode ser complexa nem simples demais. O princpio bsico realizar no mnimo um estudo piloto, sem procurar supor algo a priori. Como escrever bons itens? Sudman e Bradburn (1982, p. 14) apresentam trs regras gerais: (a) controle o impulso de escrever itens especficos antes de haver refletido completamente sobre as perguntas da pesquisa; (b) anote as perguntas da pesquisa e mantenha-as perto enquanto estiver desenvolvendo o questionrio; e cada vez que escrever um item, indague: Por que quero saber disto? Responda em termos que lhe ajudem a responder as perguntas da pesquisa. Seria interessante saber no resposta aceitvel. Linguagem e ambigidade. Quanto linguagem usada na formulao dos itens, atenta-se inicialmente para sua compreenso pela populao-alvo da pesquisa. Abreviaes, grias ou termos regionais devem ser evitados, da mesma maneira que termos especiais ou sofisticados que estejam aqum da compreenso da populao-alvo. O problema da ambigidade est relacionado questo da linguagem. O respondente est entendendo o que o pesquisador est perguntando? Vis e nfase. A escolha das palavras pode direcionar as respostas. Quando se pergunta sobre utilizao de reas comuns num bloco de residncia, pode-se indagar se deve ser proibido, no permitido, evitado ou impedido. Assim como o aviso Proibido Estacionar ou Pede-se no estacionar provoca comportamentos diferentes, o nmero de respondentes que concordam com um item que contm a palavra proibir vs. no permitir varia (veja Schuman & Presser, 1981, cap. 11). Pergunta aberta versus fechada. Uma escolha importante no desenvolvimento de itens diz respeito a perguntas abertas vs. fechadas. A discusso extensa (Gnther & Lopes, 1990; Schuman & Presser, 1981). Pode-se sumariar a discusso nos seguintes termos: para uma pesquisa inicial, exploratria, no conhecendo a abrangncia ou a variabilidade das possveis respostas, so necessrias perguntas abertas. Uma vez que se conhecem os tpicos geralmente mencionados pelos respondentes acerca de uma dada temtica, especialmente quando existem muitos respondentes e/ou pouco tempo, deve-se usar perguntas fechadas. O argumento de que perguntas abertas do mais liberdade de expresso ao respondente uma falcia. Segundo Sommer e Sommer, o uso de perguntas fechadas mostra freqentemente mais respeito opinio das pessoas, deixando-as classificar suas respostas como

Hartmut Gnther
pergunta para assegurar avaliao mais discriminada do nvel de conhecimento do que seria possvel com apenas uma ou duas. Quanto a perguntas sobre comportamentos socialmente inaceitveis ou at ilegais, no entraremos nas questes ticas ou jurdicas, mas lembramos que a tradio no garante ao pesquisador proteo contra eventual obrigao de revelar suas fontes. Assim, o pesquisador deve lembrar-se da norma 1.14 da APA Psiclogos tomam medidas adequadas para evitar prejuzo para seus pacientes, clientes, participantes de pesquisa, estudantes ou outros com as quais trabalham... (APA, 1992, p. 1601). Havendo decidido ser justificvel fazer perguntas sensveis, a regra bsica utilizar perguntas abertas sugesto que implica em entrevista pessoal como modo de interao com o respondente. Contribui para tornar uma pergunta menos ameaadora e contextualiz-la de maneira que sua importncia relativa na entrevista seja reduzida. Menciona-se, adicionalmente, a tcnica de resposta randmica pela qual possvel estimar a proporo de respondentes que mantm atitudes ou comportamentos socialmente inaceitveis, sem entretanto poder determinar se um determinado respondente assim se comporta. Para maiores detalhes desta tcnica veja, por exemplo, Sudman & Bradburn (1982, cap. 3) ou Zdep, Rhodes, Schwarz & Kilkenny (1989). Itens para avaliar conhecimento. Embora no seja funo da pesquisa social testar habilidades ou conhecimentos no sentido escolar, sua verificao dentro de uma pesquisa importante. Perguntas de conhecimento importam como filtro antes de serem feitas perguntas sobre atitudes, evitando constrangimentos ao tratar assuntos que o respondente desconhece. Em pesquisas que fazem parte de campanhas publicitrias ou de introduo de novas tcnicas (p. ex. cuidados da sade) necessrio verificar conhecimentos alm de atitudes e prticas atuais. Para reduzir o nvel de ameaa, pode-se iniciar a pergunta com frases como voc sabe por acaso... ou a propsito.... So necessrios cuidados para evitar adivinhao por parte de respondentes que no querem admitir falta de conhecimento. Fazendo mais que uma pergunta reduz-se a possibilidade de acertar a resposta correta por acaso, especialmente em se tratando de assuntos com perguntas que requerem sim ou no. Usando itens de escolha mltipla, as alternativas precisam ser igualmente plausveis. prefervel usar perguntas abertas sobre conhecimento de assuntos numricos (p. ex.. Qual a populao do Brasil?). Itens para aferir atitudes e opinies. Em se elaborando itens para determinar atitudes, h tarefas iniciais. Precisa-se definir claramente o objeto de atitudes, i., sobre qual objeto se quer saber algo. Temos: a pessoa X ou as aes da pessoa X ou as filosofias da pessoa X estas vertentes no so idnticas. neste ponto que a introduo a um conjunto de itens mostra-se importante. Outro ponto a cuidar a vertente da atitude que est sendo medida: a afetiva, a cognitiva ou a comportamental. A primeira vertente trata da avaliao de um objeto de

positivas, negativas ou neutras, em vez do pesquisador fazer isto para eles (1997, p. 130). Da mesma maneira que perguntas abertas servem no incio da entrevista para estabelecer um clima receptivo entre pesquisador e respondente, servem, no fim do levantamento, para capturar justamente aquelas opinies no cobertas pelos itens fechados. Alm de um apanhado final ao concluir o questionrio ou a entrevista, as perguntas abertas podem ser feitas no fim de um conjunto de perguntas, vez que servem para reforar a essencial percepo do respondente de que o pesquisador tem interesse na opinio dele, respondente. H que lembrar: perguntas abertas, especialmente em questionrios auto-aplicveis, exigem mais esforo do respondente; aumentando o custo de resposta diminui a probabilidade de completar e devolver o questionrio. Sumariando, enfatize-se que sempre convm realizar um estudo piloto para verificar se e como as perguntas esto sendo entendidas pela populao-alvo. Esta regra no tem exceo. Quando se trata com nova populao-alvo ou novo questionrio, deve-se realizar um novo pr-teste.
CONSIDERAES TEMTICAS

No incio do captulo citamos a definio de Fink & Kosecoff (1985) de survey como um mtodo para coletar informao de pessoas acerca das suas idias, sentimentos, planos, crenas, bem como origem social, educacional e financeira (p. 13). Implcita nesta definio est a distino entre itens que tratam de conhecimento, de atitudes e opinies e de informao factual. Para cada uma das trs categorias, podemos diferenciar itens mais ameaadores. Grau de ameaa de itens. Fazem-se perguntas a determinadas pessoas na expectativa de que as questes lhes digam respeito, que tenham conhecimento e/ou atitudes e opinies sobre o assunto. O potencial de uma pergunta afetar um respondente de maneira ameaadora est implcito nesta constatao. O assunto pode ser no muito familiar; talvez seja desagradvel admitir desconhecimento. O tema pode ser sensvel para o respondente; p. ex., comportamentos considerados socialmente inaceitveis. Ao desenvolver itens necessrio verificar at que ponto determinadas perguntas podem constituir ameaa ao respondente. Caso existam razes para supor que o tema sensvel, precisa-se verificar maneiras de obter a informao sem provocar constrangimento. Problema maior do que perder um respondente irritado por uma pergunta receber respostas no autnticas, pela razo de o respondente ter algo a esconder ou no saber como responder. Quanto ao constrangimento provocado por falta de lembrana de comportamento, existem maneiras de ajudar o pesquisador a ter sucesso: fazer perguntas especficas ao invs de gerais, alm de detalhar contextos temporais e/ou espaciais. Pode ser evitado o constrangimento devido falta de conhecimento, deixando claro que o conjunto de perguntas no constitui um teste e que natural s pessoas no ter respostas para todos os itens. Implcito nesta afirmao est: deve-se fazer mais que uma

Como Elaborar um Questionrio

Exem plo 4

Voc se considera mais prximo(a) de que religio: Catolicismo . . . . . . . . . . . . . . . . . . . . . . . . . 1 Protestantismo . . . . . . . . . . . . . . . . . . . . . . 2 Que igreja? ______________ < seguem outras religies existentes na populao-alvo> Voc considera sua f Muito forte . . . . . . . . . . . . . . . . . . . . . . . . . . 1 Forte ..............................2 Mais ou menos . . . . . . . . . . . . . . . . . . . . . . 3 No to forte . . . . . . . . . . . . . . . . . . . . . . . . 4 Fraca . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 5 No ltimo ms, voc freqentou os cultos Quase diariamente ...................1 Duas ou trs vezes por semana . . . . . . . . 2 Uma vez por semana . . . . . . . . . . . . . . . . . . 3 Semana sim, semana no . . . . . . . . . . . . . . 4 Uma vez . . . . . . . . . . . . . . . . . . . . . . . . . . . . 5 Geralmente assiste s festas religiosas ..6

Itens para obter informao factual. Incluem-se neste grupo perguntas scio-demogrficas: sexo, idade, escolaridade, renda, moradia, etc. Estas perguntas devero ser vistas no fim da pesquisa, supondo que tais itens sejam potencialmente delicados (idade, renda, nvel escolar, entre outros). Igualmente, no h como supor que os respondentes, mesmo querendo, forneam sempre informaes corretas. Vale o lembrete de perguntar apenas o que ser utilizado. importante iniciar a ltima seo com a justificativa, Concluindo, gostaramos de fazer algumas perguntas que permitam melhor caracterizar o grupo de pessoas com as quais falamos nesta pesquisa. Caso a interao tenha sido demorada ou esta afirmao no tenha sido feita no incio da pesquisa, convm reafirmar, Lembramos que todas as suas declaraes sero tratadas de maneira confidencial. Os resultados sero apresentados de maneira a no permitir a identificao de participantes individuais. Para ajudar a memria e/ou assegurar respostas acuradas, as perguntas devem ser o mais especficas possvel: Quantos anos fez no seu ltimo aniversrio? vs. Quantos anos tem?; Durante os ltimos seis meses, voc teve oportunidade de trabalhar com processamento de texto? vs. Voc tem experincia em computao?
CONSIDERAES TCNICAS

atitude: Considero o atual playground um lugar seguro para as crianas da vizinhana. A segunda trata de conhecimentos - certos e errados - acerca de um objeto: A caixa de areia do playground bem protegida de cachorros? A terceira trata de aes passadas ou futuras diante de um objeto: Durante os ltimos 15 dias, usei o playground X vezes. Como freqentemente no existe alta correlao entre as trs vertentes, deve-se averiguar as trs ou aquela que de interesse principal. Para verificar a intensidade da atitude, existem dois caminhos fundamentais. Um consiste em fazer uma srie de perguntas e, partindo da soma de respostas numa determinada direo, inferir a intensidade da atitude. Em se tratando de atitudes religiosas ou polticas, a alternativa fazer trs perguntas, como apresentadas na pgina anterior. A primeira pergunta mais factual, embora permita inferncias inclusive cognitivas. A segunda uma pergunta afetiva; a terceira, comportamental. Juntas permitem uma caracterizao religiosa do respondente (exemplo 4). Perguntas que contm dois objetos de atitudes devem ser evitadas. Em vez de perguntar Voc prefere o parque da cidade, que tem campos de futebol, ou os clubes, que geralmente tm bons restaurantes?, devem ser elaboradas no mnimo duas perguntas: Voc prefere o parque da cidade ou os clubes?; Entre as seguintes atividades, de qual voc gosta mais como lazer num domingo?" A segunda pode ser uma pergunta aberta ou seqenciada por alternativas como jogar futebol, freqentar restaurantes, etc. Relaciona-se a este aspecto a questo da pergunta unipolar ou bipolar. Tomando estratgias de enfrentamento como exemplo, poder-se-ia formular dois tipos de perguntas, conforme exemplo 5.

Voltamos relao conceitoitem da Figura 1. Partindo dos objetivos, formulam-se perguntas a serem respondidas por meio da pesquisa. As perguntas so transformadas operacionalmente em variveis e indicadores, apresentadas ao respondente em forma de itens. Desta maneira, perpassando os itens que se estabelece a relao entre o objetivo de uma pesquisa e os conceitos pesquisados, enquanto as respostas representam o grau de conceituao que o respondente tem acerca do assunto sob investigao. Aproximamo-nos de uma definio de medio:
Exem plo 5

Duas perguntas unipolares Em geral, tento evitar conflito com os outros: Concordo plenamente . . . . . . . . . . . . . . . . . . . . 1 Concordo . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 2 Discordo .............................. 3 Discordo plenamente . . . . . . . . . . . . . . . . . . . . 4 < seguem algumas outras perguntas > No levo desaforo para casa: Concordo plenamente . . . . . . . . . . . . . . . . . . . . 1 Concordo . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 2 Discordo .............................. 3 Discordo plenamente . . . . . . . . . . . . . . . . . . . . 4 versus uma pergunta bipolar Tento evitar conflitos com os outros. .. 3 2 1 0 1 2 3.. No levo desaforo para casa.

10
T ipo de Escala

Hartmut Gnther
C aractersticas da Escala Nmeros ou smbolos so utilizados somente para identificar pessoas, objetos, ou categorias Exem plos Placas de carro, C or de cabelo, Local de nascimento, Estado civil Caractersticas podem ser ordenadas numa dimenso subjacente Ordinal O rdem de chegada, O rdem de preferncia, Status social, Escala de Likert Caractersticas no somente podem ser ordenadas numa dimenso subjacente, mas intervalos tm tamanho conhecido e podem ser comparados Alm das caractersticas da escala anterior, ainda existe um ponto zero absoluto Escalas de T hurstone, Escala de Likert, Estimativas de distncias, T emperatura em C alm das anteriores operaes aritmticas nas diferenas entre os nmeros representando eventos alm da anterior um item maior do que o outro >' C aractersticas Form ais Equivalncia ='

Nom inal

Intervalar

R azo

Salrio, T amanho, T empo gasto com uma tarefa

alm das anteriores, operaes aritmticas nos prprios nmeros

T ab e la 1: Caractersticas de Escalas nas Cincias Sociais (adaptado de Pasquali, 1997; Siegel, 1975; Sommer & Sommer, 1997)

estabelecer correspondncia entre eventos e smbolos, comumente numerais, de tal maneira isomrfica que a variao entre os smbolos corresponda, geralmente de
Exem plo 6

Escala Nominal. Neste tipo de escala utilizam-se nmeros ou smbolos somente para identificar pessoas, objetos ou categorias. Exemplos para as cincias sociais seriam local de nascimento, sexo, estado civil ou atributos como cor de cabelo ou uso de aparelhos como culos ou bengala. A
Exem plo 7

Como voc sabe, a Prefeitura est lanando um programa de opes de esporte para os adolescentes deste bairro. Entre as opes que apresento, indique qual deve ser realizada primeiro, qual a segunda, qual a terceira e qual a quarta: Nmero de ordem de importncia Campo de futebol . . . . . . . . . . . . . . . . . . . ______ rea de skate . . . . . . . . . . . . . . . . . . . . . . ______ Campo de basquete . . . . . . . . . . . . . . . . . ______ Campo de vlei . . . . . . . . . . . . . . . . . . . . ______ Outros, quais? . . . . . . . . . . _________________

Qual o estado civil de V.Sa.? Solteiro(a) . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 1 Casado(a) ............................. 2 Vivendo maritalmente . . . . . . . . . . . . . . . . . . . . 3 Desquitado(a) . . . . . . . . . . . . . . . . . . . . . . . . . . 4 Divorciado(a) . . . . . . . . . . . . . . . . . . . . . . . . . . . 5 Separado(a) . . . . . . . . . . . . . . . . . . . . . . . . . . . . 6 Vivo(a) . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 7 Outro . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 8

modo linear, variao entre os eventos. No caso da pesquisa social, evento quer dizer idias, sentimentos, planos, crenas, bem como origem social, educacional e financeira, aquilo que na definio de Fink e Kosecoff (vide acima) est sendo coletado num survey, enquanto smbolo a apresentao de alternativas nos itens do instrumento (no caso de perguntas fechadas) ou da codificao das respostas a perguntas abertas. Para que tal correspondncia ou medio seja fiel, h que atentar para trs aspectos: erro, singularidade e representao. O evento identificado corretamente e discriminado de outros eventos prximos? Cada evento representado por apenas um smbolo, e cada smbolo representa apenas um evento? Quais as maneiras com que smbolos (numerais) representam eventos? Nas cincias sociais, eventos e smbolos se diferenciam em quatro nveis de correspondncia, i., entre quatro nveis de medio ou escalas sumariados na Tabela 1. A seguir apresentamos exemplos de itens para cada um destes quatro nveis de mensurao.

forma de apresentar estes itens dada no exemplo 6. Apontamos para alguns aspectos deste item. Mesmo ao se preparar um instrumento para auto-aplicao, deve-se pensar em um dilogo com o respondente. Contrariamente a uma declarao de renda ou ficha de procura de emprego, convm estabelecer um bom relacionamento com o respondente. A frase Qual o estado civil de V.Sa?' soa melhor do que solicitar simplesmente Estado Civil'. Dependendo da populao-alvo, um maior ou um menor nmero de alternativas apropriado: freqentemente as alternativas solteiro, casado, outro' so suficientes. O importante que as opes (a) sejam mutuamente exclusivas e (b) cubram todas as alternativas. Outra maneira de formular alternativas do estado civil dada no exemplo 7. Dependendo do objetivo da pesquisa, o primeiro ou o segundo exemplo do item estado civil pode ser mais apropriado. Da mesma forma que a reao inicial do leitor ao segundo exemplo pode ser de estranheza, a maioria dos respondentes a um eventual uso deste item pode assim reagir. um exemplo concreto de distino entre o

Como Elaborar um Questionrio

conceito subjacente a ser analisado numa determinada pesquisa (i., as quatro categorias do segundo exemplo) e o que pode, do ponto de vista prtico e conceitualmente factvel ser perguntado maioria dos respondentes. Escala Ordinal. Numa escala ordinal, alm de identificarem pessoas, objetos ou categorias, nmeros ou smbolos os ordenam numa dimenso subjacente. Exemplos para as cincias sociais seriam hierarquizao de preferncia ou importncia entre pessoas ou objetos, status social ou ordem de chegada. Alternativas nos itens de uma escala Likert so outro exemplo, mas sero tratadas separadamente. A forma de apresentar os itens dada no exemplo 8.
Exem plo 8 Exem plo 9

11

Considerando seu tempo livre e de recreao, solicitamos que indique: V.Sa. membro de algum clube esportivo? . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . Sim . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . No Caso sim, - passa quanto tempo por semana nesse clube, em mdia? . . . . . . . . . . . . . . . . . . . _____ horas - quanto gasta em atividades no clube, alm da mensalidade (em mdia/ms)? . . . . . . . . . . . . . . R$ _____

Nunca foi casado(a) Sempre foi casado(a),

..................... 1 ...... 2

i., casado(a) e nunca divorciado(a)

Divorciado(a) . . . . . . . . . . . . . . . . . . . . . . . . . . . 3 Casado(a) novamente . . . . . . . . . . . . . . . . . . . . . 4

A tarefa do respondente escrever a ordem de importncia de realizao no espao indicado. Para cada um dos quatro itens (posteriormente, quatro variveis) pode-se determinar uma distribuio de freqncia: quantas vezes campo de futebol foi primeira, segunda, terceira e quarta escolhida. A partir disso infere-se sua importncia. Igualmente, quais as distribuies para reas de skate, campo de basquete e campo de vlei? possvel sumariar os dados indicando quantas vezes cada um dos itens foi mencionado como o mais importante ou qual o valor mediano das menes de importncia de cada uma das quatro alternativas. Concluindo: os valores modais e medianos podem ser calculados; a mdia, no. Escala Intervalar. Numa escala intervalar, as caractersticas no somente podem ser ordenadas conforme uma dimenso subjacente, mas os intervalos entre as alternativas tm tamanho conhecido e podem ser comparados. No caso de julgamentos acerca de eventos pessoais ou sociais (p. ex. satisfao), determinar o tamanho dos intervalos problemtico. Exemplo clssico de uma escala intervalar a utilizada por Milgram (1974) para determinar o grau de obedincia s instrues dos participantes. Ostensivamente, o participante aplicava choques eltricos que variavam entre 15 e 450 volts. O grau de obedincia correspondia voltagem em que o

participante se recusava a continuar aplicando mais choques, i., quanto mais baixa a voltagem, menos obediente. Mais recentemente, Silva (1999) utilizou a adaptao de um velocmetro (vide Figura 2) para o grau de concordncia com afirmaes numa escala de 0 a 100 por cento. Escala de Razo. Exemplos de escalas de razo utilizadas nas cincias sociais so salrio ou tempo gasto com uma tarefa. A apresentao dos itens reverte a perguntas abertas, conforme mostrado no exemplo 9.Neste exemplo, a primeira resposta (sim ou no) representa uma medio nominal, enquanto as seguintes representam medies em escala de razo. Escala Likert. Esta mensurao mais utilizada nas cincias sociais, especialmente em levantamentos de atitudes, opinies e avaliaes. Nela pede-se ao respondente que avalie um fenmeno numa escala de, geralmente, cinco alternativas: aplica-se totalmente, aplica-se, nem sim nem no, no se aplica, definitivamente no se aplica. As afirmaes podem ser auto-referentes: Eu considero importante ter uma rea de lazer perto de casa. Ou htero-referentes: importante para uma
Exem plo 10

Inicialmente gostaramos de saber o que os adolescentes deste bairro acham sobre as opes de lazer oferecidas pela Prefeitura. Para cada opo, avalie: (1) muito ruim, (2) ruim, (3) razovel, (4) bom ou (5) muito bom. Para isto, faa um crculo em volta do nmero que melhor representa sua avaliao: Campo de futebol: Muito ruim . . . . . . . . . . . . . . . . . . . . . . . . . . . 1 Ruim . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 2 Razovel . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 3 Bom . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 4 Muito Bom . . . . . . . . . . . . . . . . . . . . . . . . . . . 5 <seguem-se os demais itens>

Figura 2 :

Velocmetro com escala de 0 100

12

Hartmut Gnther
Exem plo 11

comunidade ter uma rea de lazer. Dependendo do tema subjacente, as alternativas podem, alm da dimenso aplica-se, seguir dimenses como: bom ruim ou concordo discordo. Muitas vezes a dimenso utilizada apenas uma conseqncia da reformulao do estmulo/item. Avaliam-se objetos ou aes como bons ou ruins. A avaliao de objetos aplica-se ao respondente, ou concorda-se que objetos ou aes tm uma determinada caracterstica: As oportunidades de lazer na cidade so: boas ... ruins vs. Existem oportunidades de lazer nesta cidade: concordo ... discordo. Convm formular as perguntas de um conjunto de itens de maneira que seu conjunto possa ser respondido na mesma dimenso (veja Sommer, 1991). Conforme mencionado anteriormente, uma srie de itens tratando de um mesmo assunto recebe uma introduo comum orientando o respondente: apresenta a temtica do conjunto, informa quanto s alternativas e d instrues concretas, p. ex., faa um crculo em volta do nmero que melhor representa sua avaliao. Geralmente se usam quatro ou cinco alternativas nas escalas tipo Likert, embora se encontrem tambm itens com duas, trs, ou at nove alternativas3. No exemplo 10 acima, foram utilizadas cinco alternativas, um nmero mpar. Uma deciso importante diz respeito ao nmero par ou mpar de alternativas, i., deixar para o respondente a opo de no se comprometer, podendo marcar um ponto neutro no meio de uma escala com nmero mpar de alternativas. H que diferenciar entre no saber opinar sobre um tema e no querer se comprometer. Quando existe a possibilidade do respondente no ter condies de responder, deve-se deixar a alternativa explcita no sei. Posteriormente, entretanto, tal alternativa no dever ser tratada como ponto neutro no meio da escala, uma vez que indefinido = no saber diferente de uma atitude indefinido = mais ou menos no meio de uma escala. Quanto segunda possibilidade - no querer se comprometer - o respondente provavelmente deixaria o item em branco, no sendo conveniente estimular esse comportamento apresentando a alternativa mais ou menos. Independentemente do nmero de alternativas utilizadas, importante que estejam balanceadas. No exemplo acima, existem duas alternativas positivas e duas negativas. O ponto do meio razovel, i., nem positivo nem negativo. No aceitvel seria um grupo de alternativas como excelente, muito bom, bom, razovel, ruim ou pssimo, muito ruim, ruim, razovel, bom. Ambos os exemplos provocam uma avaliao enviesada, em direo positiva ou negativa. Mesmo sem uma alternativa do meio, i., numa escala com um nmero par de alternativas, h que assegurar um balanceamento das

A seguir voc encontrar uma srie de afirmaes a respeito do seu ambiente de trabalho. Solicito que indique quais afirmaes se aplicam a voc e quais no se aplicam. Caso se aplique a voc, faa um crculo em volta da palavra SIM. Caso no se aplique a voc, faa um crculo em volta da palavra NO. O trabalho realmente apresenta desafios. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . Sim No Muitas pessoas parecem deixar o tempo passar. .............................. Sim No

alternativas. Considerando o conjunto de itens que compem um escala tipo Likert, importante que parte dos itens seja invertida de tal maneira que ora concordo (bom, aplica-se) ora discordo' (ruim, no se aplica) represente atitude favorvel nos dois itens da escala de ambiente de trabalho (EAT) de Moos (1987) vide exemplo 11. A concordncia sim com o primeiro item e a discordncia no com o segundo implicam uma atitude favorvel dimenso envolvimento com o trabalho.
CONSIDERAES ESTATSTICAS

Bortz & Dring (1995, p. 167) fazem referncia a um estudo de Matell & Jacoby (1971) em que se argumenta que o nmero de alternativas no influencia a fidedignidade nem a validade a escala, embora seja necessrio lembrar a capacidade discriminatria do respondente.

A diferenciao entre os quatro nveis de escala tem conseqncias importantes quanto complexidade da anlise estatstica possvel. Dados obtidos em qualquer das escalas podem ser apresentados por meio de estatstica descritiva, i., tabelas e grficos. Para utilizar estatsticas inferenciais, que permitem ao pesquisador verificar at que ponto determinadas relaes ou diferenas so sistemticas ou no, h que observar que dados baseados em escalas nominais e ordinais podem ser trabalhados com testes estatsticos no-paramtricos. Dados oriundos de escalas intervalares e de razo vo permitir, alm de estatsticas no-paramtricas, procedimentos paramtricos. medida em que os testes paramtricos so mais poderosos, permitindo inferncias mais complexas, crucial a questo de a escala Likert poder ser considerada ordinal ou intervalar . Bortz & Dring (1995, p. 168) afirmam que a controvrsia acerca deste tema tem longa tradio e parece no haver sido resolvida at hoje. Os puristas podem argumentar, com razo, que as alternativas numa escala Likert representam apenas uma medio em nvel ordinal. Os valores numricos (p. ex., 1, 2, 3 e 4) associados s alternativas discordo fortemente, discordo, concordo e concordo fortemente no permitem operaes formais alm de > . Do ponto de vista prtico, pode-se argumentar que a variabilidade nos intervalos no afeta o poder inferencial de uso de estatsticas paramtricas com dados da escala Likert. Importa salientar que esta flexibilidade no se estende interpretao de mdias baseadas em intervalos variveis. Em outras palavras: para ser cauteloso apropriado utilizar, para fins descritivos, moda e mediana em lugar da

Como Elaborar um Questionrio

mdia; e estatsticas paramtricas para fins inferenciais. Do ponto de vista da anlise estatstica, medies em nvel nominal freqentemente podem ser convertidas em escalas intervalares. Quando existem apenas duas alternativas, codificadas como 0 e 1, no h necessidade de operaes adicionais. Exemplos so perguntas solicitando respostas como sim vs. no, presente vs. ausente, ou sexo. J itens oferecendo mais de duas alternativas, p. ex. estado civil, regio de nascimento, afiliao religiosa, podem ser convertidos em uma srie de alternativas binrias atravs do processo de codificao dummy, permitindo operaes estatsticas reservadas a escalas intervalares e de razo (veja, p. ex., Tabachnick & Fidell, 1996, ou Stevens, 1986).

13

DIFERENAS NOS INSTRUMENTOS

At este ponto tratamos do desenvolvimento de um instrumento para survey como se fosse independente da maneira de aplicao, i., da interao pesquisador respondente. Aps consideraes gerais sobre esta interao, trataremos separadamente de entrevistas pessoais, entrevistas por telefone, aplicao de questionrios pelo telefone e via Internet.
APRESENTAO DOS ITENS

A apresentao dos itens de um survey pode ser conceitualizada como um estmulo de que se espera alguma resposta, algum comportamento, que por sua vez precisa ser de alguma maneira registrado para poder ser analisado. Desta maneira, h potencialmente trs atores envolvidos direta ou indiretamente: quem administra o instrumento, quem responde ao instrumento e quem transcreve a informao registrada no instrumento para o processamento e a anlise dos dados. Enquanto o objetivo da pesquisa verificar e analisar variaes na resposta, devem ser minimizadas a variabilidade no comportamento de quem responde, a variabilidade atribuvel a quem e/ou como se administra o instrumento e a maneira da transcrio das respostas. Vantagens e desvantagens das diferentes formas de aplicao de instrumentos de survey relacionam-se diretamente ao poder de minimizar a variabilidade indesejada e ressaltar a variabilidade desejada. A Tabela 2 sumaria esses inter-relacionamentos. Antes de comentar os quatro modos de apresentar o instrumento de survey, seguem-se algumas consideraes. Estimulao concorrente. No caso do instrumento auto-aplicvel, impossvel controlar o ambiente onde o respondente preenche o questionrio. J numa interao pessoal pode-se controlar - at certo ponto - a estimulao concorrente pela escolha do local. No se deve esquecer

que o comportamento do entrevistador pode representar uma estimulao concorrente: imagina-se manuseando uma prancha com o instrumento, lpis, trs fotos - dentre as quais o respondente deve escolher uma- mais o material usado, alm daquele a ser usado. Se o entrevistador no for bem treinado, correr o risco de confundir o respondente antes de obter alguma informao vlida. Escolhendo para a aplicao um local calmo, de acesso restrito, com uma boa mesa, reduzem-se interferncias indesejadas. Pessoas envolvidas na administrao de survey. Quanto aos atores envolvidos na administrao de um instrumento de survey, ainda se considera o seguinte: o primeiro ator, que apresenta o instrumento ao respondente no contexto de entrevistas, precisa ser bem treinado para assegurar que a estimulao seja a mais semelhante possvel em todos os contatos com os respondentes. A opinio emitida pelo respondente deve representar sua reao s alternativas apresentadas, no a quem as apresentou. Dentro de certos limites, isto pode at ser automatizado quando os itens so apresentados via computador, ou gravados, no caso de entrevistas por telefone. Obviamente, quanto mais padronizada a apresentao dos estmulos, i., dos itens, mais se perde o elemento humano de uma interao, aspecto que leva em conta a situao e o estado de esprito da situao (vide Krosnick, 1999). A preocupao com uma maior padronizao da apresentao dos itens acontece em levantamentos de dados que: (a) se assemelham a testes, (b) solicitam informaes mais objetivas ou (c) coletam dados entre muitos respondentes que precisam ser apurados de maneira rpida. Considerando o segundo ator (o respondente), a maneira de apresentar os estmulos, itens, deve corresponder s suas habilidades, sejam intelectuais (saber ler) ou fsicas (ver, ouvir, discriminar cheiro ou gosto). O que foi dito a respeito da compreenso da linguagem acima estende-se ao uso de smbolos e fotografias. O entendido e interpretado como concordncia'? Aquela foto, caso escolhida pelo respondente como representando um escritrio mais confortvel, permite a inferncia de que o respondente dinmico? Quanto ao modo de registrar as respostas de um survey, convm pensar, desde o planejamento da pesquisa, no processamento e na anlise dos dados. Enquanto respostas a perguntas abertas precisam ser decifradas, transcritas, codificadas, digitadas e verificadas quanto consistncia face s demais respostas (a proverbial mulher de 12 anos que relatou dois abortos e trs gravidezes), o uso de um computador na apresentao dos itens e no registro das respostas facilita a apurao e assegura maior
A plicao do Estm ulo : Controle da variabilidade na Aplicao do Instrumento Baixo Alto Q uestionrio enviado via correio ou aplicado em grupo Q uestionrio enviado via e-mail/internet.

T ranscrio da Resposta : Controle da variabilidade na transcrio das respostas ao instrumento

Baixo

E ntrevista P essoal

Alto

E ntrevista via Telefone

T ab e la 2: Formas de aplicao de instrumentos: vantagens e desvantagens

14

Hartmut Gnther
potencial para transcrever as respostas, a entrevista por telefone - especialmente com apoio de computador - tem grande valor. Embora tambm precise do treinamento dos entrevistadores, reduz-se consideravelmente o uso de papel, visto que as perguntas so apresentadas na tela do computador para o entrevistador, que as l para o entrevistado. A seqncia de perguntas pode ser programada de forma que, dependendo da resposta, uma ou outra pergunta seja indicada para ser a prxima. Admitindo que nem toda a populao tem acesso a telefone, preciso atentar para a representatividade da populao-alvo e da amostra atingida. Em 1988, porm, Rodrigues e colaboradores conseguiram utilizar esta tcnica com sucesso no Brasil (vide tambm, Lavrakas, 1993, 1998).
QUESTIONRIO AUTO-APLICVEL VIA E-MAIL E INTERNET

fidedignidade aos dados. Questionrios que contm apenas perguntas objetivas podem ser acompanhados de um carto especial para registro das respostas, que por sua vez pode ser lido mecanicamente. No caso da transcrio por algum dos dados registrados numa folha de respostas, ou no prprio questionrio, deve-se pensar nas capacidades de quem transcreve ou digita. Antes do instrumento ser entregue ao digitador, deve ter sido limpo' de tal maneira que no requira julgamento adicional por parte dele (p. ex., o respondente marcou um 3 ou um 4 naquele item). O layout do questionrio deve permitir orientao no que diz respeito seqncia da informao a ser transcrita. Se h texto como resposta a perguntas abertas, no somente deve ser legvel, mas tambm claro. Outra questo refere-se ao que deve ser transcrito: o texto todo? apenas uma parte? que parte? O layout e as instrues ao respondente devem facilitar a leitura das respostas pelo digitador. No caso de itens de escolha mltipla, devem ser apresentados nmeros em vez de palavras ou letras e pedir que o respondente os circule em vez de marcar com X.
ENTREVISTA PESSOAL

Do ponto de vista da estandardizao das perguntas e do potencial para transcrever as respostas, a aplicao pessoal de instrumentos a mais problemtica. Alm de exigir treinamento para os aplicadores e para as pessoas que transcrevem as respostas (especialmente a perguntas abertas), o mtodo mais demorado e mais caro. Sua vantagem permitir acesso a informaes mais delicadas, parte ser indispensvel na fase inicial, estudo-piloto de qualquer tipo de procedimento. Em instrumentos auto-aplicveis pode-se trabalhar com imagens ou apresentar vrias alternativas a uma pergunta. No caso de entrevistas, tal uso mais complicado. Estmulos visuais podem ser preparados para apresentao repetida a respondentes em entrevistas pessoais. J no caso de entrevistas por telefone, as alternativas precisam ser curtas para que os respondentes no tenham dificuldade de lembr-las.
QUESTIONRIO AUTO-APLICVEL VIA CORREIO OU EM GRUPO

Do ponto de vista da padronizao das perguntas e do potencial para transcrever as respostas, instrumentos distribudos por meio de e-mail tm grande potencial. Alm do mais, so mais rpidos do que survey por telefone e mais baratos, porque eliminam custos de entrevistador (survey pessoal ou por telefone), papel, impresso, selo (survey pelo correio). A problemtica de amostragem inerente ao uso do telefone para a coleta de dados ainda mais sria no uso de e-mail e Internet: a populao-alvo atingvel mais restrita. Schafer & Dillman (1998) relatam um experimento contrastando diferentes maneiras de contato com respondentes, chegando concluso de que tcnicas utilizadas em survey por correio so igualmente vlidas para surveys por e-mail. Desta maneira, este caminho tem grande potencial para populaes que tm acesso a e-mail, seja dentro de uma organizao, seja por outras caractersticas comuns.

CONCLUSO
A presente captulo tratou de bases conceituais de questionrios, da estrutura lgica, dos elementos e do contexto social da aplicao do instrumento. Concluiu-se o texto com consideraes acerca de diferentes formas de questionrios conforme a maneira de sua aplicao: entrevista individual, pelo telefone, por correio convencional ou eletrnico.

Do ponto de vista da padronizao das perguntas, questionrios auto-aplicveis reduzem essa fonte da variabilidade. No que se refere transcrio das respostas, depende da proporo de perguntas abertas. A desvantagem mais citada de survey por correio a taxa de resposta. Dillman (1972, 1978; Dillman, Christenson, Carpenter & Brooks, 1974; Dillman & Frey, 1974) apresenta uma srie de procedimentos que se tm mostrado eficazes para assegurar uma taxa de devoluo acima de 50 por cento. Por outro lado, Krosnick (1999) cita pesquisas mais recentes que sugerem que baixas taxas de resposta no significam necessariamente baixo grau de representatividade, especialmente no caso de amostras probabilsticas (vide tambm Fraser-Robinson, 1991).
ENTREVISTA PESSOAL VIA TELEFONE

REFERNCIAS
Aday, L. A. (1989). Designing and conducting health surveys. San Francisco: Jossey-Bass. American Psychological Association. (1992). Ethical principles of psychologists and code of conduct. American Psychologist, 47, 1597-1611. Babbie, E. (1992). The practice of social research, 6th ed. Belmont, CA: Wadsworth. Bingham, W. V. D., & Moore, B. V. (1934). How to interview. New York: Harper Collins. Bortz, J. & Dring, N. (1995). Forschungsmethoden und Evaluation (2. Aufl.). Berlin: Springer.. Dillman, D. A. (1972). Increasing mail questionnaire

Do ponto de vista da padronizao das perguntas e do

Como Elaborar um Questionrio

response in large samples of the general public. Public Opinion Quarterly, 36, 254-257. Dillman, D. A. (1978). Mail and telephone surveys: The total design method. New York: Wiley. Dillman, D. A., Christenson, J. A., Carpenter, E. H., & Brooks, R. M. (1974). Increasing mail questionnaire response; A four state comparison. American Sociological Review, 39, 744-756. Dillman, d., & Frey, J. H. (1974). Contribution of personalization to mail questionnaire response as n element of a previously tested method. Journal of Applied Psychology, 59, 297-301. Fink, A., & Kosecoff, J. (1985). How to conduct surveys: A step-by-step guide. Beverly Hills: Sage. Fowler, F. J. (1998). Design and evaluation of survey questions. Em L. Bickman & D. J. Rog (Eds.), Handbook of applied social research methods (pp. 343-374). Thousand Oaks, CA: Sage. Frankel, M. (1983). Sampling theory. Em P. H. Rossi, J. D. Wright, & A. B. Anderson (eds.), Handbook of survey research (pp. 21-67). Orlando, FL: Academic Press. Fraser-Robinson, J. (1991). Mala direta eficaz (K. A. Roque, trad; J. A. Nascimento, reviso). So Paulo, SP: Makron Books do Brasil (original publicado em 1989). Gouveia, V. V., & Gnther, H. (1995). Taxa de resposta em levantamento de dados pelo correio: o efeito de quatro variveis. Psicologia: Teoria e Pesquisa, 11, 163-168. Gnther, H., Brito, S. M. O., & Silva, M. S. M. M. (1989). Relao entrevistador - entrevistado: Um exemplo de tcnica de entrevista com grupos marginalizados: Meninos na rua. Psicologia: Reflexo e Crtica, 4 (1/2), 12-23. Gnther, H. & Lopes, Jr., J. (1990). Perguntas abertas vs perguntas fechadas: Uma comparao emprica. Psicologia: Teoria e Pesquisa, 6, 203-213. Henry, G. T. (1990). Practical sampling. Thousand Oaks, CA: Sage. Henry, G. T. (1998). Practical sampling. Em L. Bickman & D. J. Rog (Eds.), Handbook of applied social research methods (pp. 101-126). Thousand Oaks, CA: Sage. Judd, Ch. M., Smith, E. R., & Kidder, L. H. (1992). Research methods in social relations, 6th ed. Fort Worth, TX: Holt, Rinehart & Winston. Kish, L. (1965). Survey sampling. New York: Wiley. Kish, L. (1987). Statistical design for research. New York: Wiley. Krosnick, J. A. (1999). Survey research. Annual Review of Psychology, 50, 537-567. Lavrakas, P. J. (1993). Telephone survey methods: Sampling, selection, and supervision (2nd ed.). Thousand Oaks: Sage. Lavrakas, P. J. (1998). Methods for sampling and interviewing in telephone surveys. Em L. Bickman & D. J. Rog (Eds.), Handbook of applied social research methods (pp. 429-472). Thousand Oaks, CA: Sage. Mangione, Th. W.. (1998). Mail surveys. Em L. Bickman & D. J. Rog (Eds.), Handbook of applied social research methods (pp. 399-427). Thousand Oaks, CA: Sage. Matell, M. S., & Jacoby, J. (1971). Is there an optimal number of alternatives for Likert scale items? Study I: Reliability and validity. Educational and Psychological Measurement, 31, 657-674. Milgram, S. (1974). Obedience to authority: An experimental view. New York: Harper & Row. Moos, R. H. (1987). The social climate scales. A user's guide. Palo

15

Alto, CA: Consulting Psychologists Press, Inc. Pareek, U., & Rao, T. V. (1980). Cross-cultural surveys and interviewing. Em H. C. Triandis & J. W. Berry (Eds.), Handbook of cross-cultural psychology: Methodology, vol. 2 (pp. 127-179). Boston: Allyn & Bacon. Pasquali, L. (1997). Psicometria: teoria e aplicaes. Braslia, DF: Editora UnB. Rodeghier, M. (1996). Surveys with confidence: A practical guide to survey research using SPSS. Chicago: SPSS Inc. Rodrigues, A., Lobel, S. A., Jablonski, B., Monnerat, M., Corga, D., Diamico, K., Pereira, M., & Ferraz, A. (1988). A imagem do politico brasileiro. Psicologia: Teoria e Pesquisa, 4, 2-11. Schaffer, D. R., & Dillman, D. A. (1998). Development of a standard e-mail methodology. Publica Opinion Quarterly, 3, 378-397. Schuman, H., & Kalton, G. (1985). Survey methods. Em G. Lindzey & E. Aronson (eds.), Handbook of social psychology, 3rd ed., Vol 1, (pp. 635-697). New York: Random House. Schuman, H., & Presser, S. (1981). Questions and answers in attitude surveys: Experiments on question form, wording , and context. New York: Academic Press. Siegel, S. (1975). Estatstica no-paramtrica para as cincias do comportamento (trad. A. A. de Farias e E. Nick). So Paulo: McGraw-Hill do Brasil. (obra original publicada em 1956). Silva, A. V. da. (1999). Comportamentos de motoristas de nibus: itenerrio urbano, estressores ocupacionais e estratgias de enfrentamento. Braslia: UnB, Dissertao de Mestrado. Singer, E., van Hoewyk, J., & Maher, M. P. (1998). Does the payment of incentives create expectation effects? Public Opinion Quarterly, 62, 152-164. Solrzano, I. M. (1991). Padres de resposta e taxa de participao em levantamentos de campo: Aplicao ao problema do rudo urbano. Braslia: UnB, Dissertao de Mestrado. Sommer, R. (1991). Literal vs. metaphorical interpretations of scale terms: A serendipetous natural experiment. Educational & Psychological Measurement, 51, 1009-1012. Sommer, B., & Sommer, R. (1997). A practical guide to behavioral research: Tools and techniques (4th ed.). New York: Oxford U Press. Stevens, J. (1986). Applied multivariate statistics for the social sciences. Hillsdale, NJ: Lawrence Erlbaum. Sudman, S. (1983). Applied sampling. Em P. H. Rossi, J. D. Wright, & A. B. Anderson (Eds.), Handbook of survey research (pp. 145 - 194). Orlando, FL: Academic Press. Sudman, S., & Bradburn, N. M. (1982). Asking questions. San Francisco, CA: Jossey-Bass. Tabachnick, B. G., & Fidell, L. S. (1996). Using multivariate statistics (3rd ed.). New York: HarperCollins. Williams, B. (1978). A sampler on sampling. New York: Wiley. Yaremko, R. K., Harari, H., Harrison, R. C., & Lynn, E. (1986). Handbook of research and quantitative methods in psychology. Hillsdale, NJ: Lawrence Erlbaum. Zdep, S. M., Rhodes, I. N., Schwarz, R. M., & Kilkenny, M. J. (1989). The validity of the randomized response technique. Em E. Singer & S. Presser (Eds.)., Survey research methods: A reader (pp. 385-390). Chicago: U Chicago Press. (Originalmente em Public Opinion Quarterly, 1979, vol 43, nr 4).