Introduo 1

Este livro versa sobre padres e procedimentos prticos para levantamentos

feitos a fim de fornecer descries estatsticas de pessoas por meio de pergun-
tas, normalmente aplicadas em uma amostra. Pesquisa abrange amostra-
gem, com formulao de questes e com mtodos de coleta de dados. Aqueles
que querem coletar, analisar ou ler sobre dados de pesquisa aprendero
como os detalhes de cada aspecto de uma pesquisa podem afetar sua exati-
do, sua preciso e sua credibilidade.

O assunto deste livro a coleta de dados em pesquisas sociais. Isso in-

clui os procedimentos comuns, os padres para boa prtica e as implicaes
das diversas decises de projetos para a qualidade do levantamento de da-
dos. A proposta deste livro fornecer uma base slida para a avaliao dos
procedimentos de coleta de dados para aqueles que querem coletar, analisar
ou ler sobre dados de pesquisa. Os leitores viro a entender as formas pelas
quais os detalhes da coleta de dados esto relacionados com a confiana que
se pode ter em nmeros e estatsticas baseados em levantamentos.
Existem vrios processos de coleta de dados e de medidas que so
chamados de levantamento. Este livro foca naquelas pesquisas que tm
as seguintes caractersticas:
O objetivo do levantamento produzir estatsticas, isto , descri-
es quantitativas ou numricas sobre alguns aspectos de uma
populao.
A principal forma de coletar informao por meio de perguntas
feitas s pessoas; suas respostas constituem os dados a serem ana-
lisados.
12 Floyd J. Fowler Jr.

Em geral, a informao coletada apenas sobre uma frao da po-

pulao, isto , uma amostragem, e no sobre cada membro dela.

RAZES PARA LEVANTAMENTOS

Na constituio dos Estados Unidos, est especificado que uma pes-

quisa que siga os critrios aqui citados deve ser realizada a cada 10 anos.
No censo decenal, estatsticas sobre uma populao so produzidas por
meio de perguntas feitas s pessoas. Nenhuma amostragem, contudo, est
envolvida; os dados so coletados sobre casa pessoa da populao.
O propsito do censo decenal contar as pessoas como a base
para garantir uma representao apropriada na House of Representatives*.
O censo, contudo, tambm se tornou a maior fonte de informao para
vrios outros propsitos. Alm de simplesmente contar, ele coleta dados
sobre raa, idade, composio familiar, educao, tipo de habitao e v-
rias outras caractersticas.
O contedo do censo decenal expandiu-se para atender s necessi-
dades dos rgos governamentais e dos pesquisadores por dados descri-
tivos. Isso, contudo, cobre apenas uma pequena parte do que se quer sa-
ber sobre as populaes, e seu valor limitado porque ocorre apenas
uma vez por dcada. Para fornecer dados que preencham essas lacunas
de informao, pesquisas com finalidade especfica tornaram-se parte
predominante da vida americana desde a dcada de 1930.
A maioria das pessoas est familiarizada com trs usos das tcni-
cas de pesquisa: a medio da opinio pblica para artigos de jornais e
revistas, a medio do ponto de vista poltico e das opinies para ajudar
os candidatos nas eleies, e as pesquisas de mercado, destinadas a des-
cobrir as preferncias e os interesses do consumidor. Cada um desses
programas bem desenvolvidos de pesquisa de levantamento destinado
principalmente a escutar os sentimentos subjetivos do pblico. H, alm
disso, numerosos fatos sobre comportamentos e sobre situaes que s
podem ser obtidos por meio de perguntas feitas a uma amostra de pessoas
sobre elas mesmas. Provavelmente no h rea de polticas pblicas a
que a metodologia de pesquisa de levantamento no tenha sido aplicada.
A seguir, h uma lista abreviada de algumas das principais aplicaes:
*
N. de T.: The House of Representatives a maior e menos poderosa parte do Congresso
dos Estados Unidos. a organizao que faz as leis naquele pas. Podemos compar-la
com as cmaras de deputados.
 Pesquisa de levantamento 13

Taxas de desemprego, conforme divulgadas rotineiramente pelo

Bureau of Labor Statistics*, bem como vrias outras estatsticas
sobre empregos e trabalho, so baseadas em pesquisas domicilia-
res realizadas pela Bureau of the Census**. Pesquisas paralelas
sobre atividade comercial e industrial so realizadas para descre-
ver a produo e a necessidade de mo de obra.
O rendimento das pessoas e a forma como elas gastam seu di-
nheiro constitui outra rea na qual apenas levantamentos podem
fornecer dados confiveis. Os padres de gastos dos consumido-
res e suas expectativas revelaram-se importantes na previso das
tendncias na economia.
A National Health Interview Survey*** vem sendo realizada pela
Bureau of the Census para o National Center for Health Statistics
desde o final da dcada de 1950. Essa pesquisa coleta dados b-
sicos sobre condies de sade, sobre o uso dos servios de sa-
de e sobre os comportamentos que afetam o risco de doenas.
Todos esses so tpicos para os quais apenas bons levantamentos
podem fornecer dados adequados.
A principal fonte de dados sobre eventos criminais vem sendo tradi-
cionalmente os registros do departamento de polcia. Os registros
policiais, contudo, incluem apenas as ocorrncias que so informa-
das pelas pessoas polcia. Para a maioria dos crimes envolvendo
vtimas, as pesquisas fornecem medidas mais confiveis das taxas
de ocorrncia dos crimes e das caractersticas das vtimas. O Levan-
tamento Nacional do Crime foi lanado na dcada de 1970 para
fornecer tais dados. Alm disso, os levantamentos so a nica forma
de medir as preocupaes e os medos das pessoas sobre o crime.
Uma das solicitaes de levantamentos mais antigas do Ministrio
da Agricultura dos Estados Unidos. O Ministrio entrevista agricul-
tores para estimar a taxa na qual diferentes culturas (crops) sero
plantadas e para prever a disponibilidade de produtos alimentcios.

*
N. de T.: The Bureau of Labor Statistics uma agncia de pesquisa do Ministrio do Tra-
balho dos Estados Unidos que compila estatsticas sobre horas de trabalho, sobre ndices
de emprego e desemprego, sobre preos ao consumidor e sobre outras variveis.
**
N. de T.: The Bureau of the Census a agncia governamental responsvel pelo censo
nos Estados Unidos.
***
N. de T.: O National Health Interview Survey uma entrevista familiar administrada
pelo National Center for Health Statistics (NCHS), que a principal fonte de informa-
es sobre a sade da populao dos Estados Unidos.
14 Floyd J. Fowler Jr.

A sade mental, as necessidades de transporte e padres de uso,

o comportamento poltico, as caractersticas de habitao, bem
como seu custo e sua adequao s necessidades familiares e a
satisfao do trabalhador so outros exemplos de reas nas quais
levantamentos so amplamente utilizados. O maior coletor de
dados de pesquisa nos Estados Unidos indubitavelmente o go-
verno federal, particularmente a Bureau of Census e o Ministrio
da Agricultura. Alm disso, milhares de pesquisas so feitas a
cada ano por universidades, sem fins lucrativos, e por organiza-
es de pesquisa que oferecem seus servios.

Patrocinar a coleta de dados de uma pesquisa com um objetivo

especfico uma soluo um tanto cara para um problema de informa-
o. Antes de empenhar tal esforo, deve-se explorar a fundo a possibi-
lidade de colher a mesma informao em registros existentes ou de ou-
tras fontes. Embora algumas pessoas pensem em um levantamento co
mo primeiro esforo para tentar estudar alguma coisa sobre uma popu-
lao, um estudo de amostragem deve ser realizado apenas depois de
ser garantido que a informao no pode ser obtida de outras formas.
Mesmo tendo uma abordagem conservadora, comum achar que ape-
nas uma pesquisa com objetivo especfico pode fornecer as informaes
necessrias. Alm de atender as necessidades de dados que no esto
disponveis em outro lugar, h trs propriedades potenciais dos dados
de uma levantamento corretamente feito que devem faz-los preferveis
aos dados de outras fontes:
A probabilidade da amostragem permite ter a confiana de que a
amostra no tendenciosa e estimar quo precisas podem ser as
informaes. Dados advindos de uma amostra corretamente es-
colhida so muito melhores do que os de uma amostra composta
por aqueles que comparecem a encontros, falam mais alto, escre-
vem cartas e que aparentam ser convenientes sondagem.
As medidas padronizadas que so constantes em todos os res-
pondentes garantem que a informao comparada obtida sobre
todos os que so descritos. Sem tais medidas, estatsticas signifi-
cativas no podem ser produzidas.
Para atender necessidades de anlise, uma pesquisa com objetivo
especfico deve ser a nica forma de garantir que todos os dados
necessrios para uma anlise de dados estejam disponveis e pos-
sam ser relacionados. Mesmo que haja informao sobre algum
 Pesquisa de levantamento 15

conjunto de eventos, isso no deve ser comparado com outras ca-

ractersticas necessrias para realizar a anlise pretendida. Por
exemplo, os registros de alta hospitalar invariavelmente carecem
de informaes sobre a entrada de pacientes. Por isso uma pesqui-
sa que colete informaes sobre os dados de entrada e de hospita-
lizao desses indivduos necessria para estudar a relao entre
o ingresso de uma pessoa e sua experincia hospitalar.

H sempre algumas informaes disponveis em um dado tpico do

que as pessoas dizem, das impresses ou de registros; h tambm sempre
imperfeies em tais dados. Alm de uma avaliao das informaes ne-
cessrias, a deciso de fazer uma pesquisa tambm deve depender da dis-
ponibilidade dos recursos humanos. A menos que o pessoal necessrio e
que o conhecimento especializado, ou os recursos para compr-los, este-
jam disponveis, o resultado da pesquisa pode no ser muito bom. Isso nos
leva ao tpico da prxima seo: O que constitui uma boa pesquisa?

COMPONENTES DOS LEVANTAMENTOS

Como as medidas de todas as cincias, as medies de pesquisas

sociais tambm no esto livres de erros. Os procedimentos usados para
conduzir uma pesquisa tm um efeito importante na probabilidade de os
dados resultantes descreverem exatamente o que pretendem descrever.
Uma pesquisa por amostra rene trs metodologias: amostragem,
formulao de questes e coleta de dados. Cada uma dessas atividades
possui vrias aplicaes fora da pesquisa por amostra, mas sua combina-
o essencial para a concepo de uma boa pesquisa.

Amostragem
Um censo significa reunir informaes sobre cada indivduo de
uma populao. O maior desenvolvimento no processo de fazer levanta-
mentos teis foi aprender como coletar amostras: selecionar um peque-
no subgrupo de uma populao que represente toda a populao. As
chaves para uma boa amostragem so encontrar uma forma de dar a to-
dos (ou a quase todos) os membros da populao a mesma chance de
ser selecionado e usar mtodos de probabilidade para escolher a amos-
tra. Os primeiros levantamentos e sondagens basearam-se em amostras
16 Floyd J. Fowler Jr.

de convenincia ou em amostragens que excluam parcelas significativas

da populao. Isso no forneceu nmeros confiveis e com credibilidade.
O Ministrio da Agricultura dos Estados Unidos atualmente desenvol-
ve os procedimentos para esboar as amostragens de probabilidades abran-
gentes necessrias para fornecer descries estatisticamente confiveis de po-
pulaes que vivem em uma determinada rea. Os procedimentos envolvidos
do trabalho projetado para amostragens de reas de terra para prever os ren-
dimentos da colheita; a amostragem de unidades habitacionais e as pessoas
que vivem nessas habitaes eram simplesmente uma extenso daquele tra-
balho. Durante a Segunda Guerra Mundial, um grupo de cientistas sociais foi
abrigado neste Ministrio para fazer pesquisas sociais relacionadas ao esforo
da guerra. Foi ento que a rea da amostragem probabilstica tornou-se fir-
memente arraigada amostragem geral de populaes em pesquisas sociais.
A rea da amostragem probabilstica ainda o mtodo de escolha para pes-
quisas de entrevista social de famlias. Converse (1987) promoveu uma exce-
lente descrio da evoluo dos mtodos de pesquisa nos Estados Unidos.
As estratgias para a seleo da amostragem vm sendo refinadas
desde 1950. O maior avano foi o desenvolvimento da discagem aleatria
de dgitos (random-digit dialing RDD), que permitiu a incluso nas pesqui-
sas por telefone das famlias que no tinham os seus nmeros de telefone
cadastrados (Waksberg, 1978). Os princpios de uma boa prtica de amos-
tragem, contudo, vm sendo bem desenvolvidos por um longo tempo.

Formulao de questes
Usar questes como medida outra parte essencial do processo de
pesquisa. Os primeiros esforos de levantamento, que representam ex-
tenses do jornalismo, no foram cuidadosos acerca da forma como as
questes foram colocadas. Logo se tornou evidente, contudo, que enviar
um entrevistador com um conjunto de questes sem fornecer termos es-
pecficos para as questes produziu diferenas significativas nas respos-
tas que foram obtidas. Desta maneira, no incio do sculo XX, os pesqui-
sadores comearam a formular questes padro para medir fenmenos
subjetivos. Mais uma vez, os pesquisadores do Ministrio da Agricultura
dos Estados Unidos receberam o crdito por estender o uso das questes
padro, na dcada de 1940, para situaes nas quais informaes fac-
tuais ou objetivas foram solicitadas. Payne (1951) publicou um livro de
referncia fornecendo diretrizes para formular questes claras que os en-
trevistadores pudessem administrar. Likert (1932) recebeu os crditos
 Pesquisa de levantamento 17

por construir uma ponte entre as elaboradas tcnicas de escala desenvol-

vidas por psiclogos psicofsicos* para medir fenmenos subjetivos (por
exemplo, Thurstone e Chave, 1929) e as necessidades prticas da pes-
quisa de levantamento social aplicada.
O maior avano na formulao de questes dos ltimos 20 anos
foi a melhoria das estratgias de avaliao das questes. Mais do que an-
tes, os pesquisadores agora avaliam as questes para descobrir se elas
so bem compreendidas e se as respostas tm sentido (ver Press et al.,
2004). Pr-testes de pesquisas vm sendo mais sistemticos, usando an-
lises de entrevistas gravadas para identificar questes problemticas.
Como resultado, a escolha dos termos da questo est se tornando mais
objetiva e menos uma questo de juzo de investigao.

Entrevista
Embora nem todos os levantamentos envolvam entrevistas (como
alguns nos quais os participantes respondem a questes autoadministra-
das), certamente comum usar uma entrevista para fazer perguntas e gra-
var as respostas. Quando entrevistadores so usados, importante evitar
que eles influenciem as respostas dadas pelos respondentes e ao mesmo
tempo maximizar a preciso com que as perguntas so respondidas.
O primeiro passo importante para melhorar a coerncia dos entre-
vistadores foi dar a eles questes-padro. Posteriormente se descobriu que
tambm era necessrio treinar os entrevistadores para aplicar uma pesqui-
sa de modo que evitassem introduzir vieses importantes nas respostas que
obtinham (Friedman, 1942). Hyman, Feldman e Stember (1954) publica-
ram uma srie de estudos documentando outras formas pelas quais os en-
trevistadores poderiam influenciar as respostas obtidas. Seu trabalho con-
duz ao treinamento mais elaborado dos entrevistadores no que diz respei-
to s estratgias de sondagem quando respostas incompletas so dadas e
manipulao dos aspectos interpessoais da entrevista de forma imparcial.
Cannell, Oksenberg e Converse (1977) avanaram o processo de tentar re-
duzir a variao entre entrevistadores especificando o roteiro de apresen-
taes e de estmulo que estes do aos entrevistados ao limitar uma dis-
cusso no estruturada. A importncia do treinamento e da superviso dos
entrevistadores para garantir a qualidade dos dados tem agora sido bem
documentada (Billiet e Loosveldt, 1988; Fowler e Mangione, 1990).
*
N. de R.T.: Psicologia Psicofsica um ramo da psicologia que estuda a relao dos
estmulos com a resposta dos indivduos . uma rea da psicologia experimental.
18 Floyd J. Fowler Jr.

Formas de coleta de dados

At a dcada de 1970, a maioria das pesquisas acadmicas e go-
vernamentais era feita pessoalmente a domiclio por entrevistadores.
Quando ter um telefone tornou-se quase universal nos Estados Unidos,
as entrevistas por meio deste tornaram-se a maior forma de coleta de da-
dos. A atual fronteira para tal atividade a internet. Seu uso limitado
porque muitas pessoas no tm acesso ela e porque as listas de estrat-
gias para a formulao de amostragens de endereos de e-mail limita-
da. Contudo, conforme o acesso rede mundial de computadores au-
menta e as estratgias de amostragem evoluem, o uso da internet para
coletar dados de levantamento tambm aumenta.

Planejamento total do levantamento

Em muitos aspectos os princpios para uma boa prtica de pesqui-
sa foram bem desenvolvidos na dcada de 1950. Contudo, naturalmente,
os procedimentos e ferramentas mudaram em resposta s novas tecnolo-
gias e aos avanos cientficos. Em alguns casos, necessitamos de bons es-
tudos sobre como coletar dados para um propsito especfico. Porm,
mesmo quando as melhores prticas so estabelecidas, h variao na
qualidade dos procedimentos que so usados.
Existem vrias razes para a variao de qualidade. Para algumas
pesquisas, nmeros imprecisos sero suficientes. A falta de financiamen-
to e de pessoal adequado, bem como a falta de conhecimento metodol-
gico, sem dvida contribuem para uma prtica pobre em alguns casos.
Tambm h algumas controvrsias sobre o valor da amostragem provvel
rigorosa e da formulao padronizada de questes (ver Converse, 1987;
Groves, 1989; Schober e Conrad, 1997; Turner e Martin, 1984). Uma ca-
racterstica do modelo de pesquisa de levantamento que parcialmente
culpada, contudo, a falha dos pesquisadores em unir procedimentos de
alta qualidade em todas as trs reas salientes; no incomum ver pes-
quisadores atenderem cuidadosamente alguns aspectos da boa pesquisa
enquanto negligenciam outros. A orientao crtica deste livro a cha-
mada perspectiva total do projeto de levantamento.
Todo levantamento envolve um nmero de decises que tem o po-
tencial de melhorar ou de desvirtuar a exatido (ou preciso) das esti-
mativas da pesquisa. Em geral, as decises que levariam a ter dados me-
lhores envolvem mais dinheiro, mais tempo ou outros recursos. Desta
 Pesquisa de levantamento 19

forma, o projeto de uma pesquisa envolve um conjunto de decises para

otimizar o uso dos recursos. Um projeto ideal levar em conta todos os
aspectos salientes do processo de pesquisa.
Em relao amostragem, questes crticas incluem o seguinte:
a escolha de usar ou no uma amostra probabilstica;
a estrutura de amostra (aquelas pessoas que realmente tm a
chance de ser parte da amostra);
o tamanho da amostra;
o formulao da amostra (a estratgia particular usada para se-
lecionar pessoas ou grupos familiares);
a taxa de resposta (o percentual de amostras para o qual os da-
dos so efetivamente coletados).

No que diz respeito formulao das questes, o pesquisador deve

decidir at que ponto a literatura disponvel garante a confiabilidade e a
validade do projeto do questionrio, o uso a ser feito dos consultores que
so especialistas em formulao de questes e o investimento a ser feito
no pr-teste e na avaliao das questes. Em relao aos entrevistadores,
os pesquisadores tm escolhas a fazer acerca dos tipos de treinamento e
da superviso a dar. Uma deciso de projeto que atravessa todas essas
reas o modo de coleta de dados: no importa se o pesquisador coleta
dados por telefone, por correspondncia, por entrevista pessoal, pela
internet ou por alguma outra forma, e nem como ele os coleta ou se
computadores vo estar envolvidos. A deciso sobre qual modo de coleta
de dados usar tem implicaes importantes no custo da pesquisa e afeta
a qualidade dos dados que sero coletados.
Essas partes, em conjunto, constituem o que chamado de projeto
total de levantamento. Os componentes do projeto so inter-relacionados
de duas formas importantes. Primeiro, a qualidade dos dados no ser
melhor do que a maioria das caractersticas dos erros provveis do proje-
to de pesquisa. No passado, algumas vezes os pesquisadores focaram em
uma ou duas caractersticas do levantamento, tais como o tamanho da
amostra ou a taxa de resposta, para avaliar a qualidade provvel dos da-
dos. As melhores prticas atuais, contudo, necessitam de uma anlise de
todas as caractersticas de projeto anteriormente citadas. Se h um com-
promisso importante ou uma fraqueza em algum aspecto do projeto de
pesquisa, maiores investimentos em outras partes desta no so sensa-
tos. Por exemplo, se so feitas perguntas que os entrevistados provavel-
mente no esto aptos a responder com grande preciso, uma grande
20 Floyd J. Fowler Jr.

amostra que visa reduzir o erro de amostragem ao mnimo provavelmen-

te ser injustificada. De forma semelhante, e talvez at mesmo mais co-
mum, um grande nmero de respostas no melhorar a credibilidade se
a amostra malconcebida, se a taxa de respostas to baixa que faz a
amostra improvvel de ser representativa ou se os entrevistadores so
precariamente treinados e supervisionados.
Para os formuladores e para os usurios de pesquisas de levanta-
mento, o projeto total de levantamento aborda perguntas significativas
sobre todas essas caractersticas, no apenas algumas, quando tentam
avaliar a qualidade de uma pesquisa e a credibilidade de um determina-
do conjunto de dados.

PROPSITOS E OBJETIVOS DESTE TEXTO

Este texto apresenta uma discusso das decises importantes que

acompanham a formulao de qualquer projeto de pesquisa de levanta-
mento, as opes disponveis para os pesquisadores e o significado po-
tencial das vrias opes para a quantidade de erros e a credibilidade
das estimativas do levantamento. Quando apropriado, um conjunto de
procedimentos que podem constituir para uma boa prtica de pesquisa
apresentado. Um grande esforo feito para discutir as realidades e os
problemas prticos com os quais os pesquisadores tero de lutar, bem
como as questes tericas e metodolgicas que esto em jogo; muitas
das deficincias nas coletas de dados originam-se da m execuo de de-
talhes, no da falta de entendimento geral.
Um livro relativamente pequeno como este obviamente tem que re-
fletir sobre um conjunto de escolhas. Livros inteiros podem ser, e tm sido,
dedicados a tpicos como amostragem, formulao de questionrios e pes-
quisa sobre os entrevistadores. Pessoas que planejam conduzir projetos de
pesquisa de levantamento vo querer ler mais. Alm disso, ler um livro
como este (ou qualquer outro) no substitui o aprendizado prtico e o
treinamento com especialistas que possuem slidos conhecimentos meto-
dolgicos e larga experincia na formulao e na execuo de pesquisas.
No entanto, h um papel importante que este livro, por si s, pode repre-
sentar: o de fornecer uma viso abrangente da fonte dos erros e do alcan-
ce das questes metodolgicas na coleta de dados de pesquisa.
H vrias pessoas para quem tal conhecimento ser apropriado e
valioso. Certamente, os cientistas sociais que utilizam dados coletados
 Pesquisa de levantamento 21

por terceiros em seus trabalhos devem ter um entendimento sofisticado

das fontes de erro. Da mesma forma, pessoas que leem sobre estatsticas
baseadas em pesquisas precisam entender os processos usados para a co-
leta de dados. Este livro identifica as questes que as pessoas que usam
os dados precisam perguntar e obter resposta. Alm disso, fornece um
panorama daquilo que aqueles que esto pensando em comprar ou enco-
mendar uma pesquisa precisam ter. Em suma, este livro tem a inteno
de fornecer perspectiva e entendimento para aqueles que sero formula-
dores ou usurios de pesquisas de levantamento, ao mesmo tempo em
que fornece um slido primeiro passo para aqueles que realmente que-
rem saber sobre coleta de dados.

 2 Tipos de erros em levantamentos

Levantamentos so formulados para produzir estatsticas sobre uma popula-

o-alvo. O processo pelo qual isso feito apoia-se na inferncia de caracters-
ticas da populao-alvo a partir das respostas fornecidas por uma amostra de
entrevistados. Este captulo delineia os dois tipos necessrios de inferncias.
Tambm descreve os dois tipos de erro, vis e variabilidade, que podem limitar
a preciso de tais inferncias.

Dois dos principais objetivos da metodologia de pesquisa so mini-

mizar o erro nos dados coletados por levantamentos e medir o erro que
necessariamente parte de toda pesquisa. Os captulos 3 a 9 descrevem
em detalhes estratgias para minimizar e medir erros. Para compreender
esses captulos, e para entender a metodologia dos levantamentos, pri-
meiro necessrio entender o que consideramos por erro.
Como dissemos, o propsito de uma pesquisa fornecer estimativas
estatsticas das caractersticas de uma populao-alvo, de um conjunto de
pessoas. Para fazer isso, designamos um subgrupo de pessoas, uma amos-
tra, de quem tentamos coletar informaes. Uma premissa fundamental
do processo de pesquisa que descrevendo a amostra de pessoas que realmen-
te respondem, descreve-se a populao-alvo. Espera-se que as caractersticas
as quais a pesquisa se designa a descrever estejam presentes no mesmo
grau, e estejam distribudas da mesma forma, na amostra respondente
como o so na populao-alvo como um todo.
A outra caracterstica que define uma pesquisa que os entrevis-
tados respondem a questes. As respostas s questes so usadas para
descrever experincias, opinies e outras caractersticas daqueles que as
 Pesquisa de levantamento 23

respondem. Uma segunda premissa fundamental do processo de pesquisa de

levantamento que as respostas que as pessoas do podem ser usadas para
descrever precisamente as caractersticas dos entrevistados. O grau para o
qual tais respostas no so medidas precisas a segunda fonte fundamen-
tal de erros em pesquisas.
A Figura 2.1 mostra graficamente a forma de anlise com a qual os
dados de pesquisa trabalham e as inferncias sobre as quais isso baseado. O
objetivo estudar as caractersticas da populao-alvo. O material com o qual
trabalhamos consiste das respostas dadas pelos entrevistados nas pesquisas.
Tabulamos as respostas e gostaramos de supor que elas so medidas exatas
das caractersticas dos respondentes que estamos tentando medir. Gostara-
mos, ento, de estar aptos a supor que por descrever a amostra de responden-
tes, estamos descrevendo exatamente toda a populao-alvo.

Caractersticas
da populao

Questo
Quo proximamente a
amostra respondente
reflete a populao

Amostra dos membros

da populao que
responde s questes

Questo
Quo bem as respostas
medem as caractersticas
a ser descritas

Respostas dadas pelos

respondentes

Figura 2.1 Interferncia na pesquisa de levantamento.

Alguns aspectos da metodologia de pesquisa so formulados para

abordar quo estreitamente uma amostra reflete a populao. Outros so
projetados para abordar quo bem as respostas para as questes coletadas
na pesquisa servem como medida para o que elas tm a inteno de me-
dir. O projeto da pesquisa e a forma como a coleta de dados conduzida
podem afetar uma ou ambas dessas fontes potenciais de erros.
24 Floyd J. Fowler Jr.

ERRO ASSOCIADO A QUEM RESPONDE

Toda vez que uma amostra retirada de uma populao maior, h

alguma chance de talvez a amostra diferir da populao total de onde foi
retirada. Um exemplo simples que os estatsticos gostam de usar lanar
uma moeda, que cara de um lado e coroa do outro. Mesmo se a moeda for
perfeita, uma amostra de 10 lanamentos no produzir sempre 5 caras e 5
coroas. Enquanto 5 caras e 5 coroas sero mais comuns, um certo nmero
de amostras de 10 lanamentos produzir 6 caras ou 4 caras; 3 e 7 caras
sero menos comuns; 8 ou 2 caras sero ainda menos comuns; distribuies
ainda mais extremas sero cada vez menos comuns, mas at mesmo essas
ocorrero se amostras suficientes de 10 lanamentos de uma moeda forem
realmente tentadas. Da mesma forma, se uma populao consiste 50% de
homens e 50% de mulheres, qualquer amostra especfica pode ter mais ou
menos mulheres do que se esperaria da populao como um todo.
Em uma pesquisa por amostra, normalmente temos apenas uma
nica amostra a partir da qual generalizar. Por acaso, a amostra pode
e ir diferir ligeiramente do que pareceria se refletisse perfeitamente a
distribuio de caractersticas na populao. Um objetivo da metodologia
de pesquisa minimizar as diferenas aleatrias entre a amostra e a po-
pulao. A forma como a amostra projetada e selecionada pode afetar
em quo estreitamente a amostra provvel de refletir as caractersticas
da populao de onde foi retirada.
Um erro preocupante para os metodologistas de pesquisa essa
variao aleatria das verdadeiras caractersticas de uma populao. Essa
variao, o possvel erro que decorre unicamente do fato de os dados
serem coletados de uma amostra e no de cada membro da populao,
chamado de erro de amostragem. Esse um tipo de erro que os metodolo-
gistas de pesquisa tentam minimizar.
Um segundo tipo de erro que afeta a relao entre uma amostra de
respondentes e a populao o vis. Vis significa que de alguma forma
sistemtica as pessoas que respondem a uma pesquisa so diferentes da
populao-alvo como um todo.
H trs passos no processo de coleta de dados de uma amostra, cada
um dos quais poderia, potencialmente, introduzir vieses na amostra:
1. O primeiro passo envolve escolher a estrutura de amostra, aque-
les que realmente tm a chance de ser selecionados. Se h algu-
mas pessoas na populao-alvo que no tm nenhuma chance de
ser selecionadas para a amostra, e se elas so de alguma forma
 Pesquisa de levantamento 25

consistentemente diferentes daquelas que tm a chance de ser

selecionadas, o amostra resultante ser tendenciosa dessa for-
ma. Como exemplo, a maioria das pesquisas nos Estados Unidos
exclui pessoas que vivem em instalaes residenciais supervisio-
nadas, como prises, conventos e casas de repouso, e excluem
as pessoas que no tm endereo fixo. A maioria das pesquisas
por telefone no apenas excluem aqueles sem este servio, mas
tambm aquelas famlias que possuem apenas celulares. Para as
variveis nas quais essas pessoas que esto includas so diferen-
tes daquelas que so sistematicamente excludas, as amostras das
quais os dados so coletados sero tambm tendenciosas.
2. Se de alguma forma o processo de seleo de quem est na amos-
tra no aleatrio, o resultado pode ser uma amostra de respon-
dentes que so diferentes da populao-alvo como um todo. Por
exemplo, se uma amostra formada por pessoas que so volun-
trias para estar em uma pesquisa, elas provavelmente tm um
perfil de interesses diferente daquelas que no so voluntrias.
3. Finalmente, a falta em coletar respostas de todos os selecionados
para estar na amostra a terceira fonte potencial de vieses. Al-
gumas pessoas no esto disponveis para responder questes;
algumas so incapazes de faz-lo, devido a sua sade ou a suas
competncias lingusticas; algumas se recusam a responder. Na
medida em que aqueles que esto indisponveis, incapazes ou in-
dispostos a responder questes so diferentes do resto da popula-
o de formas que afetam as respostas da pesquisa, os resultados
desta poder ser tendenciosos.

importante entender a distino entre os dois tipos de erros em

dados. O erro de amostragem, o primeiro tipo de erro que foi discutido,
um erro aleatrio. s vezes, por acaso, haver vrias mulheres na amos-
tra, s vezes poucas, mas em mdia, uma srie de amostras devidamente
coletadas ter muita proximidade com a mesma porcentagem de mulhe-
res que a populao como um todo. Um desafio para os metodologistas
minimizar a variabilidade de amostra para amostra para aumentar a pro-
babilidade de que qualquer amostra dada muito prxima da populao
como um todo.
Em contraste, aspectos do projeto ou da execuo de uma pesqui-
sa que enviesam as amostras produziro, em mdia, estimativas que so
consistentemente diferentes da populao-alvo como um todo. Portanto,
26 Floyd J. Fowler Jr.

quando as amostras so retiradas apenas daqueles que vivem em grupos

familiares, excluindo os sem-teto e os que vivem em albergues, a renda
mdia provavelmente ser maior naqueles que respondem do que entre
aqueles que no tiveram a chance de responder. Aqueles que vivem em
famlia tambm muito provavelmente sero casados e tero empregos di-
ferentemente que aqueles sem casa. As estimativas dos que responderam
a pesquisas baseadas em famlias iro sistematicamente superestimar a
porcentagem da populao completa que tem essas caractersticas.
Um ltimo ponto a salientar que a variabilidade aleatria da
estimativa da amostra, o erro de amostragem, e os vieses associados
amostra, no so necessariamente relacionadas a tudo. Se um plano de
pesquisa sistematicamente exclui, ou representa de maneira menor, algu-
mas pessoas que so distintivas de forma relevante para os objetivos da
pesquisa, bem possvel ter uma estimativa muito consistente e estvel,
com erros de amostragem muito pequenos, que consistentemente ten-
denciosas e sub ou superestima algumas caractersticas da populao.

ERRO ASSOCIADO S RESPOSTAS

A fim de entender os erros associados s respostas para questes de

pesquisa, primeiro precisa-se saber o que est sendo medido. Na teoria,
pode-se dividir o que a pesquisa tenta medir em duas categorias: fatos
objetivos e estados subjetivos. Fatos objetivos incluem a altura da pessoa,
se ela est ou no empregada e se ela votou ou no na ltima eleio.
Estados subjetivos incluem quanto do tempo a pessoa se sentiu cansada e
se ela tem ou no uma viso poltica liberal ou conservadora.
Conceitualmente, a forma como avaliamos as respostas para uma
questo para mensurar quo bem elas correspondem verdade. Se es-
tamos perguntando aos respondentes da pesquisa sobre fatos objetivos,
como sua altura ou se esto ou no empregados, teoricamente podera-
mos obter informaes independentes contra as quais as respostas sero
avaliadas para a questo da pesquisa. Poderamos medir a altura dos res-
pondentes; poderamos verificar o status do emprego olhando os regis-
tros. Poderamos avaliar diretamente o quo precisas eram as respostas.
Em contraste, no h forma objetiva de verificar ou de avaliar o relato da
pessoa sobre o quanto do tempo ela se sentiu cansada.
Psicometristas, aqueles especializados na medio dos estados psi-
colgicos, pensam nas respostas como sendo formadas por dois componen-
 Pesquisa de levantamento 27

tes: o valor verdadeiro, o que um respondente perfeito com conhecimentos

perfeitos poderia dar como resposta, mais alguns elementos de erro.
Xi = ti + ei
Onde
xi a resposta dada pelo indivduo i
ti o valor verdadeiro para o indivduo i
ei o erro na resposta dada pelo indivduo i

Os erros podem ser causados por todos os tipos de coisas: o no

entendimento da questo, no ter a informao necessria para responder
e distorcer as respostas para que paream boas so apenas alguns exem-
plos. Alguns entrevistados talvez no saibam exatamente a sua altura;
outros podem arredondar sua altura para cima ou para baixo, pensando
que ser mais alto ou mais baixo pode ser mais atrativo. As estimativas dos
respondentes de quo cansados eles estiveram durante a ltima semana
podem ser afetadas por quo cansados eles esto no momento em que
respondem s questes. O ponto que na medida em que as respostas so
afetadas por outros fatores que no os fatores sobre os quais a resposta
deveria ser baseada, h erro na resposta.
Validade o termo que os psiclogos usam para descrever a relao
entre uma resposta e alguma medida do escore verdadeiro. Olhando para
a equao anterior, o objetivo do psicometrista e do metodologista de pes-
quisa fazer o erro de termo (e) to pequeno quanto possvel para que as
respostas reflitam principalmente o escore verdadeiro (ou resposta).
De certa forma, o erro de termo em psicometrias similar ao erro
de amostragem discutido anteriormente. Se o erro associado a respostas
aleatrio, resultando em respostas que algumas vezes erram em uma
direo, algumas vezes em outra, o resultado menos certo de confiana
em quo bem as respostas esto medindo o que queremos que meam.
Quanto maior o valor de e (na equao anterior), maior a chance de que
alguma resposta dos indivduos estar errada. Contudo, em muitas res-
postas entre os indivduos, a resposta mdia deve ser a mesma que o valor
verdadeiro mdio.
Para questes formuladas para medir fatos objetivos, mas no esta-
dos subjetivos, h tambm o potencial de que as questes sero inclinadas.
De uma forma completamente anloga a vieses com respeito s amostras,
o que vis significa nesse contexto que em mdia os erros nas respostas,
a forma pela qual as respostas diferem dos escores verdadeiros, so mais
28 Floyd J. Fowler Jr.

provveis de estar em uma direo do que em outra. Como exemplos,

respondentes em mdia subnotificam quantos cigarros eles fumam e a
quantidade de lcool que bebem, enquanto tendem a exagerar se votaram
ou no. Estimativas desses comportamentos so enviesados sistematica-
mente diferentes dos escores verdadeiros.
A ideia de validade para medidas subjetivas no pode ser observada
diretamente, mas inferida de estudos de como as respostas so relatadas
para outras medidas similares. Os clculos so mais complicados, mas o re-
sultado final de estimativas de validade so os mesmos: uma estimativa de
quo bem as respostas refletem o constructo que so projetadas para medir.
(Cronbach e Meehl, 1955; Saris e Andrews, 1991). Em contraste, uma vez
que no podemos medir diretamente o valor verdadeiro dos estados subje-
tivos, tambm no podemos medir vieses o grau para o qual as respostas
sistematicamente diferem do escore verdadeiro em um sentido.

RECAPITULANDO A NATUREZA DOS ERROS EM LEVANTAMENTOS

Portanto, para ambas as inferncias-chave que so cruciais para a

qualidade das estimativas da pesquisa, a inferncia de que as respostas
podem ser usadas para descrever precisamente uma amostra de respon-
dentes e que podemos generalizar precisamente a partir dela para uma
populao inteira, h dois tipos anlogos de erros: a variabilidade alea-
tria ao redor dos valores verdadeiros e diferenas sistemticas (envie-
sadas) entre as amostras que respondem a questes e a populao como
um todo ou entre as respostas dadas e os valores verdadeiros para aque-
les que esto respondendo. Ao longo de todo o livro, como o erro vem
sendo discutido, os leitores precisam estar certos de que sabem qual tipo
de erro implicado. este o problema da generalizao da amostra de
respondentes para a populao ou da generalizao das respostas para
a realidade que queremos descrever? a preocupao com respeito ao
erro focada em minimizar a variao aleatria, variao que pode, por
acaso, fazer nossas amostras ou nossas respostas diferentes dos valores
verdadeiros da populao, ou h algum tipo de erro sistemtico (envie-
sado) em nossos dados, decorrentes tanto de ter alguns elementos da
populao subrepresentados em nossa amostra de respondentes ou de
alguma distoro sistemtica de respostas a questes que colocamos? O
Quadro 2.1 exibe graficamente quatro tipos de erros que afetam nossas
estimativas de pesquisa.
 Pesquisa de levantamento 29

Quando se tenta avaliar a confiana que se pode ter nas estimati-

vas baseadas em levantamentos, importante no esquecer todos esses
quatro tipos de erros. Eles so diferentes, normalmente resultam de as-
pectos diferentes da forma como a pesquisa executada, e tm impactos
diferentes sobre a capacidade da pesquisa de abordar as questes que foi
formulada para responder.
Dando esta orientao para os vrios significados de erro, continuamos
a discutir a importncia da forma como uma pesquisa formulada e executa-
da para a confiana que se pode ter nos resultados do levantamento.

Quadro 2.1 Exemplos de erro por tipos de erro e tipo de inferncia

Tipos de erro
Inferncia Aleatrio Enviesado
Da amostra Erro de amostragem Exemplo:
para a populao Aqueles que tm mais de 65 anos so
regularmente menos provveis de responder
a pesquisas por telefone, e, portanto, so
subapresentados em dados de levantamento
por telefone
Das respostas para as Sem validez Exemplo:
caractersticas verdadeiras O nmero de cigarros fumados
regularmente subrelatado em pesquisas

Leituras COMPLEMENTARES

Groves, R. M. (1989). Survey errors and survey costs. New York: John Wiley.
Groves, R. M., Fowler, F.J., Couper, M.P., Lepkowski, J. M., Singer, E., & Tou-
rangeau, R. (2004). Survey methodology (Chap. 2). New York: John Wiley.
Lessler, J.T., & Kalsbeek, W. D. (1992). Nonsampling error in surveys. New York:
John Wiley.