Sie sind auf Seite 1von 143

Ministrio do Desenvolvimento Social e Agrrio MDSA

Secretaria Nacional de Renda de Cidadania SENARC


Ciclo de Treinamento em Metodologias de Anlise de Dados

Elaborao de
Survey
24 A 28 DE ABRIL DE2017

Profa. Solange Simes


Tel1 734 6462562 Eastern Michigan University ssimoes@emich.edu
713H Pray Harrold Hall
Ypsilanti, MI 48197
Sumrio

Sinopse do curso __________________________________________________________ 1

Programa detalhado ________________________________________________________ 3


a
1 aula. A arte e a cincia de fazer perguntas aspectos cognitivos da metodologia de
survey e a construo do questionrio __________________________________________ 7

2 aula. Experimentos split-ballot e a construo do questionrio _____________________ 9

3 aula. A construo do questionrio (continuao) e a metodologia de pr-teste do


questionrio _____________________________________________________________ 11

4 aula. A metodologia de pr-teste do questionrio (continuao) __________________ 12

5 aula. Exerccio final: relatrio do pr-teste e apresentao oral ___________________ 13

CADERNO DE PROBES ___________________________________________________ 14

Exerccios com probes _____________________________________________________ 14

Manual do Entrevistador ____________________________________________________ 31

ANEXO COMPLEMENTAR: TEXTOS _________________________________________ 69

Bibliografia _____________________________________________________________ 139

Informaes de Contato ___________________________________________________ 140

Referncias Complementares ______________________________________________ 141

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 01 construo do questionrio

Sinopse do curso

Ementa
Este curso visa proporcionar tanto um conhecimento terico quanto uma experincia de
aprendizagem aplicada a respeito da construo do questionrio.
Em primeiro lugar, os alunos aprendero sobre as contribuies dos experimentos
metodolgicos, da psicologia cognitiva e da sociolingustica para a compreenso terica
da construo do questionrio. Os alunos conhecero os processos cognitivos
subjacentes ao processo de fazer perguntas e produzir respostas, o sentido pretendido
das perguntas versus os significados interpretados e as implicaes desses processos
para a comparabilidade, a validade e a confiabilidade das medidas. Os alunos sero
introduzidos arte e cincia de fazer perguntas.
Em segundo lugar, os alunos aplicaro esses conhecimentos por meio de um exerccio
de pr-teste de um questionrio, utilizando ferramentas metodolgicas avanadas, como
a entrevista cognitiva e a codificao de comportamentos, para a avaliao crtica da
validade e da confiabilidade das medidas.
Os principais tpicos do curso incluem:
Introduo aplicao da teoria cognitiva na metodologia de survey
elaborao de questionrio e pr-teste.
Introduo a experimentos metodolgicos que abordam controvrsias
centrais na metodologia de survey: a entrevista como uma interao social, a
padronizao rigorosa versus abordagem interativa, a medio de atitudes, de
conhecimento e de comportamento, a ordem das perguntas e efeitos contextuais, os
entrevistados como avarentos cognitivos,as questes abertas versus fechadas,a
ordenao versusas escalas, aaquiescncia bias e outras fontes de efeitos de
resposta sobre a validade e a confiabilidade dos dados do questionrio.
Para ilustrar os tpicos, alm de experimentos metodolgicos, o curso utilizar
questionrios de pesquisa nacionais e internacionais, em especial a PRMBH Pesquisa

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 02 construo do questionrio

da Regio Metropolitana de Belo Horizonte, a qual foi conduzida pelo Programa de Doutorado em
Sociologia da UFMG utilizando o estado da arte da metodologia de survey, com o objetivo de
contribuir para o desenvolvimento dessa metodologia em contextos diferentes dos Estados Unidos e
Europa.

Objetivos
O curso visa fornecer ao participante uma base terica e prtica do estado da arte na construo
de questionrios e, para isso, aborda: 1) uma introduo aos aspectos cognitivos da metodologia de
survey; 2) sua aplicao na construo de questionrios; e 3) sua aplicao na criao de novos e mais
rigorosos instrumentos de pr-teste, com nfase na entrevista cognitiva.
Em particular, a especificidade deste curso para os gestores e profissionais do Ministrio de
Desenvolvimento Social e Agrrio (MDSA) est na exposio e no aprendizado de tcnicas de
construo de survey que permita construir questionrios com rigor para a investigao, por exemplo,
1) de percepes e comportamentos dos cadastrados no cadastro unico e beneficirios do Pograma
Bolsa Familia (PBF); 2) de percepes dos gestores do PBF sobre as condicionalidades do programa;
3) percepes dos gestores municipais sobe as atividades de gesto do cadastro unico e do PBF.

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 03 construo do questionrio

Programa detalhado

Estrutura do curso

24 de abril
A arte e a cincia de fazer perguntas aspectos cognitivos da metodologia de survey e
a construo do questionrio

Bibliografia obrigatria
Simes, S.; Pereira, M.P.A arte e a cincia de se fazer perguntas. In:Aguiar, N. (ed.). Desigualdades
sociais, redes de sociabilidades e participao poltica. Belo Horizonte: Editora UFMG, 2007.

Bibliografia complementar
Sudman, S.; Bradbum, N. M.; Schwarz, N. Implications for questionnaire design and the
conceptualization of the survey interview. In:Thinking about answers: the application of cognitive
processes to survey methodology. San Francisco: Jossey-Bass, 1996.

25 de abril
Experimentos split-ballot
Questes abertas versus questes fechadas: o que medem?
Devemos oferecer a opo no sei?

A construo do questionrio: tipos de medidas valores, crenas, conhecimento,


comportamentos, dadossociodemogrficos e contextuais

Bibliografia obrigatria
Fowler Jr., Floyd J. Pesquisa de levantamento. Porto Alegre: Penso, 2011. Cap.6.

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 04 construo do questionrio

Bibliografia complementar
Geer, John G. What do open-ended questions measure? Public Opinion Quarterly,1988;52:365-71.
Gilham,M.; Granberg, D. (1993)Should we take dont know for an answer?. Public Opinion Quarterly,
1993; 57(3):348-57.

26 de abril
A construo do questionrio (continuao) formatos de questes, acquiescence
bias e padres de resposta

A metodologia de pr-teste do questionrio entrevistas cognitivas e outros


instrumentos de avaliao do questionrio

Bibliografia obrigatria
Fowler Jr., Floyd J. Pesquisa de levantamento. Porto Alegre: Penso. Cap.7.

Bibliografia complementar
Bradburn, N.; Sudman, S.; Wansink, B. Asking questions: the definitive guide to questionnaire design
for market research, political polls, and health questionnaires (revised edition).San Francisco:
Josse Bass, 2004.
Couper, M. P.; Tourangeau, R.; Conrad, F. G.; Crawford, S. What they see is what we get: response
options for web surveys. Social Science Computing Review,2004;2:111-27.
Couper, M. P., Tourangeau, R.; Kenyon, K. Picture This! Exploring Visual Effects in Web Surveys.
Public Opinion Quarterly, 2004;68:255-6.

27 de abril
A metodologia de pr-teste do questionrio entrevistas cognitivas e outros
instrumentos de avaliao do questionrio (continuao)

Bibliografia obrigatria
Fowler Jr., Floyd J. Pesquisa de levantamento. Porto Alegre: Penso, 2011. Cap.7

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 05 construo do questionrio

Bibliografia complementar
Conrad, F. G.;Blair, J. Sources of errors in cognitive interviewing. Public Opinion Quarterly,
2009;73(1):32-55.
Sudman, S.; Bradbum, N. M.; Schwarz, N. Methods for determining cognitive processes and
questionnaire problems. In:Thinking about answers: the application of cognitive processes to
survey methodology. San Francisco: Jossey-Bass, 1996.
Willis, G.; DeMaio T.; Harris-Kojetin, B. Is the bandwagon headed to the promised land? Evaluating the
validity of cognitive interviewing techniques. In:Cognition and survey research. New York: John
Willey & Sons, 1999.
Beatty, P. C.; Willis, G. B. Research synthesis: the practice of cognitive interviewing. Public Opinion
Quarterly, 2007;71:287-311.

EXERCCIO: Pr-testedo mdulo Qualidade de Vida e Capital Social da Pesquisa da Regio Metropolitana de Belo
Horizonte (PRMBH)

Material para o exerccio de pr-teste:


1. Caderno de Exerccios de Probes
2. Manual do Entrevistador
3. Mdulo Qualidade de Vida e Capital Social da PRMBH Pr-teste 2002
4. Formulrio de Avaliao da Entrevista

Instruces para o exerccio de pr-teste


Trabalho em grupos:
- Cada grupo far um pr-teste do mdulo Qualidade de Vida e Capital Social do Pr-teste do Survey da
Regio Metropolitana de Belo Horizonte em 2001.
- Cada estudante conduzir duas entrevistas cognitivas no dia 27 de abril.
- Cada estudante preencher um Relatrio do Entrevistador para cada entrevista/questionrio.
- Na aula do dia 28 de abril, os estudantes se reuniro em grupos para a elaborao de um relatrio do
pr-teste (as instrues para a elaborao do relatrio esto no Anexo Complementar: Exerccio de Pr-
teste).Em seguida, os grupos faro uma apresentao oral e discusso dos principais resultados do pr-
teste.

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 06 construo do questionrio

28 de abril
Exerccio final em sala: trabalho em grupo e apresentaao oral dos resultados do pr-
teste
Na aula do dia 28 de abril, os estudantes se reuniro em grupos para a elaborao de um relatrio do
pr-teste. As instrues para a elaborao do relatrio esto no Anexo Complementar: Exerccio de
Pr-teste.Em seguida, os grupos faro uma apresentao oral e discusso dos principais resultados do
pr-teste.

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 07 construo do questionrio

1aaula.A arte e a cincia de fazer


perguntas aspectos cognitivos da
metodologia de survey e a construo
do questionrio

A LISTA COMPLETA DOS SLIDES QUE SERO


APRESENTADOS SEGUE NA PARTE FINAL DA APOSTILA

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 08 construo do questionrio

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 09 construo do questionrio

2 aula.Experimentos split-ballot e a
construo do questionrio

1. Experimentos split-ballot

Questes abertas versus questes fechadas: o que medem?


Devemos oferecer a opo no sei?

2. A construo do questionrio: tipos de medidas valores,


crenas, conhecimento, comportamentos, dadossociodemogrficos
e contextuais

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 10 construo do questionrio

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 11 construo do questionrio

3 aula.A construo do questionrio


(continuao)e ametodologia de
pr-teste do questionrio

A construo do questionrio (continuao): formatos de questes,


acquiescence bias e padres de resposta

A metodologia de pr-teste do questionrio: entrevistas cognitivas e


outros instrumentos de avaliao do questionrio

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 12 construo do questionrio

4 aula.A metodologia de pr--teste do


questionrio(continuao)
questionrio(cont

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 13 construo do questionrio

5 aula.Exerccio final: relatrio do


pr-teste e apresentao oral

EXERCCIO: Pr-teste do mdulo Qualidade de Vida e Capital Social


da pesquisa da regio metropolitana de Belo Horizonte

Material para o exerccio de pr-teste


1. Caderno de Exerccios de Probes
2. Manual do Entrevistador
3. Mdulo Qualidade de Vida e Capital Social da PRMBHPr-teste 2002
4. Formulrio de Avaliao da Entrevista

Instrues para o exerccio de pr-teste


Trabalho em grupos:
Cada grupo far um pr-teste do mdulo Qualidade de Vida e Capital Social do Pr-teste do
Survey da regio metropolitana de Belo Horizonte 2001.
Cada estudante conduzir duas entrevistas cognitivasno dia 27 de abril.
Cada estudante preencher um Relatrio do Entrevistador para cada
entrevista/questionrio.
Na aula do dia 28 de abril, os estudantes se reuniro em grupos para a elaborao de um
relatrio do pr-teste (as instrues para a elaborao do relatrio esto no Anexo
Complementar: Exerccio de Pr-teste).Em seguida, os grupos faro uma apresentao oral
e discusso dos principais resultados do pr-teste.

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 14 construo do questionrio

1. CADERNO DE PROBES

EXERCCIOS COM PROBES

Probesneutros
Se voc considera que a performance do entrevistado inadequada (o entrevistado d uma
resposta irrelevante, incompleta, confusa; ou se esquece da questo e divagasobre outro assunto),
sua funo trazer o entrevistado de volta entrevista com a ajuda de tcnicas neutras. O uso de
probes uma dessas tcnicas.
O uso do probe motiva o entrevistado a se comunicar de forma mais completa, ampliando sua
resposta, dando esclarecimentos ou explicando as razes que esto por trs do que ele diz.O uso de
probes tambm ajuda o entrevistado a se prender ao tema em foco no questionrio, de modo que
informaes irrelevantes e desnecessrias so evitadas.
Se voc precisa utilizar um probe para obter a resposta, crucial que ele seja nodiretivo, isto
, noinfluencie o entrevistado a dar uma determinada resposta: por isso, o probe chamado de
tcnica neutra.

Exemplo:
Entrevistador: Voc acha que voc e os familiares que moram com voc estaroem melhor ou em
pior situao financeira daqui a um ano?
Entrevistado: Espero estar em uma melhor situao.

Neste caso, o entrevistado no respondeu questo. Todos desejam estar em melhor situao
no futuro, mas nem todos acham que realmenteestaro em melhor situao.

EXERCCIOS 1 a 3
(1)Entrevistador: Numa semana normal, voc passa cerca de quantas horas cuidando das crianas
que moram com voc? Voc diria: menos de 10 horas, de 10 a 19, de 20 a 39,
ou 40 horas ou mais por semana?

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 15 construo do questionrio

Entrevistado: Bem, na ltima semana eu estava doente, assim, deve ter sido menos de 10
horas.
Questo respondida? (SIM / NO)__________

(2)Entrevistador: Pense em sua vidaem geral. Em que medida voc est satisfeito com
ela:totalmente satisfeito(a), muito satisfeito(a),pouco satisfeito(a)ou nada
satisfeito(a)?
Entrevistado: Os ltimos seis meses foram muito duros. No momento, eu no estou satisfeito(a).
Questo respondida? (SIM / NO)__________

(3)Entrevistador: Em que medida voc est satisfeito(a) com a (sua/de sua famlia) situao
financeira: totalmente satisfeito(a), muito satisfeito(a),pouco satisfeito(a)ou
nada satisfeito(a)?
Entrevistado: Eu estou muito satisfeito(a).
Questo respondida? (SIM / NO)___________

Exemplo:
Entrevistador: H alguma coisa em especial de que voc gosta no Partido dos Trabalhadores (PT)?
Entrevistado: Eu gosto de suas propostas.

O entrevistado no respondeu questo, porque a mesma perguntava sobre alguma coisa em


especial e o entrevistado deu uma resposta vaga e de carter geral.

EXERCCIOS4 e 5
(4) Circule a letra do probe neutro correto.
a) Voc poderia me falar um pouco mais sobre isso?
b) Bem, e em relao ao pagamento da dvida externa?

Se o entrevistador usar o probe incorreto (b), o entrevistado ser direcionado para um problema
no qual ele no pensou por si mesmo.

(5) Estude a situao de entrevista a seguir:

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 16 construo do questionrio

Entrevistador: Com qual frequncia voc se encontra com amigos, vizinhos ou parentes para sair
juntos ou fazer visitas nas casas uns dos outros? Voc diria que: mais de uma vez por
semana, uma vez por semana, 2 ou 3 vezes por ms, cerca de uma vez por ms,
menos de uma vez por ms ou nunca?
Entrevistado: Ah, mais de uma vez por ms.

(5)a) Voc diria que:mais de uma vez por semana, uma vez por semana ou 2 ou 3 vezes por ms?
b) Voc diria que: 2 ou 3 vezes por ms?

REGRA
Permanea neutro. Evite probes diretivos.

PAUSA e repetir o enunciado (R.E.)


Essas duas tcnicas de probes so frequentemente usadas juntas. PAUSA e (R.E.) so os
melhorese mais seguros probes, porque eles mantm o estmulo padronizado,aspecto fundamental
para a confiabilidade dos dados.

EXERCCIO 6
Entrevistador: Existe algum em sua vida com quemvoc pode dividiros seus sentimentos e
preocupaes mais ntimos?
Entrevistado: difcil dizer.
Entrevistador: (PAUSA)
Entrevistado: uma pergunta difcil.
Entrevistador: Deixe-me repetir a questo. Existe algum em sua vida com quem voc pode dividir
os seus sentimentos e preocupaes mais ntimos?
Entrevistado: Sim, 2 pessoas.

(6) Como a PAUSA e o (R.E.) ajudaram na obteno da resposta?


_______________________________________________________________________________
_______________________________________________________________________________
________________

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 17 construo do questionrio

Respostas mais refletidas so mais completas e mais acuradas. D ao entrevistado tempo para
pensar, lendo a questo lentamente e fazendo as pausas apropriadas. medida que voc adquirir
experincia, voc aprender quo longa a pausa deve ser. Lembre-se sempre de que o entrevistado
nunca ouviu a questo antes, assim a pausa, que para voc parece longa, pode ser exatamente aquela
de que ele necessita.
No apresse o entrevistado: fazer pausa uma das maneiras de indicar a ele que voc espera
respostas bem refletidas.

Probes (R.E.) ou (R.OP.) Repetir o Enunciado (R.E.) ouRepetir as


Opes de Resposta (R.OP.)
Repetir o enunciado ou as opes de resposta significa:
Repetir a questo inteira.
Repetir as opes de resposta que se aplicam.
Repetir a parte que ficou mal compreendida.

REGRA
Repita a questo inteira se a resposta do entrevistado indica que ele no entendeu, ou se ele
necessita de mais tempo para pensar na resposta.

Exemplos:
Entrevistador: Pense em sua vidaem geral. Em que medida voc est satisfeito(a) com ela:
totalmente satisfeito(a), muito satisfeito(a), pouco satisfeito(a) ou nada
satisfeito(a)?
Entrevistado: Oh, estou bastante satisfeito(a).
Entrevistador: Voc quer dizer: totalmente ou muito satisfeito(a)?

REGRA
Se o entrevistado j eliminou, de forma clara, uma opo deresposta, no necessrio a incluir
na repetio.

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 18 construo do questionrio

Entrevistador: Em que medida o seu (marido/mulher/companheiro(a)) faz voc sentir-se amado(a) e


protegido(a)? Voc diria que: totalmente, muito, um pouco, quase nada ou nada?
Entrevistado: Ele(a) realmente bom(boa) para mim.
Entrevistador: Voc quer dizer que se sente: totalmente, muito ou um pouco amado(a) e
protegido(a)?

EXERCCIOS 7 a 13
(7 e 8) Entrevistador: Pense em sua vida em geral. Em que medida voc est satisfeito com ela:
totalmente satisfeito(a), muito satisfeito(a), pouco satisfeito(a) ou nada
satisfeito(a)?
Entrevistado: Eu detesto meu trabalho, assim, eu diria no muito satisfeito(a).

(7)Escreva a abreviatura do probe apropriado.________________

REGRA
Repita a questo inteira, a menos que voc tenha certeza deque apenas uma parte da
questofoimal compreendida.

(8)Qual o tpico deste exemplo?


_______________________________________________________________________________
_______________________________________________________________________________
________________

(9 a 11) Entrevistador: Existe algum em sua vida com quem voc pode dividir os seus sentimentos e
preocupaes mais ntimos?
Entrevistado: Eu no estou bem certo(a) sobre isto.
Entrevistador: Eu quero dizer se existe algum que voc conhece com quem pode falar sobre
seus problemas.
(9) Circule a parte mal interpretada.
(10) Qual o probe adequado? _________________________________

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 19 construo do questionrio

(11) Probe correto? (SIM / NO) ________________________________


(12 e 13) Entrevistador: Com que frequncia voc discute com seu(sua) marido(mulher) sobre
quantogastar com diferentes coisas: nunca, raramente, algumas vezes,
frequentemente, sempre?
Entrevistado: Minha mulher e eu discutimos muito sobre quase tudo.
Entrevistador: Com que frequncia voc discute com seu(sua) marido(mulher) sobre
quantogastar com diferentes coisas: nunca, raramente, algumas vezes,
frequentemente, sempre?
(12)Probe correto? (SIM / NO)______________
(13) Por que o entrevistador repetiu o enunciado (R.E.) nesta situao?
_______________________________________________________________________________
_______________________________________________________________________________
________________

O probe melhor e mais seguro Repetir o Enunciado (R.E.). Ele mantm o estmulo
padronizado,aspecto fundamental para a confiabilidade dos dados.
Repita a questo se o entrevistado der uma resposta que indica claramente que ela foi mal
compreendidaou sea resposta no tiver nada a vercom otema da questo.

Probe (SIG.) O que voc quer dizer com isso? Como assim? Em
que voc est pensando?
O probe (SIG.) usado quando o entrevistado no responde de forma clara a uma questo
aberta.

REGRA
Use (SIG.) quando voc no entender a resposta do entrevistado.

Exemplo:
Entrevistador: H alguma coisa em especial de que voc gosta no Partido dos Trabalhadores (PT)?

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 20 construo do questionrio

Entrevistado: Eu gosto de seu carter socialista.


Entrevistador: O que voc quer dizer com isso?(SIG.)
EXERCCIO 14
Entrevistador: H alguma coisa em especial de que voc gosta no Partido da Frente Liberal (PFL)?
Entrevistado: Ele mais conservador.
Entrevistador: Como assim? (SIG.)

(14)Por que os dois entrevistadores usaram o probe (SIG.)nestas situaes?


_______________________________________________________________________________
_______________________________________________________________________________
________________

Probe(MAIS) Voc poderia me falar um pouco mais sobre isso?


Voc gostaria de acrescentar mais alguma coisa?
O probe (MAIS) usado quando o entrevistado d uma resposta inadequada a uma questo
aberta, em duas situaes (especificadas a seguir).

REGRA
Use o probe (MAIS) quando voc no compreender a resposta do entrevistado.

REGRA
Use o probe (MAIS) quando o entrevistado der uma respostaincompleta.

EXERCCIOS 15 e 16
(15) Entrevistador: No atual estgio de sua vida, quais so as suas maiores fontes de satisfao ou
prazer?
Entrevistado: Coisas relacionadas nossa vida familiar.
Entrevistador: Voc poderia me falar um pouco mais sobre isso? (MAIS)

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 21 construo do questionrio

(15)Por que o entrevistador usou o probe (MAIS)?


_______________________________________________________________________________
_______________________________________________________________________________
________________

(16) Entrevistador: No atual estgio de sua vida, quais so os seus maiores problemas ou
preocupaes?
Entrevistado: Eu estou preocupado com vrias coisas.
Entrevistador: Voc poderia me falar um pouco mais sobre isso? (MAIS)

(16)Por que o entrevistador usou o probe (MAIS)?


_______________________________________________________________________________
_______________________________________________________________________________
________________

O probe(MAIS) usado em questes abertas, porque no h escolhas preestabelecidas que


possam ser repetidas para o entrevistado. Note que (SIG.) um substituto para (MAIS) na maioria dos
casos. Isso permite ao entrevistador variar os probes utilizados.

Probe(ACHA) O que voc acha? O que voc pensa? O que voc


espera?
Sempre que o entrevistado responder No sei, use o probe (ACHA) pelo menos uma vez.Isso
d ao entrevistado tempo para se decidir se ele realmente no sabe ou se ele apenas precisa de mais
tempo para verbalizar seus pensamentos.

REGRA
Use o probe (ACHA) para uma resposta No sei.

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 22 construo do questionrio

REGRA
Use o probe (ACHA) para uma resposta Espero que sim.

EXERCCIOS 17 a 20
(17) Entrevistador: Em geral, como fica (a sua/de sua famlia) situao financeirano final do ms?
Voc(s) normalmente chega(m) ao final do ms: com algum dinheiro sobrando,
apenas com o dinheiro suficiente para as despesas ou sem dinheiro
suficiente para as despesas?
Entrevistado: Eu sempre espero que haja dinheiro sobrando.
Entrevistador: O que voc pensa que geralmente acontece? (ACHA)

(17) Por que o entrevistador usou o probe (ACHA)?


_______________________________________________________________________________
_______________________________________________________________________________
________________

(18) Entrevistador: Voc diria que voc (e as pessoas de sua famlia que moram com voc) (est /
esto) em melhor situao ou em pior situao financeira do que h um ano?
Entrevistado: No sei. Eu ainda no pensei nisto.
Entrevistador: O que voc acha? (ACHA)

(18)Por que o entrevistador usou o probe (ACHA)?


_______________________________________________________________________________
_______________________________________________________________________________
________________

(19)Indique se o probe usado est correto e escreva a abreviatura do probe.

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 23 construo do questionrio

Entrevistador: Nos ltimos 3 anos, voc enfrentou problemas financeiros srios ou dificuldades
financeiras?
Entrevistado: Eu no sei. difcil dizer qual a seriedade de alguns problemas dedinheiro.

Entrevistador #1: O que voc acha?


(19a)Probe correto? (SIM / NO)__________ [Abreviatura]_________

Entrevistador # 2: Voc poderia me falar um poucomais sobre isso?


(19b)Probe correto? (SIM / NO) __________ [Abreviatura]_________

(20)Indique se o probe usado est correto e escreva a abreviatura do probe.


Entrevistador: Em que medida voc acha que a realizao de eleies faz o governo prestar
ateno ao que o povo pensa: muito, um pouco ou quase nada?
Entrevistado: Eu no estou certo. Espero que as eleies faam o governo prestar ateno ao
povo.

Entrevistador # 1: O que voc quer dizer com isso?


(20a)Probe correto? (SIM/NO) __________ [Abreviatura]_________

Entrevistador # 2: Certamente; mas voc acha que a realizao de eleies faz o governo prestar
ateno ao que o povo pensa: muito, um pouco ou quase nada?
(20b)Probe correto? (SIM / NO) __________ [Abreviatura]_________

Probe(PX.) Qual se aproxima mais de como voc sente? Qual se


aproxima mais de como voc pensa?

REGRA

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 24 construo do questionrio

(PX.) usado quando o entrevistado reduziu as opes de resposta a duas alternativas e


tambm no formato escolha forada.

Nota:se o entrevistado no eliminar nenhuma das opes de resposta, voc devefazer uma pausa e/ou
repetir as opes de resposta (R.OP.) em vez de usar (PX.).

EXERCCIOS 21 a 24
Indique se o probe usado o correto e escreva a abreviatura correta do probe.
(21) Entrevistador: Em que medida voc est satisfeito(a) com a situao financeira atual (sua / de sua
famlia):totalmente satisfeito(a), muito satisfeito(a) , pouco satisfeito(a) ou nada
satisfeito(a)?
Entrevistado: Algum ponto entre muito e pouco satisfeito(a).
Entrevistador: Qual se aproxima mais do que voc sente?
Probe correto? (SIM/NO) __________ [Abreviatura]_________

(22)Entrevistador: Cerca de quanto voc (e a sua famlia) gasta(m), numa semana normal, com
comida? Inclua vales-refeio e o dinheiro gasto comendo fora.
Entrevistado:Entre R$ 75,00 e R$ 100,00, por semana.
Entrevistador: Qual se aproxima mais?
Probe correto? (SIM/NO) __________ [Abreviatura]_________

(23) Entrevistador: Voc diria que voc (e a sua famlia)esto em melhor ou em pior condio financeira
hoje do que h um ano?
Entrevistado:Penso que sim.
Entrevistador:Qual se aproxima mais do que voc pensa?
Probe correto? (SIM/NO)__________ [Abreviatura]_________

(24)Entrevistador: Cerca de quantas horas,voc passa, numa semana normal, cuidando das crianas
que moram com voc? Voc diria: menos de 10 horas, de 10 a 19, de 20 a 39 ou
40 horas ou mais por semana?
Entrevistado:Eu gasto a maior parte do meu tempo.

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 25 construo do questionrio

Entrevistador: Qual o mais prximo?


Probe correto? (SIM/NO) __________ [Abreviatura]_________

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 26 construo do questionrio

Probe(0.MOT.) Existem outros motivos para voc pensar assim?


Existem outros motivos para voc sentir assim? Existe outra razo
para voc pensar assim?
O probe (0.MOT.)ajuda a diferenciar questes abertas de questes fechadas e mostra ao
entrevistado que voc deseja que ele responda com suas prprias palavras. (0.MOT.)no usado para
explicao adicional;neste caso, use (MAIS).

Exemplo
Entrevistador: J falamos sobre atividades do passado e das atuais, alegrias e problemas em muitas
reas de sua vida. Falando do futuro, quais so as coisas que voc mais deseja para
os prximos anos?
Entrevistado: Eu desejo muitas coisas emocionantes.
Entrevistador: Voc poderia me falar um pouco mais sobre isso?
Entrevistado: Eu espero aposentar-me cedo.
Entrevistador: H outras coisas que voc deseja? (0.MOT.)

REGRA
Existe outra razo para voc pensar assim? (0.MOT.) usado ao menos uma vez para todas as
questes abertas, a no ser que haja orientao em contrrio no Manual de Questo por
Questo.

REGRA
(0.MOT.) usado nas questes fechadas, quando em tais questes est especificamente
indicado que voc deve usar o probe para obter menes adicionais.

EXERCCIO 25
Indique se o probe correto e escreva a abreviatura correta para o probe.
Entrevistador: Neste estgio de sua vida, quais as suas maiores fontes de satisfao ou prazer?
Entrevistado: Ver meus filhos crescerem e serem bem-sucedidos.
Entrevistador # 1: H outras fontes de satisfao ou de prazer?

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 27 construo do questionrio

(25a)Probecorreto?(SIM/NO) __________ [Abreviatura]_________

Entrevistador # 2: Algo mais?


(25b)Probe correto? (SIM/NO) __________ [Abreviatura]_________

Um breve Algo mais? no um substituto aceitvel para Existem outros motivos / Existem
outras razes para voc pensar assim?, porque ele tende mais a inibir do que a encorajar explicaes
mais detalhadas. Somente use Algo mais? quando estiver especificamente orientado no Manual de
Questo por Questo.

Introdues neutras
Para tornar mais natural o uso do probe aps uma resposta inadequada, o entrevistador deve
dizer alguma frase ou expresso neutra antes de repetir a questo ou usar outro probe.
A seguir, listam-se introdues neutras e os probescom os quais elas so usadas:

1. Certamente, ningum sabe ao certo... (PAUSA, R.E., ACHA).


2. Certamente, no h respostas certas ou erradas...(PAUSA, R.E., PX.).
3. Certamente, no h respostas certas ou erradas; estamos interessados na opinio das
pessoas... (PAUSA, R.E., PX., ACHA).
4. Estamos interessados apenas no que voc pensa... (PAUSA, R.E., ACHA).
5. Todos desejam, mas... (R.E., ACHA).
6. Deixe-me repetir a questo...(R.E.).
7. Bem, em geral... / Falando de um modo geral... / De maneira geral... (R.E., PX., ACHA).
8. No pas como um todo... (PAUSA, R.E.).
9. Sim, mas...(R.E., ACHA).

A introduo escolhida depende da situao especfica. Algumas vezes, voc no desejar


utilizar nenhuma introduo. Como cada entrevista diferente, difcil ter uma regra para cada
situao que aparece. Use o seu bom senso. Lembre-se de que uma introduo neutra usada para:

Tornar natural o uso de um probe aps uma resposta inadequada.

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 28 construo do questionrio

Tranquilizar o entrevistado e enfatizar que a entrevista no um teste e que no h


respostas certas ou erradas.
Demonstrar que a resposta inicial do entrevistado foi levada em conta.

EXERCCIOS 26 a 32
(26)Circule a letra da introduo neutra e do probe correto.
Entrevistador: H algum em sua vida com quem voc pode realmente dividir seus sentimentos e
preocupaes mais ntimos?
Entrevistado: Minha mulher conversa com a irm dela sobre tudo.

a. Naturalmente, mas h algum em sua vida com quem voc poderealmentedividir seus
sentimentos e preocupaes mais ntimos?
b. Deixe-me repetir a questo. H algum em sua vida comquem voc pode realmente dividir seus
sentimentos e preocupaes mais ntimos?

(27 a 29) Escolha o probe e a introduo corretos e os escreva nos espaos em branco.
Entrevistador: Em geral, como fica (a sua/de sua famlia) situao financeirano final do ms? Voc(s)
normalmente chega(m) ao final do ms: com algum dinheiro sobrando, apenas com o
dinheiro suficiente para as despesas ou sem dinheiro suficiente para as
despesas?

(27) Entrevistado # 1:Puxa vida, no tenho certeza. Minha mulher paga todas as contas.
Entrevistador:
____________________________________________________________________________
____________________________________________________________________________
______________________________

(28) Entrevistado # 2: claro que eu gostaria que houvesse algum dinheiro sobrando.
Entrevistador:
____________________________________________________________________________
____________________________________________________________________________
______________________________

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 29 construo do questionrio

(29) Entrevistado #3:Depende. Em alguns meses, sobra dinheiro , em outros no sobra nem falta e
em outros, ficamos no vermelho.
Entrevistador:
____________________________________________________________________________
____________________________________________________________________________
_______________________________

(30) Escolha o probe e a introduo corretos e os escreva nos espaos em branco.


Entrevistador: Neste estgio de sua vida, quais so as suas maiores fontes de satisfao ou prazer?
Entrevistado: Eu sempre desejei muito aposentar-me, mas depois que minha mulher morreu, isto no
me d mais prazer.
Entrevistador::
__________________________________________________________________________________
__________________________________________________________________________________
__________________

(31)Quais so as funes das introdues neutras?


__________________________________________________________________________________
_____________________________________

Quando o entrevistado responde Eu no sei., pense que ele na verdade pode estar querendo dizer
que:
No entendeu mas no quer admitir isto.
Est pensando na resposta e tenta preencher o silncio.
No deseja responder a questo.
No sabe ou no tem opinio sobre o assunto.

Lembretes
Deve-se usar pelo menos um probe para a resposta No sei.
O probe mais efetivo para No sei um (ACHA) / (R.E.) ou uma PAUSA ou ambos.
Para permitir que o entrevistado se sinta vontade, voc pode usar uma introduo neutra.

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 30 construo do questionrio

(32)Escreva trs frases que voc pode usar como probe para uma resposta No sei.
1. __________________________________________________________
2. __________________________________________________________
3. __________________________________________________________

Reviso
O uso efetivo do probe requer do entrevistador o conhecimento dos objetivos das questes
ea capacidade de ouvir atentamente o que o entrevistado diz, para decidir se a resposta
dada atende aos objetivos da questo.
Osmelhores e mais seguros probes so a PAUSA e Repetir o Enunciado (R.E.).
Se mais informaes so necessrias, pode-se usar (MAIS), (SIG.), (ACHA), (PX.),
dependendo da situao.
Para a maioria das questes abertas que perguntam Por qu?, aps obter uma resposta
que atenda aos objetivos, use o probe (0.MOT.) somente uma vez.
Esteja atento para probes especiais padronizados apenas para alguns estudos.
Sempre use um probe para uma resposta No sei, a menos que o Manual de Questo por
Questo oriente o contrrio.
Use introdues neutras, quando apropriado, para demonstrar que a resposta inicial do
entrevistado foi levada em conta e para facilitar o uso do probe aps uma resposta
inadequada.
Sempre que voc usar um probe,assinale a abreviatura na linha de probe.
Para probes adicionais, anote a abreviatura, entre parnteses, no final da linha de probe.

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 31 construo do questionrio

2. MANUAL DO ENTREVISTADOR

Manual do entrevistador (verso resumida)

A partir da experincia acumulada em cinquenta anos de trabalho com pesquisas, o ISR


(Institute for SocialResearch), da Universidade de Michigan, desenvolveu um Manual Geral
de Treinamento, padronizando os procedimentos utilizados na conduo de surveys. Para
o treinamento dos seus estudantes, a equipedo Detroit Area Study elaborou uma sntese
do manual.
Com base neste material, a equipe da Pesquisa da Regio Metropolitana de Belo
Horizonte produziuuma verso adaptada, o presente Manual do Entrevistador.

Contedo
Introduo
Questes ticas
Como conseguir uma entrevista
O contato inicial
Tcnicas gerais de entrevista
A conduo da entrevista
Clarificando perguntas e respostas: probes
Relao das abreviaturas dos principais probes

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 32 construo do questionrio

Introduo
O entrevistador a nica pessoa que tem contato direto com o entrevistado. Ele a ligao
entre a coordenao da pesquisa e o entrevistado, pois quem reporta as informaes obtidas, as
atitudes do entrevistado e as circunstncias da entrevista.
O trabalho do entrevistador fazer uma coleta completa e apurada de dados. Para tanto, voc
deve:

1. Fazer o entrevistado se sentir confortvel para responder as questes propostas da forma


mais franca e completa possvel.
2. Conhecer bem o questionrio para ser capaz de ler as questes de forma adequada e em
sua ordem correta e, assim, coletar e registrar todas as informaes necessrias.
3. Transferir as informaes registradas coordenao da pesquisa de modo que possam
ser entendidas e interpretadas corretamente.

Se no houvesse entrevistadores, tambm no haveria surveys. O entrevistador literalmente a


pedra de toque do projeto, pois a qualidade dos dados coletados depende, em grande extenso, de
sua habilidade nos procedimentos acima mencionados.

Questes ticas
Como entrevistador(a), voc est submetido(a) a certas obrigaes ticas, apresentadas a
seguir.

1. Confidencialidade:voc dever ler a declarao de confidencialidade para o entrevistado.

Esta entrevista completamente voluntria. Se houver alguma questo que voc


no queira responder, por favor, diga e passarei para a questo seguinte.Suas
respostas so confidenciais e o seu nome no ser associado a elas.

Voc dever assegurar ao entrevistado que as respostas so estritamente confidenciais. Se


necessrio, explique que, na divulgao dos resultados do survey, os dados no so

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 33 construo do questionrio

apresentados de forma individualizada e, sim, de forma agrupada, isto , atravs de percentuais


de respostas comuns.
Voc no poder partilhar as respostas do entrevistado com ningum, exceto com a
coordenao da pesquisa.

2. No use a situao de entrevista para obter ganhos pessoais: No use a entrevista para
divulgar ou defender suas prprias convices polticas, sociais ou religiosas.
3. No d conselhos ao entrevistado:no d conselhos ou orientaes ao entrevistado sobre
quaisquer tipos de problemas por ele mencionados durante a entrevista. Se ele solicitar
diretamente a sua ajuda, voc pode citar nomes de instituies conhecidas, mas sem fazer
nenhuma recomendao.
4. No pea nenhum tipo de ajuda ou favor ao entrevistado.
5. Mantenha a distncia profissional entre voc e o entrevistado:isso no impede que voc
aceite um cafezinho durante a entrevista, mas voc no poder iniciar ou aceitar convites
para contatos sociais fora da entrevista.

Tenha sempre presente que voc um representante da UFMG e, como tal, no poder adotar
atitudes que possam comprometer a instituio ou voc mesmo, em sua integridade fsica,
moral e emocional.

Como conseguir uma entrevista

I. Preparao

1. Estude o material da pesquisa.


2. Esclarea suas dvidas com a equipe de coordenao da pesquisa.
3. Leve todo o material de que voc vai necessitar devidamente organizado, incluindo
caneta, lpis e borracha.
4. Leve sua identidade e o crach.
5. Vista-se de forma apropriada.
6. Seja otimista!

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 34 construo do questionrio

II. Apresentao

1. Apresente-se a uma pessoa adulta residente no domiclio.


2. Entregue a essa pessoa a carta de apresentao elaborada pela coordenao da
pesquisa.
3. Apresente o tema da pesquisa de forma objetiva.
4. Entregue o folheto de apresentao com as informaes sobre a pesquisa.
5. Explique pessoa que ela foi selecionada por sorteio, sendo, portanto, insubstituvel.
6. Lembre-se de que as melhores introdues so breves.

O contato inicial
O processo da entrevista depende em grande parte do seu contato inicial com o entrevistado.
Assim, voc deve se apresentar de forma confiante diante dele e, ainda na porta da casa, fazer sua
apresentao pessoal e a apresentao da pesquisa.
A coordenao da pesquisa normalmente prepara um modelo de apresentao com os seguintes
itens: a) uma frase de introduo; b) uma pequena explanao do que voc est fazendo; c) um breve
resumo sobre a pesquisa; e d) argumentos para conseguir a participao do entrevistado.
O importante que vocse sinta confortvel em sua apresentao. Para tanto, refaa o modelo
usando suas prprias palavras e treine com a ajuda de um amigo ou de outro entrevistador, lembrando-
se sempre de enfatizar:

1. Quem vocepara qual instituio trabalha


a) Voc um entrevistador profissional que no est tentando vender nada e nem
buscando donativos.
b) Voc trabalha para uma instituio respeitvel.
2. A importncia do projeto
Informe sobre a importncia do projeto para a sociedade dizendo algo como:
Nosso estudo importante porque estamos buscando informaes sobre
vriostemas que interessam s pessoas de sua comunidade e do pas como um
todo. Ns precisamos conhecer suas opinies sobre esses assuntos. Elas nos

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 35 construo do questionrio

ajudaro aentender como aspessoasse sentem em relao ao que est


acontecendo no mundo hoje.

3. Como o entrevistado foi selecionado para a pesquisa


As pessoas que sero entrevistadas, nas diversas reas da Regio Metropolitana de Belo
Horizonte, foram escolhidas por rigorosos mtodos de pesquisa (sorteio, amostragem
probabilstica) e, por isso, no podem ser substitudas por outras.
4. Esta uma pesquisa de opinio, no um teste
O que ns queremos so as opinies dos entrevistados. Para ns, no h resposta certa ou
errada, pois isso no um teste de conhecimento e, sim, uma pesquisa de opinies, modos
de vida e experincias das pessoas.
5. Como as informaes sero usadas
As informaes coletadas neste estudo sero usadas por cientistas sociais com o objetivo de
identificar e compreender quais os assuntos e problemas so importantes para os moradores
desta cidade e como as pessoas se sentem em relao a eles.
6. Confidencialidade
Esclarea ao entrevistado que as informaes coletadas so codificadas em nmeros e
lanadas no computador para, ento, serem analisadas. Os resultados da pesquisa so
divulgados de forma agrupada e no de forma individual. Alm disso, a folha com o nome, o
endereo e o telefone do entrevistado fica separado do questionrio com as respostas.
Leia para ele a declarao de confidencialidade:
Esta entrevista completamente voluntria. Se houver alguma questo que voc
no queira responder, por favor, diga e passarei para a questo seguinte.Suas
respostas so confidenciais e o seu nome no ser associado a elas.
7. Durao da entrevista
Informe o tempo mdio para a realizao da entrevista apenas se for perguntado.
8. Questionamentos diversos
Mesmo depois de voc ter dado todas essas informaes sobre a pesquisa, algumas pessoas
podero fazer outros questionamentos. Para evitar problemas e recusas, esteja preparado
para as seguintes situaes:
Por que eu? Por que voc no entrevista o meu vizinho?
1. Toda pessoa e endereo selecionados so nicos.

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 36 construo do questionrio

2. No permitido substituir a pessoa selecionada.


3. A pessoa selecionada representa pessoas semelhantes.
4. Seja sensvel. Pratique a arte de escutar. Seja claro em suas respostas.
No estou interessado
1. Tente descobrir porque a pessoa no est interessada.
2. Chame a ateno para os aspectos da pesquisa que podem ser especialmente
relevantes.
3. Sugira comear a entrevista, pois a maioria das pessoas fica interessada depois que a
entrevista comea.
4. Diga:Ns precisamos entrevistar pessoas de todos os segmentos da populao, e no
apenas aquelas interessadas ou com muito conhecimento sobre o assunto.
9. Combine o melhor horrio para a entrevista
1. O ideal que a entrevista seja conduzida logo no primeiro contato com o entrevistado.
Todavia, se isto no for possvel, deixe acertado o dia e a hora da entrevista.
2. Procure combinar um horrio em que, provavelmente, ocorrero mnimo de interrupes.
3. Havendo dificuldades para o entrevistado, oua o que ele diz e compartilheo problema
com ele, dizendo:
Eu entendo que voc tem estado ocupado, mas ns necessitamos conversar com
todas as pessoas, incluindo as muito ocupadas, para que suas opinies sejam
representadas na pesquisa. Ns podemos fazer a entrevista quando for de sua
convenincia, e, se necessrio, dividi-la em duas partes.
10. No se desanime com a primeira recusa
1. A maioria das recusas circunstancial.
2. As pessoas tendem mais a dizersimplesmente No do que Agora no.
3. Preste ateno linguagem corporal.
4. No force: saia antes de obter uma recusa definitiva, de modo que as portas fiquem
abertas para outras tentativas.
5. Se necessrio, pea a ajuda da coordenao da pesquisa.
6. Nunca demonstre irritao ou descontentamento com uma recusa ou comportamento
agressivo do selecionado. Mantenha-se calmo e procure agir com naturalidade. Lembre-se
de que, mais tarde, voc ou outro entrevistador ou a coordenao da pesquisa dever
tentar convenc-lo a dar a entrevista.

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 37 construo do questionrio

Para isso, importante que voc registre na Folha de Controle de Contato para Marcao de
Entrevista:

a) A hora do dia da visita;


b) As razes da recusa e a atitude do selecionado ao recusar;
c) O que voc fez para tentar convenc-lo;
d) Qualquer outro fato ocorrido que possa ser til para quem for fazer o novo contato.

Tcnicas gerais de entrevista

1. Estabelea empatia Procedade forma amistosa, demonstrando interesse no que o entrevistado


diz, sem denotar qualquer atitude negativa em relao ao que dito. Isso importante para fazer
o entrevistado se sentir confortvel com voc e motivado a compartilhar suas opinies com
honestidade.
2. Seja corts Trate o entrevistado e suas respostas com respeito.
3. Seja imparcial No julgue; aceite as respostas do entrevistado como legtimas e com iseno.
4. Seja um ouvinte atencioso Escute atentamente o que o entrevistado est tentando dizer. Se
no entender a resposta, volte pergunta e verifique se a fez de forma correta. Se necessrio, use
os probes at que o significado da resposta esteja claro. Demonstre sua ateno ao que o
entrevistado diz; isso o far sentir que suas informaes/opinies so importantes.
5. Encoraje o entrevistado a dar respostas completas De maneira neutra, de modo a no afetar
o contedo da resposta, voc deve demonstrar interesse naquilo que o entrevistado est dizendo.
Use expresses de reforo como Estou entendendo,Compreendo, e adote posturas corporais
receptivas, como balanar a cabea, por exemplo.
6. Permanea neutro No deixe o entrevistado perceber o que voc sente/pensa acerca de
nenhuma das opinies/comentrios feitos por ele. Isso pode afetar seriamente a confiabilidade da
resposta, pois ele poder alter-la com o objetivo de responder aquilo que ele acredita que voc
gostaria de ouvir.
7. No debata o tema da entrevista com o entrevistado ou outra pessoa presente No
demonstre suas opinies e sentimentos em relao s respostas. Mantenha a objetividade.

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 38 construo do questionrio

8. Deixe o entrevistado confortvel para dar respostas sobre atitudes e crenas O


entrevistado poder sentir-se desconfortvel ao prestar informaes sobre opinies e crenas
pessoais, o que pode ocasionar distores nas respostas dadas. Acentue que tais questes no
tm respostas certas ou erradas; o importante a opinio do entrevistado e que As suas opinies
so to vlidas e importantes quanto as de qualquer outra pessoa.
9. Relembre ao entrevistado o direito de no responder No faa isto a menos que seja
necessrio, porque o objetivo que o entrevistado responda a todas as questes. Entretanto, se o
entrevistado demonstrar aborrecimento, d a ele a opo de no responder questo. Faa uma
nota no questionrio e passe para a questo seguinte. melhor perder uma informao do que
perder todo o questionrio.
10. No se desanime H a expectativa de que as entrevistas sejam fceis, mas algumas podem ser
bem difceis ou duras. Algumas pessoas no necessitam ser motivadas a falar e, na verdade,
voc precisa limitar suas respostas, enquanto outras necessitam ser muito encorajadas.
11. Remarcando entrevistas O entrevistado pode se ver obrigado a interromper a entrevista em
funo de um compromisso anterior ou pela chegada de uma visita inesperada. Procure deixar
bem acertadoum novo horrio para terminar a entrevista. Assim, ser mais fcil se voc tiver
conseguido uma boa empatia com o entrevistado.
12. No se envolva em discusses Voc poder entrevistar pessoas em situaes desagradveis,
ou que respondam de forma grosseira. Tente ser simptico e sensvel e procure no se envolver,
tendo sempre em mente o objetivo da entrevista.
13. Entrevistas emocionais Voc poder entrevistar pessoas em situaes tristes ou difceis e se
sentir perturbado com as respostas. Seja sensvel e demonstre empatia, mas evite muito
envolvimento. Se necessrio, sugira um pequeno intervalo para a pessoa tomar gua ou um
cafezinho e se recompor emocionalmente. Em situaes mais difceis, pergunte ao entrevistado se
gostaria de continuar a entrevista em outra hora ou dia.
14. Ajuste o ritmo da entrevista aos diferentes perfis de entrevistados Se voc falar muito
devagar o entrevistado pode sechatear e, se falar rpido demais, ele poder no entender a
questo. Esteja atento ao caso de pessoas mais velhas, pois elas podem demandar um ritmo
especial de entrevista.
15. Agradea ao final da entrevista Voc poder permanecer alguns minutos conversando com o
entrevistado sobre a entrevista, j que muitas pessoas querem fazer perguntas e comentrios
acerca de sua prpria entrevista.

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 39 construo do questionrio

A conduo da entrevista
Os mecanismos de coleta de informaes e de seu registro so partes fundamentais do trabalho
do entrevistador. A seguir, h instrues para a obteno de dados os mais completos e confiveis
possveis.

I. Como usar o questionrio


1. Leia as questes exatamente da maneira e na ordem em que aparecem no questionrio.
importante que as perguntas sejam feitas exatamente da mesma forma e na mesma ordem
para todos os entrevistados.Portanto, o entrevistador no pode fazer as perguntas com
suas prprias palavras, parafrasear ou omitir parte da questo, ou mudar asua ordem.
2. Escolha a palavra apropriada, entre parnteses, tendo como base o que voc j sabe sobre
o entrevistado (p. ex.: bairro/vila; marido/mulher).
3. Leia a questo inteira antes de aceitar a resposta.
4. No pule nenhuma questo. Faa todas as perguntas na ordem, mesmo que a resposta j
tenha sido dada pelo entrevistado. Neste caso, esclarea: Ns j tocamos neste assunto
antes, mas eu preciso fazer todas as questes na ordem em que elas aparecem no
questionrio.
5. Muitas vezes uma questo ou uma sequncia de questes no se aplica situao do
entrevistado. Nestes casos, o entrevistador orientado a saltar algumas questes. Leia
atentamente e siga as orientaes que aparecem nascaixas de orientao.
6. Leia em voz alta apenas o que est em caixa baixa. Palavras em CAIXA ALTA so as suas
instrues e no devem ser lidas em voz alta.
7. Enfatize as palavras em negrito.
8. Use um tom de voz agradvel, transmitindo segurana, interesse e profissionalismo.
9. Evite referncias diretas a respostas anteriores.
10. No ajude o entrevistado a responder a nenhuma questo; a resposta dever ser apenas
dele.
11. Use os probes.

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 40 construo do questionrio

II. Dando retorno:feedback


Uma parte importante do trabalho do entrevistador motivar o entrevistado a participar da
entrevista com interesse e a continuar a fazer parte do survey. Uma forma de fazer isso mostrar ao
entrevistado que ele est se saindo bem por meio de aes e declaraes. Veja algumas orientaes
sobrecomo fazer isto:
1. D retorno positivo ao entrevistado somente quando ele tiver uma boa performance. claro
que voc no deve ser rspido com o entrevistado se ele, por exemplo, comear a fazer
digresses inteis. Mas, ao mesmo tempo, voc no deve o encorajar a continuar com as
digresses.
2. Reconhea a performance, no o contedo da resposta. Voc deve dar retorno positivo para
uma boa performance, independentemente do seu julgamento sobre o contedo das
respostas.
3. Use apenas feedback neutro. Evite dizerOKou isso mesmo. UseEstou entendendo ou
Compreendo.
4. D retorno noverbal. Nas entrevistas face-a-face, alm de retornos verbais, d feedback
noverbal, como: um sorriso, inclinao da cabea, entre outros.

III. Como fazer as anotaes


1. Nas questes com opes de respostas j definidas, marque um X na opo escolhida pelo
entrevistado.
2. Nas questes que pedem para voc escrever uma informao especfica, como: valor
numrico, idade ou distncia,escreva apenas o nmero.
3. Nas questes abertas, no resuma e tampouco parafraseie as respostas. Caso contrrio,
voc poder, mesmo seminteno, mudar o significado das respostas.
4. Anote as respostas completas: registre as respostas com as palavras do prprio
entrevistado para evitar perder informaes, j que um novo contato com o entrevistado
seria muito difcil.
5. Escreva as respostas medida que o entrevistado responde. Uma boa tcnica para manter
o entrevistado interessado enquanto voc anota suas respostas comear a repetir em voz
alta aquilo que voc est escrevendo. Isso permite que entrevistado tenha confiana nas
suas anotaes e veja que voc est prestando ateno nele. Essa tcnica tambm serve

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 41 construo do questionrio

como um probe, pois o entrevistado, ao escutar suas prprias palavras, poder se sentir
estimulado a ampliar sua resposta.
6. Use letra legvel ao escrever as respostas. Aps terminar a entrevista, releia suas anotaes
e reescreva aquelas palavras que no esto claras e legveis e que poderiam no ser
entendidas pelo codificador.
7. Tome cuidado com as abreviaes que fizer. Voc poder usar as suas prprias siglas para
anotar o que est sendo dito, mas deixe registrado o significado de tais siglas para que
outras pessoas possam entender suas anotaes.
8. Registre os probes que voc usar. Voc pode abrevi-los, mas seja cuidadoso para indicar
o que significam. Registre-os exatamente no lugar em que foram usados.
9. H questesa serem respondidas pelo prprio entrevistador. Nestes casos, voc mesmo vai
responder questo marcando a opo correta de acordo com informaes obtidas
anteriormente.

IV. Editando a entrevista


1. A primeira coisa que voc deve fazer depois da entrevista e, se possvel, antes de deixar a
vizinhana, conferir todo o questionrio para ter certeza de que todas as questes esto
preenchidas. importante tambm que voc releia as questes abertas, verificando se as
respostas esto legveis, completas e em condies de serem entendidas. Lembre-se de
que outras pessoas tero de ler seus questionrios.
2. Voc deve registrar quaisquer referncias ou observaes que ajudema entender a situao
e facilitem a codificao. Estas observaes devem ser feitas sempre entre parnteses.
3. Repasse toda a entrevista e reescreva qualquer palavra ilegvel ou abreviada (exceto as
abreviaturas convencionais dos probes), assegurando-se de que todas suas anotaes
esto claras e em condies de serem entendidas.
4. Registre as razes em cada questo no respondida (exceto naquelas que no se aplicam
situao particular do entrevistado e voc foi orientado a saltar).
5. Verifique se voc coletou todos os dados necessrios do domiclio.
6. No se esquea tambm de anotar todos os probes usados, com os cdigos corretos.
Aproveite para preencher a Folha de Rosto do questionrio antes que voc se esquea.

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 42 construo do questionrio

Clarificando perguntas e respostas


Por ser uma tcnica bem estruturada, o survey utiliza procedimentos padronizados para garantir
o compartilhamento de significados entre pesquisador e entrevistado e, assim, assegurar a
comparabilidade das perguntas feitas e das respostas dadas pelos diferentes entrevistadores e
entrevistados. A busca de clarificao das perguntas e das respostas pode partir tanto do entrevistador
quanto do entrevistado.

I.Quando a dvida ou o pedido de esclarecimento parte do entrevistado


Algumas vezes, o entrevistado poder pedir informaes adicionais para responder a alguma
questo. Nesses casos, voc poder adotar algum dos procedimentos padronizados listados a seguir.
Ao faz-lo, assinale na barra de esclarecimentos a abreviatura do procedimento adotado. Os tipos de
procedimentos so:

1. Repetir o enunciado da questo (R.E.).


2. Repetir as opes de resposta (R.OP.).
3. Pedir definies do significado do enunciado (SIG. E.).
4. Pediudefiniodosignificadodasopesderesposta (SIG. OP.).
5. Usar a expresso Qualquer que seja o significado que isso tenha para voc, quando o
entrevistado solicitar definio de conceito que no aparea no enunciado da questo, entre
parnteses. Assinale (SIG.).
6. Caso aparea na questo a instruo MQQ pg... (Manual de Questo por Questo),
refira-se ao Manual, onde voc encontrar os esclarecimentos que podem ser dados para o
entrevistado. Assinale a instruo (MQQ).

Para evitar interrupes e perda do ritmo, estude, com muita ateno, o MQQ antes de iniciar
a conduo das entrevistas.

Exemplo de barra de esclarecimentos:

1. R. E. 2. R. OP. 3. SIG. E. 4. SIG. OP. 5. MQQ

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 43 construo do questionrio

A seguir, listamos algumas orientaesque o entrevistador deve seguir ao dar esclarecimentos:

1. Se existe qualquer dvida de que o entrevistado escutou a questo inteira, repita a questo
toda. Assinale (R.E.) na barra de esclarecimentos.
2. Se lhe for pedido, repita o marco de referncia temporal (p. ex.: nas ltimas semanas, no
ano passado). Assinale (R.E.).
3. Quando lhe pedido para repetir uma opo de resposta, releia todas as opes de
resposta da questo, a menos que o entrevistado j tenha eliminado uma ou mais opes
explicitamente. Assinale (R.OP.).
4. Quando lhe pedida a definio de algum conceito, h duas situaes:
a) No caso de definio ou esclarecimentode conceito especificado na questo no Manual
de Questo por Questo, fornea a definio ao entrevistado. Assinale a instruo (Sig.
Op).
b) No caso de definio de conceito no especificado no Manual de Questo por Questo,
diga ao entrevistado para responder Qualquer que seja o significado que isso tenha
para voc. Assinale (SIG.E. ou Sig.Op.). Em seguida, pergunte: O que isso (conceito)
significa para voc?e anote a resposta abaixo da barra de esclarecimentos.

II. Quando o pesquisador antecipa a necessidade de esclarecimentos ou quando o


entrevistador tem dvidas
No caso de o pesquisador antecipar a necessidade de esclarecimentos eno caso de dvidas por
parte do entrevistador, so utilizadas questes padronizadas adicionais chamadas de probes.
O probe uma tcnica/questo adicional padronizada usada para:

1. Motivar o entrevistado a se comunicar de forma mais completa e clara.


2. Permitir ou encorajar o entrevistado a explicar suas respostas.
3. Evitar que o entrevistado inicie digresses com informaes irrelevantes.

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 44 construo do questionrio

Quando usar
Voc deve usar os probes quando:

1. O pesquisador antecipa a necessidade do seu uso. Os probes preestabelecidos pelo


pesquisador aparecem na linha de probes.
(PX.):___(MAIS):___(ACHA):___(R.E.):___(R.Op.):___ (O.MOT.):___
2. O entrevistado lhe parecer inseguro quanto ao significado de uma questo ou alternativa.
3. Voc no tiver certeza de que entendeu bem o que o ele quis dizer.
4. Voc no tem informaes suficientes para serem codificadas apropriadamente.
5. Ou seja, voc deve usar os probes sempre que a resposta dada for irrelevante, incompleta,
confusa, ou quando o entrevistado tiver se esquecido da questo, ou se ele estiver
divagando em outro tpico.
6. Uma situao em que voc tem necessariamente de usar o probe quando o entrevistado
diz No sei como resposta. A menos que haja outra orientao, voc deve usar ao menos
um probetoda vez em que o entrevistado responderNo sei. Neste caso, voc pode usar o
probe repetindo a questo, ou dizendo algo como No h resposta certa ou errada para
esta questo,e ns precisamos de sua opinio.Porm, no insista demais, pois voc pode
acabar recebendo uma falsa resposta ou aborrecer o entrevistado.
7. Outra situao na qual voc deve usar o probe no caso de questes abertas. Sempre use
probes no caso de questes abertas a no ser que o Manual de Questo por
Questooriente especificamente para no o fazer.

A seguir, alguns exemplos dos principais probes e sugestes sobre quando us-los:

1. ProbeO que voc quer dizer? ou Voc quer dizer como?ou Como assim? ou Em que
voc est pensando?:use quando voc no entender a resposta do entrevistado. Indique
isto por (SIG.).
2. ProbeVoc pode me falar um pouco maissobre isso?:use quando a resposta do
entrevistado no for clara ou der margem a mais de uma interpretao. Indique isso por
(MAIS).
3. ProbeO que voc acha? ou O que voc pensa? ou O que voc espera?:use quando
uma resposta se inicia porNo sei.... Indique isso por (ACHA).

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 45 construo do questionrio

4. ProbeQual se aproxima mais? ou Qual se aproxima mais de como voc se sente


(pensa)?: use quando o entrevistado ficar em dvida entre duas respostas ou quando ele
quiser escolher mais opes do que o Manual de Questo por Questo permite. Indique isso
por (PX.).
5. Probe Existem outros motivos para voc pensar / sentir assim? ou Existem outras razes
para voc pensar / sentir assim?: use para questes abertas que perguntam Por qu?.
Indique isso por (O.MOT.). Use tambm o probe (O.MOT.) quando os objetivos do Manual
de Questo por Questo especificarem que voc deve usar probes para obter informaes
adicionais em uma questo fechada.
6. Lembre-se de que sentenas maiores encorajam mais informaes do que frases curtas. A
frase Existem outras razes para que voc pense assim? d ao respondente tempo para
pensar e demonstra a importncia do pedido. Um simples Algo mais? ou Alguma outra?
provavelmente ser seguido de uma resposta negativa.

Alm dos probes principais j mencionados,h ainda os seguintes probesquepodem ser usados:

ProbeVoc pode me falar um pouco mais sobre o que isso significa para voc? ou Em
que voc est pensando?(SIG.).
ProbeComo voc se sente em relao a isso? (SENT.)
ProbeO que aconteceu? (AC.)
ProbePor que foi assim? (PQ.)
ProbeVoc pode me dar um exemplo? (EX.)
ProbeMas, em geral, o que voc pensa? (DIG)

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 46 construo do questionrio

Relao das abreviaturas dos principais probes e esclarecimentos

O que aconteceu? (AC.)


O que voc acha / espera / pensa? (ACHA)
Mas, em geral, o que voc pensa? (DIG.)
Voc pode me dar um exemplo? (EX.)
Voc pode me falar um pouco mais sobre isso?
(MAIS)
Voc gostaria de acrescentar mais alguma informao?
Existem outros motivos para voc pensar / sentir assim?
(O.MOT.)
Existem outras razes para voc pensar / sentir assim?
Por que foi assim? (PQ.)
Qual se aproxima mais de como voc sente / pensa?
(PX.)
Qual se aproxima mais?
Repetir o enunciado
(R.E.)
Repetir quadro de referncia
Repetir opes deresposta (R.OP.)
Como voc se sente em relao a isso? (SENT.)
Definio do significado do enunciado (SIG.E.)
Qualquer que seja o significado que isso tenha para voc.
(SIG.)
Qualquer que seja o seu pensamento sobre isso.
O que voc quer dizer com isso?
(SIG.)
Voc quer dizer como / Como assim?
Em que voc est pensando?
Definio do significado das opes de resposta (SIG.OP.)

Lembre-se semprede que os probes:


1. So neutros e ajudam o entrevistado a entender e a responder a questo proposta.
2. Devem ser registrados no questionrio, na barra de esclarecimentos, na linha de probes ou
entre parnteses e exatamente no lugar (questo) onde foi usado.
3. Auxiliam os codificadores a entenderem exatamente o que aconteceu durante a entrevista.
Anime-se e boa sorte!

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 47 construo do questionrio

3.MDULO QUALIDADE DE VIDA COMUNITRIAE CAPITAL SOCIAL

Hora exatade incio: ______ horas ______ minutos

muito importante para ns sabermos o que voc pensa sobre a qualidade de vida no/a
seu/sua bairro/vila.

Q1. So vrias as atitudes que as pessoas podem tomar para resolver problemas no/a
seu/suabairro/vila ou vizinhana. No ltimo ano,voc...
Q1.a. Foi membro de associao comunitria de bairro/vila?
1. Sim
2. No
8. NS
|___|
9. NR Q1.a
1. R. Enun. 3. Sig. Enun.

1. Por favor, d alguns exemplos de associaes no seu/sua bairro/vila:

Q1.b. No ltimo ano, voc procurou algum vereador para resolver assunto relacionado ao/a
seu/sua bairro/vila ou vizinhana?
1. Sim
2. No (V PARA A Q1d.) |___|
8. NS Q1.b
9. NR

Q1.c. Voc fez isso sozinho, atravs de um grupo ou associao, ou de ambas as formas?
1. Sozinho
2. Atravs de grupo ou associao
3. Ambas as formas
7. NSA
|___|
8. NS
Q1.c
9. NR
1. R. Enun. 2. R. Op. 3. Sig. Enun. 4. Sig. Op.

1. As pessoas no seu/sua bairro/vila geralmente procuram os vereadores? Se sim, como


normalmente o fazem?

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 48 construo do questionrio

2. Porque voc acha que as pessoas no seu/sua bairro/vila (no) procuram os


vereadores?

Q1.d. No ltimo ano, voc procurou a prefeitura para resolver algum assunto relacionado
ao/aseu/sua bairro/vila ou vizinhana?
1. Sim
2. No (V PARA Q2)
8. NS |___|
9. NR Q1.d

Q1.e. Voc fez isso sozinho(a), atravs de um grupo ou associao, ou de ambas as formas?
1. Sozinho
2. Atravs de grupo ou associao
3. Ambas as formas
8. NS
9. NR
|___|
Q1.e
1. Foi fcil ou difcil responder a estas duas ltimas perguntas?

2.O que voc entende por procurar a prefeitura?

3.As pessoas no seu/sua bairro/vila geralmente procuram os vereadores? Se sim,


como normalmente o fazem?

4. Porque voc acha que as pessoas no seu/sua bairro/vila (no) procuram os


vereadores?

Q2. Excluindo as reunies do Oramento Participativo, voc participou de alguma reunio


com representantes ou tcnicos da prefeitura no ltimo ano?
1. Sim
2. No
8. NS
9. NR
1. R. Enun. 3. Sig. Enun. |___|
Q2
Q3. No ltimo ano, voc se reuniu com vizinhos para discutir problemas do/da bairro/vila?

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 49 construo do questionrio

1. Sim
2. No
8. NS
9. NR
|___|
1. Quem voc considera seus vizinhos? Q3

ATENO ENTREVISTADOR:
PERGUNTAR A PRXIMA QUESTO APENAS PARA OS QUE MORAM EM
PRDIO OU CONDOMNIO.PARA OS DEMAIS, V PARA Q5.

Q4. (CE. p. 1) Com que frequncia vocvai s reunies do seu prdio ou condomnio?Voc
vai frequentemente, algumas vezes, raramente ou nunca?
1. Frequentemente
2. Algumas vezes
3. Raramente
4. Nunca
7. NSA
8. NS
9. NR |___|
Q4
1. R. Enun. 2. R. Op. 3. Sig. Enun. 4. Sig. Op. 5. Escala

1. Em que tipos de reunio voc pensou?

2. H outros tipos de reunio no seu (prdio, condomnio)? Quais? Voc comparece a


elas? Se no, por qu?

Q5. Agora, vamos falar um pouco sobre seus vizinhos e sua vizinhana.O que voc
considera como sendo a sua vizinhana?
(ANOTAR)____________________________________________

88. NS |___|
99. NR |___|
Q5
1. Na sua opinio, h diferena entre o que voc considera como sendo vizinhos e o
que considera como sendo vizinhana?

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 50 construo do questionrio

Q6. Com qual dessas afirmativas voc concorda mais: (LER OPES)
1. Este/esta bairro/vila como se fosse a minha casa
2. Para mim este/a bairro/vila apenas um lugar para morar
8. NS
9. NR
1. R. Enun. 2. R. Op. 3. Sig. Enun. 4. Sig. Op.
|___|
Q6
(MAIS PRX): _________________

1. O que voc pensou quando ouviu a frase Este/esta bairro/vila como se fosse a
minha casa?

2. E o que voc pensou quando ouviu a frase Para mim este/esta bairro/vila apenas
um lugar para morar?

3. Por que para voc seu/sua bairro/vila ...(RESPOSTA DO ENTREVISTADO Q6)

Q7. (CE, p. 2)Agora, eu vou ler uma lista de problemas que existem em alguns (bairros,
vilas). Para cada um deles, diga se esse um problema grave, um problema ou se no
um problema no seu/suabairro/vila.

Problema um No NS NR
grave problema problema
Q7.a. Meninos de rua 1 2 3 8 9

Q7.b. Gangues 1 2 3 8 9 |___|


Q7.a
Q7.c. Trfico de drogas 1 2 3 8 9 |___|
Q7.b
|___|
Q7.d. Muita discusso ou briga 1 2 3 8 9
Q7.c
entre vizinhos
|___|
Q7.d
1. R. Enun. 2. R. Op. 3. Sig. Enun. 4. Sig. Op. 5. Escala

1. Em quem voc pensa quando falamos em meninos de rua?

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 51 construo do questionrio

2. H muitos no seu bairro?_______________


3. Em que voc pensa quando falamos em gangues? Por favor, d exemplos.

4. H muitas no seu bairro? _______________


5. O que voc considera como sendo discusses ou brigas entrevizinhos? Por favor,
d exemplos na sua vizinhana.

Q8. (CE. p. 2) Agora, vamos falar sobre a situao dos seguintes servios no/a seu/sua
bairro/vila. Para cada um deles, diga se esse um problema grave, um problema, ou no
um problema?

Problema um No No tem NS NR
grave problema problema coleta
de lixo
Q8.a. Falta de vagas em 1 2 3 4 8 9
escolas
Q8.b. Poucas creches 1 2 3 4 8 9 |___|
Q8.c. Coleta de lixo 1 2 3 4 8 9 Q8.a
irregular ou inadequada
|___|
Q8.d. Falta de 1 2 3 4 8 9
Q8.b
saneamento, (esgoto a |___|
cu aberto, lixes, Q8.c
abastecimento de gua)
Q8.e. Falta de reas de 1 2 3 4 8 9 |___|
lazer (como praas, Q8.d
quadras esportivas,
parques, etc.) |___|
Q8.f. Transporte 1 2 3 4 8 9 Q8.e
(horrios, preo da
passagem, nibus cheio)
Q8.g. Algum outro? |___|
Q8.f
(PERGUNTAR E
ANOTAR)_______
|___|
1. R. Enun. 2. R. Op. 3. Sig. Enun. 4. Sig. Op. 5. Escala Q8.g

1. Qual desses problemas voc considera o mais importante?

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 52 construo do questionrio

2. E o menos importante?

3. E quais seriam outros problemas importantes no seu/sua bairro/vila que no foram


mencionados?

Q9. Agora, eu gostaria de fazer algumas perguntas sobre seus amigos e sua famlia. Tirando
aqueles que moram na sua casa, quantos parentes moram no/aseu/sua bairro/vilaou
bairros/vilas prximos/as?
(ANOTAR): ____________

8. NS
9. NR
1. R. Enun. 3. Sig. Enun.

Parentes
(SIG):______________________________________________________________________ |___|
|___|
1. Quem voc incluiu ou no incluiucomo parentes? Por qu? Q9

2. Como voc fez o clculo do nmero de parentes quemoram no/aseu/suabairro/vilaou


bairros/vilas prximos/as?

3. O que voc considerou como bairros/vilas prximos/as? Quais foram esses


bairros/vilas?

Q10.Quantos amigos voc tem que moram no/a seu/sua bairro/vilaou bairros/vilas
prximos/as?
(ANOTAR): ____________

8. NS
9. NR
1. R. Enun. 3. Sig. Enun. |___|
|___|
Q10
1. Quem voc incluiu ou no incluiucomo amigos? Por qu?

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 53 construo do questionrio

2. Como voc fez o clculo do nmero de amigos quemoram no/aseu/sua


bairro/vilaou bairros/vilas prximos/as?

Q11. (CE, p. 3) Com que frequncia voc conversa pessoalmente oupor telefone com seus
vizinhos? (LER OPES)
1. Diariamente ou quase todos os dias
2. Algumas vezes por semana
4. Algumas vezes por ms
5. Raramente
6. Nunca
8. NS
9. NR
1. R. Enun. 2. R. Op. 3. Sig. Enun. 4. Sig. Op. 5. Escala
|___|
Q11
1. O que voc considerou como sendo conversar com vizinhos?

2. importante ou no para voc ter vizinhos com quem conversa com certa
frequncia? Por qu?

Q12a. Voc usa a Internet para enviar e-mail ou mensagens ou para participar de grupos de
conversa?
1. Sim
2. No (V PARA Q13)
9. NR

|___|
1. Para voc a internet uma forma boa ou ruim de se comunicar com as pessoas?
Q12a

2. Em que situaes voc acha vantagem usar a Internet, em vez do telefone ou visitas
pessoais, para se comunicar com as pessoas?

3. Em quais situaes voc acha que no deve usar a Internet, em vez do telefone ou
visitas pessoais, para se comunicar com as pessoas?

Q12b. (CE, p. 3) Com que frequncia voc usa a Internet para enviar e-mail ou mensagens
ou para participar de grupos de conversa? Voc o faz...(LER OPES)

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 54 construo do questionrio

1. Diariamente ou quase todos os dias


2. Algumas vezes por semana
3. Algumas vezes por ms
4. Raramente.
7. NSA
8. NS
9. NR |___|
1. R. Enun. 2. R. Op. 3. Sig. Enun. 4. Sig. Op. 5. Escala Q12b

Q13. (CE, p. 4)Com que frequncia voc e seus vizinhos fazem favor uns aos outros?Por
fazer um favor, quero dizer coisas como cuidar dos filhos, emprestar mantimentos, levar
filhos para a escola ou outras gentilezas. Isso acontece frequentemente, s vezes, raramente
ou nunca?
1. Frequentemente
2. s vezes
3. Raramente
4. Nunca
8. NS
9. NR
1. R. Enun. 2. R. Op. 3. Sig. Enun. 4. Sig. Op. 5. Escala |___|
Q13
1. Que outros favores voc e seus vizinhos fazem uns aos outros?

2. Que importncia isso tem para voc?

3. Quais so os tipos de vizinhos com os quais normalmente voc troca favores?

Q14. (CE, p. 5)H muitas maneiras de as pessoas sentirem que fazem parte de um grupo.
Eu vou ler uma lista de grupos e gostaria que voc me dissesse qual deles lhe d o
sentimento mais forte de fazer parte do grupo. E em segundo lugar? E o que menos lhe d
esse sentimento? (LER OPES)

Q14.a.O que lhe d o sentimento mais forte de grupo:_______________


Q14.b. Em segundo lugar: __________________
Q14.c. E o que lhe d menos o sentimento de grupo: ___________________
|___|
1. Seu/sua bairro/vila Q14.a
2. Seus amigos |___|

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 55 construo do questionrio

3. Seus vizinhos Q14.b


4. Sua igreja |___|
5. Seus colegas de trabalho Q14.c
6. Sua famlia
7. As associaes ou outros grupos dos quais voc participa ou membro
8. NS
9. NR
1. R. Enun. 2. R. Op. 3. Sig. Enun. 4. Sig. Op. 5. Escala

(NS) (ACHA):___________

1. Para voco que ter um sentimento forte de grupo?

2. Por que (CITAR RESPOSTA DO ENTREVISTADO PARAQ14a) lhe d o sentimento


mais forte de fazer parte de um grupo?

3. Por que (CITAR RESPOSTA DO ENTREVISTADO PARAQ14c)lhe d o sentimento


menos forte de fazer parte de um grupo?

Q15.a. Agora, eu vou ler uma lista de afirmativas sobre vizinhos e vizinhana e gostaria de
saber se voc concorda ou discorda de cada uma delas.

Voc tem pouco a ver com as pessoas que moram neste/nesta bairro/vila. Voc concorda ou
discorda?

(SE CONCORDA, PERGUNTE): Concorda totalmente ou concorda em parte?


1. Concorda totalmente
2. Concorda em parte

(SE DISCORDA, PERGUNTE): Discorda em parte ou discorda totalmente?


3. Discorda em parte
4. Discorda totalmente
8. NS
9. NR

1. R. Enun. 2. R. Op. 3. Sig. Enun. 4. Sig. Op. 5. Escala

1. O que voc considera como sendo o seu/sua bairro/vila?

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 56 construo do questionrio

2. O que voc entende por ter pouco a vercom as pessoas do seu/sua (bairro,vila) ? |___|
Q15.a

Q15.b. Ns podemos confiar nas pessoas que moram neste/nesta bairro/vila. Voc concorda
ou discorda?

(SE CONCORDA, PERGUNTAR): Concorda totalmente ou concorda em parte?


1. Concorda totalmente
2. Concorda em parte

(SE DISCORDA, PERGUNTAR): Discorda em parte ou discorda totalmente?


3. Discorda em parte
4. Discorda totalmente
8. NS
9. NR

1. R. Enun. 2. R. Op. 3. Sig. Enun. 4. Sig. Op. 5. Escala

(NS) (ACHA):__________

1. O que voc entende por confiar nas pessoas do seu/sua bairro/vila?


|___|
Q15.b
Q15.c. Os vizinhos neste/nesta bairro/vila so pessoas muito prestativas. Voc concorda ou
discorda?

(SE CONCORDA, PERGUNTE): Concorda totalmente ou concorda em parte?


1. Concorda totalmente
2. Concorda em parte

(SE DISCORDA, PERGUNTE): Discorda em parte ou discorda totalmente?


3. Discorda em parte
4. Discorda totalmente
8. NS
9. NR

1. R. Enun. 2. R. Op. 3. Sig. Enun. 4. Sig. Op. 5. Escala


|___|
(NS) (ACHA):__________ Q15.c

1.Em que e quem voc pensou quando falamos em pessoas prestativas do seu/sua

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 57 construo do questionrio

bairro/vila?

Q15.d. Morar neste/nesta bairro/vila me faz sentir parte de uma comunidade. Voc concorda
ou discorda?

(SE CONCORDA, PERGUNTE): Concorda totalmente ou concorda em parte?


1. Concorda totalmente
2. Concorda em parte

(SE DISCORDA, PERGUNTE): Discorda em parte ou discorda totalmente?


3. Discorda em parte
4. Discorda totalmente
8. NS
9. NR

|___|
1. R. Enun. 2. R. Op. 3. Sig. Enun. 4. Sig. Op. 5. Escala
Q15.d

(NS) (ACHA):__________

1. Em quevoc pensa quando falamos em comunidade?O que voc entende por ela?
D exemplos.

2. Na sua opinio, o seu/sua bairro/vila representa algum tipo de comunidade?

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 58 construo do questionrio

4. FORMULRIO DE AVALIAO DA ENTREVISTA

PESQUISA DA REGIO METROPOLITANA DE BELO HORIZONTE

Pr-teste

Questionrio: !____!____!
Entrevistador: ___________________________________________________

1.Avaliao das questes

Numa escala de 0 a 10, sendo 0 = nenhuma dificuldade e 10 = muita dificuldade, qual o grau de
dificuldade quanto aos seguintes tipos de dificuldades.

Tipos de dificuldades:
1. Enunciado (compreenso, longo, ambiguo, etc.)
2. Terminologia (termos difceis, ambguos, etc.)
3. Compreenso do objetivo da questo
4. Problemas relativos memria
5. Formato da questo (lista, ordenao, escalas, etc.)
6. Opes de respostas
7. Constrangimento
8. Desconhecimento do assunto
9. Entendimento dos temas
10. No sensvel questo de gnero
11. Outras (especificar)

1.A. Avaliao por bateria: (classificar o grau de dificuldade de 0 a 10) e indicar as questes onde
aparecem problemas e os tipos de dificuldades:

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 59 construo do questionrio

Bateria Grau de Questes com Tipos de dificuldade


dificuldade problemas

B1. Introduo

B2. Qualidade de
vida e capital social

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 60 construo do questionrio

Bateria Grau de Questes com Tipos de dificuldade


dificuldade problemas

B3. Polcia e
criminalidade

B4. Associativismo

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 61 construo do questionrio

Bateria Grau de Questes com Tipos de dificuldade


dificuldade problemas

B5. Valores

B6. Religio

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 62 construo do questionrio

Bateria Grau de Questes com Tipos de dificuldade


dificuldade problemas

B7. Etnia e cor

B8. Trabalho

B9. Estratificao

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 63 construo do questionrio

2. Avaliao das escalas

Numa escala de 0 a 10, sendo 0 = nenhuma dificuldade e 10 = muita dificuldade, na sua opinio,
qual o grau de dificuldade em relao s escalas?

Tipos de dificuldades:
1. Distino dos pontos
2. Nmero de pontos
3. Outras (especificar)

Escalas/questes Grau de Tipos de


dificuldade dificuldades
1. Frequentemente
2. Algumas vezes
3. Raramente
4. Nunca

1. Problema grave
2. um problema
3. No problema
1. Diariamente ou quase todos os dias
2. Algumas vezes por semana
3. Algumas vezes por ms
4. Raramente
5. Nunca
1. Frequentemente
2. s vezes
3. Raramente
4. Nunca

1. Concorda totalmente
2. Concorda e parte
3. Discorda e parte
4. Discorda totalmente

1. Muito boa
2. Boa
3. Ruim
4. Pssima

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 64 construo do questionrio

Escalas/questes Grau de Tipos de


dificuldade dificuldades
1. Sempre
2. De vez em quando
3. Raramente
4. Nunca

1. Diariamente ou quase todos os dias


2. De quatro a seis vezes por semana
3. De uma a trs vezes por semana
4. Uma vez por semana
5. Raramente
6. Nunca
1. Diariamente, mais de 5 horas
2. Diariamente, de 3 a 5 horas
3. Diariamente, at 2 horas
4. Algumas vezes por semana
5. Muito raramente
6. Nunca
1. Muito seguro
2. Seguro
3. Inseguro
4. Muito inseguro

Diagramtica de 1 a 10; completamente insatisfeito/


completamente satisfeito

Diagramtica de 1 a 10; nenhum crime/muitos crimes

1. Aumentou
2. Diminuiu
3. Continua o mesmo

1. Muito democrtica
2. Razoavelmente democrtica
3. Pouco democrtica
4. Nada democrtica

1. Muito feliz
2. Mais ou menos feliz
3. Pouco feliz
4. Nada feliz

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 65 construo do questionrio

Escalas/questes Grau de Tipos de


dificuldade dificuldades
1. Boa
2. Indiferente
3. Ruim

Diagramtica de 1 a 10; nada importante/muito importante

Diagramtica de 1 a 10; nunca aceitvel/sempre aceitvel

Diagramtica de 1 a 10; nunca justificvel/sempre justificvel

1. Muito orgulhoso
2. Razoavelmente orgulhoso
3. No muito orgulhoso
4. Nada orgulhoso

1. Muito bom
2. Bom
3. Ruim
4. Muito ruim

1. Menos de uma vez por semana


2. Uma vez por semana
3. Menos de uma vez por ms
4. Uma vez por ms
5. Apenas em dias (santos, sagrados) especiais
6. Nunca/praticamente nunca

Diagramtica de 1 a 10; muito clara/muito escura

Diagramtica de 1 a 5; muito finos/muito grossos

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 66 construo do questionrio

Escalas/questes Grau de Tipos de


dificuldade dificuldades
Diagramtica de 1 a 5; muito fino/muito largo

1. Totalmente a favor
2. Um pouco a favor
3. Nem a favor, nem contra
4. Um pouco contra
5. Totalmente contra

OUTRAS

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 67 construo do questionrio

3. Avaliao da entrevista e comportamento do entrevistado

3.A. Interesse pelo assunto por bateria: classificar o grau de interesse do entrevistado em uma
escala de 0 a 10, sendo 0 =nenhum interesse e 10 = muito interessado:

Bateria Grau de interesse


B1. Introduo
B2. Qualidade de vida/capital social
B3. Polcia e crime
B4. Partcipao e associativismo
B5. Valores
B6. Religio
B7. Etnia e cor
B8. Trabalho
B9. Estratificao

3.B. Receptividade (gentil, hostil, etc.?): classificar o grau de receptividade do entrevistado em uma
escala de 0 a 10, sendo 0 = pouco receptivo e 10 = muito receptivo: __________

3.C. Comportamento do entrevistado quanto ao tempo de durao da entrevista (impaciente?


Em quais momentos da entrevista?)
_______________________________________________________________________________
_______________________________________________________________________________
______________________________________________________

3.D. Outros comentrios sobre as atitudes dos entrevistados em relao entrevista:


_______________________________________________________________________________
_______________________________________________________________________________
______________________________________________________

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 68 construo do questionrio

4. Outros comentrios

_______________________________________________________________________________
_______________________________________________________________________________
_______________________________________________________________________________
__________________________________________________________

4.A. Comentrios sobre a situao da entrevista (outras pessoas presentes? local da entrevista,
etc.)

_______________________________________________________________________________
_______________________________________________________________________________
_______________________________________________________________________________
_____________________________________________________

4.B. Comentrios sobre a situao socioeconmica do entrevistado, sua famlia e vizinhana:

_______________________________________________________________________________
_______________________________________________________________________________
_______________________________________________________________________________
__________________________________________________________

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 69 construo do questionrio

ANEXO COMPLEMENTAR: TEXTOS

A arte e a cincia de fazer perguntas

Aspectos cognitivos da metodologia de survey e a construo do


questionrio

Solange Simes
Maria Aparecida Machado Pereira

INTRODUO
A metodologia de survey que a contrapartida acadmica mais cientfica e analtica das pesquisas de
opinio tem desempenhado um papel importante na produo do conhecimento sociolgico
contemporneo. Pioneiros da metodologia de survey, como Samuel A. Stouffer e Paul F. Lazarsfeld (1962)
buscaram aplicar mtodos de pesquisa social emprica para a anlise de problemas sociais e sociolgicos,
transformando questes sociais em questes sociolgicas, ou seja, relevantes para o desenvolvimento da
sociologia enquanto cincia. Seguindo os passos desses pioneiros, nas ltimas dcadas, a metodologia de
survey tem produzido conhecimento cientfico, relevante para a formulao de polticas pblicas nas mais
diversas reas das cincias sociais, destacando-se o comportamento eleitoral, a estratificao social, as
relaes raciais, a criminalidade e o meio ambiente, entre inmeros outros temas. Na cincia poltica
brasileira, um dos usos destacados da metodologia de survey nas dcadas de 1970 e 1980 foi na anlise
do comportamento eleitoral dentro da temtica mais geral de transio democrtica. Hoje, cientistas sociais
brasileiros utilizam o survey na investigao de temas como o desenvolvimento/ampliao da democracia,
seja no que concerne aos direitos polticos (associativismo, transparncia poltica ou accountability), seja no
que concerne aos direitos sociais (trabalho, educao, meio ambiente, relaes de gnero e raciais, etc.).
Ademais, essa ampliao da utilizao do survey tem ocorrido em um momento em que a explicao da
dinmica social e poltica tende a superar os determinismos econmicos ou culturais e a incorporar um
modelo multivariado de anlise, no qual um conjunto de clivagens sociais (classe, gnero, etnia, etc.) se
combinam de forma no linear. Nesse novo contexto de produo do conhecimento, com a utilizao da
metodologia de survey, a anlise da estratificao e da mudana social podem ser retomadas numa
abordagem que no recorre s leis de ferro da histria, mas no abandona a investigao de tendncias
probabilsticas (Inglehart, 1997).

Apesar da (ou em razo da) ampliao do seu uso por cientistas sociais, a metodologia de
survey muitas vezes se defronta com fortes resistncias. Parte das crticas sofridas no meio
acadmico deriva-se do fato de que esta uma tcnica de alguma maneira similar quela utilizada

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 70 construo do questionrio

pelos institutos de opinio pblica e pesquisas de mercado, os quais esto mais preocupados com a
habilidade de prever do que com a explicao e compreenso dos fenmenos que investigam
(Marsh, 1982, p.83-4). Catherine Marsh aponta os principais problemas da metodologia de survey
quando cientistas sociais tratam os depoimentos dos sujeitos que entrevistam como explicaes e
agregam os resultados das pesquisas como se fossem autoevidentes. Mas, para o pesquisador
acadmico, as respostas dos entrevistados so dados cujo papel subserviente, servindo como
evidncia para a questo terica que levantam (Marsh, 1982, p.83-4).
No Brasil, o carter muito descritivo e jornalstico de teses e artigos acadmicos foi apontado
como sria deficincia de grande parte das cincias sociais produzida no Pas (Reis, 1991).
Acredita-se que exista uma lacuna na formao de cientistas scias que no est ligada apenas a
mtodos quantitativos, mas especialmente adequada articulao entre teoria e investigao
emprica. Nesse propsito, o uso da metodologia de survey, com a anlise multivariada, e
especialmente atravs do desenho longitudinal, possibilita a investigao das relaes causais,
permitindo aos cientistas sociais responder no apenas as maneiras (descrio) mas tambm os
motivos na sua anlise da dinmica social e poltica.
A conexo entre teoria e empiria, porm, no pode ser relegada ao momento da anlise dos
dados. A qualidade validade e confiablidade dos dados (ou deveria ser) condio sine qua non
para qualquer esforo analtico. Ou seja, a coleta ou construo do dado tambm deve se guiar
pelos mesmos cnones de rigor cientfico e articulao entre teoria e empiria. esse crucial
componente da metodologia de survey que ser explorado neste Anexo, no qual nos propomos a
apresentar os procedimentos metodolgicos utilizados, refinados ou concebidos na construo do
questionrio e na conduo das entrevistas da Pesquisa da Regio Metropolitana de Belo Horizonte
(PRMBH).
Ao empregar a metodologia de survey e possibilitar a anlise sistemtica e longitudinal dos
mltiplos fatores que hoje condicionam a dinmica social e poltica, a PRMBH busca fazer uma
contribuio relevante para o desenvolvimento das cincias sociais no Brasil. A PRMBH, que deve
ser compreendida como um dos componentes de um projeto maior de capacitao de cientistas
sociais brasileiros no uso de mtodos quantitativos, foi criada em sequncia e em adio ao
programa em Metodologia Quantitativa em Cincias Scias do Departamento de Sociologia e
Antropologia da UFMG, com a colaborao do Departamento de Cincia Poltica. Esse programa,
nos ltimos seis anos, tem treinado professores e estudantes de ps-graduao de todo o Brasil,
cumprindo, e indo alm das expectativas iniciais, um papel central no preenchimento do que tem

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 71 construo do questionrio

sido considerado uma lacuna na formao de cientistas sociais no Pas. Assim, a PRMBH busca
ampliar a capacitao de cientistas sociais brasileiros em um dos mtodos quantitativos mais
prolficos (mas no necessariamente bem entendido e corretamente utilizado) em cincias scias: a
metodologia de survey. Nas sees que se seguem ser apresentado o estado da arte dessa
metodologia, discutindo os desenvolvimentos mais recentes propiciados pela experimentao e
teorizao advindas da psicolingustica e da psicologia cognitiva, com ilustraes retiradas da
PRMBH.

O survey: medidas de valores, atitudes e comportamentos ou artefato sociolgico?


O survey da Regio Metropolitana de Belo Horizonte orientado pela viso de que a
elaborao de questes e a construo de um questionrio devem ser guiadas no apenas pela
experincia e intuio, mas tambm pela experimentao rigorosa. Isso porque partimos da
premissa de que ns, cientistas sociais, no coletamos dados, e sim construmos os nossos
dados. Isso se d na medida em que os nossos instrumentos de investigao no caso do survey,
o questionrio podem produzir efeitos nas respostas, ou seja, parte do que medimos pode ser
efeito do nosso modo de coleta do dado. No caso do survey, isso significa mais do que a maneira
como formulamos a pergunta ou da terminologia empregada, isto , do modo como a questo
apresentada, a sequncia em que aparece, o formato da questo, se antecipamos para o
entrevistado a possibilidade de dizer no sei e muitas outras coisas. Para ilustrar a importncia da
escolha exata da terminologia e construo da pergunta na maximizao da validade dos dados
obtidos, metodlogos tem se referido seguinte estria:
Dois padres, um dominicano e um jesuta, discutem se pecado fumar e jrezar ao mesmo tempo. Quando
no conseguem chegar a uma concluso, cada um deles sai para consultar seu respectivo superior. Eles se
encontram de novo na semana seguinte. O dominicano diz: Bem, o que foi que o seu superior disse?, O
jesuta responde Ele disse que tudo bem. Engraado, o dominicano responde, meu superior disse que
era pecado. Jesuta: O que voc perguntou a ele?. Resposta: Eu perguntei se era certo algum fumar
enquanto reza. Ah - diz o jesuta - eu perguntei ao meu superior se era certo algum rezar enquanto fuma
(Sudman et al., 1996, p.1).

A implicao para a metodologia de survey a de que necessitamos continuamente exercitar


a vigilncia epistemolgica, buscando detectar as possveis fontes de produo de efeitos nas
respostas. Mesmo sendo fato amplamente reconhecido de que pequenas mudanas na pergunta
podem causar significativas diferenas nas respostas, em geral, a construo do questionrio
considerada a parte mais fcil do survey e, portanto, pouco esforo e rigor so geralmente
empregados. A PRMBH, partindo de uma premissa oposta, buscou empregar o chamado estado da

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 72 construo do questionrio

arte na construo do nosso questionrio. Neste Anexo, abordaremos, mesmo que brevemente, os
recursos metodolgicos mais recentemente desenvolvidos e utlizados pela PRMBH.
Ainda nos anos de 1950, o clssico The Art of Asking Questions (Payne, 1951) j apontava
repetidamente para a necessidade de se basear essa arte em evidncia quantitativa. Mas foi nos
anos de 1970 que um maior impulso na experimentao metodolgica foi dado por outro clssico,
Question and Answer in Attitudes Surveys: experiments on question form, wordingand context
(Schuman e Presser, 1981), no qual os autores buscam medir com rigor os efeitos da terminologia,
do formato das questes (aberta ou fechada), da ordem das questes, da sequncia das
alternativas, da apresentao ou no de filtros, etc. na produo das respostas. Para isso, so
utilizados experimentos split-ballot, dividindo-se uma amostra aleatria em duas partes e utilizando-
se para cada uma delas uma verso da questo. A varivel a ser manipulada pode ser o termo
empregado, o formato (aberto ou fechado), a sequncia em que a questo aparece, entre muitas
outras possibilidades. Na medida em que as duas metades da amostra aleatria podem ser
consideradas iguais, as diferenas nas respostas so consideradas efeitos da varivel teste. Por
exemplo, em um experimento clssico (Schuman e Presser, 1981), os pesquisadores argumentam
que proibir e permitir so logicamente opostos e que, portanto, substituir um pelo outro na
pergunta Os Estados Unidos deveriam [permitir/proibir] discursos pblicos contra a democracia?
no deveria produzir nenhum efeito na resposta, ou seja, a resposta sim em uma formulao
deveria logicamente corresponder a no na outra. Contudo, o experimento mostrou que mais
estadunidenses esto dispostos a no permitir do que a proibir tais discursos.
Os estudos desses efeitos exploram e buscam detectar os fatores que influenciam o
entendimento dos entrevistados e como os significados inferidos muitas vezes diferem dos
significados pretendidos pelo pesquisador (Bradburn e Sudman, 1982; Converse e Presser, 1986;
Fowler Jr., 1995). Alm disso, a questo da cristalizao de opinies (Converse, 1964), a criao de
padres de resposta e a desejabilidade social se tornaram elementos centrais nas disputas
epistemolgicas e metodolgicas em relao ao estatuto cientfico do survey, ento frequentemente
rotulado de positivista ou visto como um artefato sociolgico.
Os experimentos dos anos de 1970 foram bem-sucedidos na revelao de vrios tipos de
efeitos produzidos na resposta pelos instrumentos de pesquisa de survey. Contudo, a explicao
terica para a produo de tais efeitos s vai se desenvolver de maneira mais rigorosa nos anos de
1980 e 1990 com importantes publicaes e experimentos de psicolinguistas e psiclogos
cognitivos. Estes partem da definio do survey enquanto, por um lado, uma interao social guiada

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 73 construo do questionrio

pelas regras sociais e lingusticas da conversao e, por outro, uma srie de tarefas cognitivas
realizadas pelos entrevistados (Sudman et al., 1996). Os psicolinguistas argumentam que a tentativa
de entender como os entrevistados compreendem as questes em um survey inevitavelmente leva
busca de informaes acerca de como as pessoas compreendem o mundo volta delas e de como
elas se comunicam umas com as outras. Assim, a entrevista do survey pode ser melhor
compreendida enquanto uma conversa na qual os entrevistados conduzem suas parcelas de
reflexo e produo de respostas em um contexto social e de dilogo especfico (Clark e Schober,
1992). Segundo os psicolinguistas, a entrevista do survey deve ser analisada a partir do princpio da
cooperao, um dos elementos estruturantes da conversa, que postula que os indivduos esperam
que suas interlocues sejam claras, verdadeiras, relevantes e noredundantes. Assim, quando em
nossas aulas, a ttulo de exemplificao, perguntamos a um aluno O que voc fez hoje? e eles
geralmente respondem algo como Li alguns textos e vim para a universidade, eles esto
colocando em ao o princpio da cooperao e nos passando informaes que acreditam serem o
que julgamos relevante nenhum aluno at hoje nos respondeu tomei banho ou escovei os
dentes. Em outro exemplo, fazemos perguntas no estilo das famosas pegadinhas: O que voc
acha que acontecer com as negociaes de paz entre Israel e Palestina depois do assassinato de
Mahmoud Abas ontem noite?, e, na maioria das vezes, temos estudantes perplexos tentando
emitir suas respostas. Segundo o princpio da cooperao, tal resposta no fruto necessariamente
de uma necessidade de parecer bem informado, mas sim do julgamento de que, em princpio, ns,
os professores, estaramos sendo verdadeiros.
A partir de uma perspectiva cognitiva, a resposta a uma questo requer a realizao de
quatro tarefas cognitivas: interpretar a questo; buscar na memria informao sobre um
comportamento ou uma opinio; formatar a resposta; e edit-la (Strack e Martin, 1987). A operao
combinada do princpio da cooperao e das tarefas cognitivas nos revela o processo de
entendimento da pergunta e produo da resposta. A interpretao da palavra manga na pergunta
Voc gosta de manga? certamente depende se esta aparece em uma sequncia de questes
sobre moda ou sobre alimentao. Entender uma questo de maneira a produzir uma resposta
adequada requer o entendimento no apenas do sentido literal da palavra usada, mas tambm do
seu sentido pragmtico, ou seja, das inferncias sobre a inteno de quem fez a pergunta (Sudman
et al., 1996). Dessa forma, na entrevista do survey, ao interpretar a pergunta, o entrevistado busca
no enunciado pistas para inferir os significados pretendidos pelo pesquisador: as alternativas de
resposta ou a sequncia em que a questo aparece, por exemplo, so fontes para sua interpretao

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 74 construo do questionrio

da pergunta. Um experimento tipo split-ballot, em que dois formatos de perguntas so


aleatoriamente apresentados aos entrevistados, por exemplo, revelou que a interpretao da
pergunta Em que medida voc se considera bem-sucedido na vida? depende do formato da escala
de resposta oferecida ao entrevistado: enquanto em uma escala de 0 a 10, o ponto 0 entendido
como ausncia de sucesso, na escala de 5 a + 5, o ponto 0 interpretado como sucesso
moderado (Schwarz et al., 1991). No que concerne segunda tarefa cognitiva busca na memria
de informaes relevantes para a produo da resposta , as teorias sobre registro e retirada de
informaes nos ajudam a compreender a extenso do trabalho cognitivo exigido e as estratgias
utilizadas (contar ou estimar), permitindo determinar, por exemplo, qual o marco de referncia
temporal apropriado para comportamentos rotineiros e para eventos raros. Quando perguntamos
Quantos livros voc tomou emprestado da biblioteca no ano passado?, o entrevistado certamente
ser levado a estimar, em vez de contar, alm de ter que decidir se o ano passado se refere aos
ltimos doze meses ou ao ano anterior a este.
No pr-teste da PRMBH 2003-2004, questes da bateria sobre trabalho foram feitas em
relao a uma semana de referncia, com o objetivo de garantir a comparabilidade com a Pesquisa
Mensal de Emprego: Na semana do dia 5 de abril a 11 de abril de 2004 (semana de referncia),
voc trabalhou, durante pelo menos uma hora, em alguma atividade remunerada (paga) em
dinheiro, produtos, mercadorias ou benefcios?
Contudo, antecipamos que essa questo poderia gerar dados pouco confiveis visto que, no
caso do survey como amostra probabilstica, as entrevistas podem se estender por perodos de
vrios meses. Este um perodo longo para a memria relativa semana de referncia para
aqueles que respondem o questionrio no final do campo. Para avaliarmos a tarefa cognitiva exigida
da memria do entrevistado, decidimos ento incluir no pr-teste a pergunta Foi fcil ou difcil
responder esta questo? Por qu?. Nenhum entrevistado, ao responder a questo, se lembrou que
a semana de 5 a 11 de abril de 2004 inclua os feriados da Semana Santa, confirmando nosso
questionamento acerca da confiabilidade do dado relativo a uma semana de referncia em um
survey em que as entrevistas so conduzidas ao longo de alguns meses.
Assim, temos que, por meio das informaes adquiridas sobre as tarefas cognitivas
desempenhadas pela memria, o pesquisador poder julgar o grau de preciso das respostas e
decidir qual formulao atende aos objetivos de sua questo e produz respostas confiveis.
Em relao quarta tarefa cognitiva a edio da resposta , experimentos revelam
situaes ou temas que produzem respostas socialmente desejveis. Alm dos temas sensveis,

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 75 construo do questionrio

como etnia ou uso de drogas, e tambm as situaes de entrevista ou a relao entevistador-


entrevistado devem ser avaliadas como possveis fontes de respostas politicamente corretas.
Na PRMBH, por exemplo, o pr-teste revelou que uma bateria de questes sobre
experincias de discriminao como Com que frequncia voc no to bem atendido em lojas e
restaurantes? gerou grande constrangimento nos entrevistados que tendiam a fortemente negar
que tal situao houvesse ocorrido com eles. Isso levou preocupao com a produo de
respostas socialmente desejveis e a realizar um experimento split-ballot com o modo de coleta da
informao, fazendo a pergunta diretamente ou tornando essa questo autoaplicada.
Essas so apenas algumas poucas ilustraes de como a psicologia cognitiva pode ser
abordada enquanto uma rica literatura sobre a memria e o processamento de informaes,
dimenses fundamentais para o entendimento de como os entrevistados respondem as perguntas
de um survey. A padronizao rgida do questionrio tem sido muito criticada, acusada de gerar
uma imposio da problemtica por parte do pesquisador. A psicolingustica e a psicologia cognitiva,
no entanto, nos permitem entender a padronizao do survey enquanto uma necessria
padronizao de significados. O objetivo da padronizao a correspondncia entre o sentido
pretendido pelo pesquisador e a interpretao feita pelo entrevistado fator central para a validade
e a comparabilidade dos dados.

O pr-teste do questionrio: componente imprescindvel na metodologia de survey


O entendimento dos aspectos cognitivos da metodologia de survey nos levou a ver o pr-
teste do questionrio como um elemento crucial e imprescindvel na gerao de dados vlidos e
confiveis. No deixa de ser curioso que, em uma metodologia to estruturada como o survey, o
pr-teste do questionrio seja um componente frequentemente pouco elaborado. So relativamente
recentes os esforos de criao de procedimentos e instrumentos mais rigorosos e padronizados,
ou seja, de uma metodologia de pr-teste. A nfase na gerao de dados vlidos e confiveis para
a PRMBH nos levou a dar ao pr-teste um peso grande em termos de tempo e recursos, e a utilizar
e desenvolver o estado da arte dessa metodologia. No nosso entendimento, o pr-teste um
elemento central para a validade dos dados tanto no que concerne a verificar e aprimorar a
operacionalizao das questes de pesquisa e dos conceitos ou seja, na passagem da teoria para
a empiria quanto na garantia da correspondncia de significados entre pesquisador e
entrevistado.

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 76 construo do questionrio

A PRMBH (2002) visou a produzir um mdulo bsico em cincias sociais agregando


contribuies de diferentes equipes de pesquisadores da UFMG alguns mdulos contaram com a
colaborao da Universidade de Michigan. A PRMBH (2005) repetiu boa parte das questes
elaboradas em 2002, retirando algumas questes e introduzindo novas. Sendo a capacitao do
quadro docente um dos objetivos centrais da PRMBH, a elaborao e conduo do pr-teste foi
realizada dentro da Disciplina de Metodologia, pelos estudantes de ps-graduao em Sociologia da
UFMG. O pr-teste permitiu aos professores, alunos e equipe tcnica trabalhar exaustivamente na
operacionalizao dos conceitos, verificando se o que estava sendo medido empiricamente
correspondia ao que era teoricamente definido, isto , a validade do dado. Nas medidas de capital
social, por exemplo, os significados dos termos vizinhana e vizinhos, e da noo de fazer favor
aos vizinhos foram exaustivamente explorados, dado sua centralidade na operacionalizao do
conceito de capital social. Um exemplo engraado ocorreu na bateria de questes sobre
participao poltica. Ao ouvira pergunta Eu gostaria de saber sobre as entidades, partidos e
associaes das quais voc participa..., uma senhora de baixa escolaridade se apressou em
esclarecer que no frequentava centros espritas e que, portanto, no conhecia ou havia recebido
nenhuma entidade. Esse exemplo mostra como a escolaridade e o nvel de informao podem
afetar a interpretao da pergunta, e tambm refora a centralidade da conduo rigorosa de pr-
testes em surveys de populaes to heterogneas quanto a nossa. De fato, o nvel de escolaridade
foi o principal critrio para seleo do entrevistado do pr-teste: para o pr-teste, no se tratava de
obter uma amostra probabilstica da populao, mas sim de selecionar propores similares de
entrevistados em trs nveis de escolaridade (analfabeto ou primrio, segundo grau e superior),
dado que esta considerada uma das variveis que mais efeitos produzem no entendimento das
questes.
O objetivo geral do pr-teste da PRMBH 2001-2002 foi testar o compartilhamento de
significados entre os pesquisadores e os entrevistados e identificar outras possveis fontes de erro.
Para isso, buscamos detectar efeitos na resposta produzidos pela compreenso da terminologia,
problemas com o enunciado (longo, ambguo, incompleto, etc.), formatos de questes (ordenao,
escala Likert, lista de alternativas), tipos e nmero de pontos de escalas (Likert, diagramtica,
semntica), efeitos da situao de entrevista ou da relao entrevistado/entrevistador, receptividade
e interesse por parte dos entrevistados. Outras fontes de erro tambm foram averiguadas:
instrues para o entrevistador, layout de codificao e caderno de respostas. Em todos esses
itens, buscamos tambm identificar e estabelecer os esclarecimentos e definies de conceitos que

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 77 construo do questionrio

deveriam aparecer no Manual de Questo por Questo (MQQ), instrumento para o campo final e
que visa a garantir a padronizao da entrevista e a comparabilidade dos dados.
Ao conceber os instrumentos de pr-teste, procuramos sistematizar procedimentos que nos
permitissem no apenas identificar os problemas, mas tambm registrar a frequncia da sua
ocorrncia. As sesses de debriefing (reunio em que se realiza um balano e a avaliao de todas
as dificuldades encontradas) com os entrevistadores, realizadas logo aps o pr-teste, usualmente
no so longas nem estruturadas o suficiente para permitir o resgate ou o registro adequado dos
problemas identificados nas entrevistas. Outra limitao dessas sesses que entrevistadores mais
eloquentes podem acentuar e causar a crena na generalidade de um problema que de fato teve
apenas uma ocorrncia mnima. Buscando uma identificao detalhada dos problemas e a
frequncia da sua ocorrncia, concebemos e utilizamos os instrumentos de avaliao do
questionrio que se seguem.

1) Barra de probes
abarra de sondagem para aprofundamento da questo. Permitiu a computao do nmero
de ocorrncias em que foi necessria a repetio do enunciado (R. Enun.), repetio das opes de
resposta (R. Op.), a solicitao do significado do enunciado (Sig. Enun.) ou a solicitao do
significado das opes de resposta (Sig. Op.). A barra de probes permitiu o registro do
comportamento do entrevistado com um custo muito menor do que a tcnica de codificao de
comportamento ou behavior coding feita a partir de gravaes das entrevistas.

1. R. Enun. 2. R. Op. 3. Sig. Enun. 4. Sig. Op. 5. MQQ

Sendo uma tcnica bem estruturada, o survey utiliza procedimentos padronizados para
garantir o compartilhamento de significados entre pesquisador e entrevistado e, assim, assegurar a
comparabilidade das questes feitas e das respostas dadas pelos diferentes entrevistadores e
entrevistados. O probe, como um aprofundamento da questo, uma tcnica neutra, pois, sem
induzir a resposta, ajuda o entrevistado a entender e responder a questo proposta e tambm
auxilia o entrevistador a entender e esclarecer a resposta dada. Assim, a busca de clarificao pode
partir tanto do entrevistador quanto do entrevistado.
Quando h dvida ou pedido de esclarecimento parte do entrevistado, o entrevistador utiliza
as seguintes alternativas de procedimento: a) repetir o enunciado e/ou as opes (Assinalar: R.

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 78 construo do questionrio

Enun. ou R. Op.); b) usar a expresso Qualquer que seja o significado que isso tenha para voc,
quando o entrevistado solicitar definio que no aparea no enunciado da questo (Assinalar: Sig.
Enun. ou Sig. Op.); ou c) dar esclarecimentos sobre a questo previstos no MQQ, caso aparea na
questo a instruo MQQ pg... (Assinalar: MQQ).
Quando h dvida ou pedido de esclarecimento parte do entrevistador, o probe aplicado por
meio de uma questo adicional padronizada, com o objetivo de motivar o entrevistado a se
comunicar de forma mais clara e completa, permitir ou encorajar o entrevistado a explicar as suas
respostas, ou evitar que ele inicie digresses com informaes irrelevantes. Algumas das principais
questes padronizadas so as seguintes:

Mas, em geral, o que voc pensa? (PENSA)


Voc pode me dar um exemplo? (EX.)
Qual se aproxima mais de como voc sente / pensa? (PX.) O que voc quer dizer com isso?
(SIG.)

Como computamos o nmero de ocorrncias de cada probe para cada questo, sabemos
com maior preciso, por exemplo, quantas vezes foi pedida a repetio de um determinado
enunciado ou a explicao de um termo. Podemos, assim, avaliar uma questo e buscar
alternativas com mais informao e maior rigor.

2) O roteiro de avaliao da entrevista


Permite a sistematizao da avaliao e dos comentrios dos entrevistadores em relao ao
entendimento das questes e outras dificuldades enfrentadas durante a conduo da entrevista
pelos entrevistados e pelos prprios entrevistadores. O Roteiro de Avaliao da Entrevista funciona
como uma sesso de debriefing mais estruturada e permite que as avaliaes detalhadas de todos
os entrevistadores sejam registradas e computadas. Para cada entrevista, um relatrio preenchido
pelo entrevistador, registrando as suas avaliaes do comportamento ou desempenho do
entrevistado. O Relatrio do Entrevistador tem a seguinte estrutura:

a. Avaliao de questo por questo, referindo-se aos tipos de dificuldades: compreenso do


enunciado, terminologia, compreenso quanto ao objetivo da questo, problemas relativos a

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 79 construo do questionrio

memria, formato da questo, opes de respostas, constrangimento, desconhecimento do


assunto, entendimento do tema, etc.
b. Mdulos temticos que compem a entrevista: grau de dificuldade e grau de interesse pela
temtica.
c. Atitudes do entrevistado em relao entrevista como um todo: receptividade e
comportamento do entrevistado quanto durao da entrevista.
d. Situao de entrevista: presena de outras pessoas durante a entrevista e local da entrevista.

No Roteiro de Avaliao, cada tipo de problema precodificado, o que, por um lado, facilita a
sua anotao pelo entrevistador e, por outro, permite a computao da frequncia de ocorrncias.
Enquanto a barra de probes permite a observao objetiva do comportamento do
entrevistado, o Roteiro de Avaliao propicia a avaliao subjetiva, por parte do entrevistador, do
desempenho do entrevistado.
A combinao dos resultados da barra de probes com o Roteiro de Avaliao permite-nos,
por exemplo, no apenas identificar termos de difcil compreenso por pessoas de baixa
escolaridade, como tambm identificar sinnimos que acrescentamos, em parnteses, ao
enunciado. Alm de assegurar maior validade das respostas e facilitar a conduo da entrevista, o
procedimento estabelecido de todos os entrevistadores fornecerem o mesmo sinnimo ou
explicao para cada entrevistado visa a garantir a comparabilidade dos dados.

3) Entrevistas cognitivas
Este instrumento possibilita investigar as quatro etapas do processo de compreenso da
pergunta e produo da resposta: entendimento do enunciado, retrieval (busca na memria de
informaes necessrias ou relevantes para a resposta), julgamento e edio da resposta.
As questes cognitivas foram feitas subsequentemente s questes avaliadas. O objetivo no
era fazer uma entrevista em profundidade ou explorar o tema as questes cognitivas foram
formuladas para se resgatar as quatro tarefas cognitivas envolvidas na interpretao da pergunta e
produo da resposta.
No mdulo etnia e cor da PRMBH, que visava a construir uma medida mais vlida de etnia,
usamos as questes cognitivas para investigar os significados atribudos a cinco categorias de
etnia/cor usadas pelo Censo. Logo aps o entrevistado ter respondido questo tal como formulada

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 80 construo do questionrio

pelo IBGE, as questes cognitivas foram introduzidas. A seguir, esto alguns exemplos de questes
e respostas obtidas:

QUESTO COGNITIVA: O que voc entende por pardo? Voc poderia dar um exemplo de uma
pessoa parda famosa no Brasil?

- Mestio? Mestio: Exemplo... Fernando Henrique Cardoso.


- difcil responder essa. Pardo o que fica entre o branco e o negro, uma mistura de branco
com negro. Os jogadores de futebol, por exemplo, a gente v que eles so pardos, no so
negros, mas tambm no so brancos, seriam pardos?

- Para mim, amarelo.


- Caetano Veloso. No sei se esse pardo equivale ao que eu acho que mulato. Me parece
que esse pardo mais branco que o mulato.

- Pardo uma pessoa que 'passa' do moreno e no chega a ser negro.

QUESTO COGNITIVA: Na lista acima, como voc classificaria a atriz Camila Pitanga?

- Morena.
- Acho que ela negra. Mas ela no escura como eu.
- Parda.
- uma mulata.
- Preta.

QUESTO COGNITIVA: Para voc, h diferena entre moreno e pardo?

- Tem diferena; o pardo tem a cor sem definio, no branco nem preto. Moreno j tem a pele
mais escura.

- Sim. Pardo misturado e moreno, no.


- Tem; um mais plido, o outro mais escuro. Um escuro, o outro amarelo.
- Acho que sim. Acho que pardo mais claro e moreno, mais escuro. Eu no sei o que pardo.

QUESTO COGNITIVA: O que voc entende por amarelo? Voc poderia dar um exemplo de uma
pessoa amarela famosa no Brasil?

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 81 construo do questionrio

- Pessoas de cor clara. Por exemplo, Xuxa.


- Amarelo eu no conheo. Eu conheo descorado. No tem pessoa amarela no.
- Os descendentes de japoneses e chineses, os orientais.
- Eu no sei direito. No sei, sem cor, plida, branca, sei l.

O uso das questes cognitivas no pr-teste da PRMBH foi bastante exaustivo para todos os
mdulos. Mas mesmo algumas poucas ilustraes so suficientes para nos alertar para problemas
srios de validade e comparabilidade.
No pr-teste da PRMBH 2002, o cientista poltico Ronald Inglehart, pesquisador do Institute for
Social Research da Universidade de Michigan e colaborador na nossa bateria de valores, props a
replicao de algumas questes do seu survey internacional World Vales Survey, e entre elas a
seguinte questo da sua famosa bateria de valores ps-materialistas:
Se voc tivesse que escolher, qual dessas coisas voc diria que a mais importante? E qual seria a
segunda mais importante: manter a ordem no pas, dar mais voz s pessoas em decises importantes do
governo, combater a alta de preos ou proteger a liberdade de expresso?

As questes cognitivas que empregamos no pr-teste revelaram dificuldades e variabilidade no


entendimento da terminologia. Isso nos levou a substituir a expresso dar mais voz s pessoas por
aumentar a participao das pessoas. Passamos a adotar tambm o procedimento de incluir entre
parnteses sinnimos ou definies de termos mais difceis para garantir o seu entendimento por parte
de pessoas de menor escolaridade e, ao mesmo tempo, garantira comparabilidade dos dados, tal qual
no seguinte exemplo: Proteger a liberdade de expresso (o direito das pessoas de dizerem o que
pensam sem censura do governo).

As aventuras do socilogo em campo: conduo e situao da entrevista


No novidade o reconhecimento de que os entrevistadores devem ser bem treinados. Mas o
que um bom treinamento da conduo da entrevista, outra fonte de erros do survey?
Para garantir a validade do dado que o significado pretendido pelo pesquisador corresponda
interpretao do entrevistado , o entrevistador deve ser treinado a no aceitar respostas confusas,
ambguas, incompletas, que no atendem aos objetivos da questo, e a conduzir a entrevista de uma
maneira que produza dados claros, completos, etc.
Esse treinamento se mostra especialmente relevante no caso de questes abertas. Um dos
vrios mitos em relao s vantagens do formato aberto de questes que a questo aberta

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 82 construo do questionrio

propiciaria respostas mais profundas, refletidas, qualificadas e completas. Sabemos que no isso o
que necessariamente, ou principalmente, ocorre em relao s questes abertas em um survey. Alguns
experimentos que discutem o que se mede com as questes abertas questionam se esse formato de
fato uma mais vlida medida de opinio ou apenas uma medida da capacidade de verbalizao do
entrevistado (Geer, 1988). Seguindo essa linha de argumentao, preciso ressaltar que as questes
abertas, em vez de garantir respostas mais qualificadas, podem vir a ser incodificveis ou gerar
esquemas de codificao de baixa confiabilidade. Isso ocorre se os entrevistadores no forem
treinados a usar os probes adequados para clarificar respostas ou para garantir que estas sejam claras
e completas. Apesar de no nosso manual de treinamento1 indicarmos que toda questo aberta deve ser
seguida de pelo menos um probe, observamos que os entrevistadores nem sempre seguiam tal
procedimento. Portanto, para garantir o uso dos probes e a obteno de respostas claras, relevantes e
completas, passamos a incluir no questionrio a seguinte instruo aps questes abertas: APLICAR
PELO MENOS UM DENTRE OS PROBES: O que mais voc poderia acrescentar?, Voc poderia me
falar um pouco mais sobre isto..., O que voc quer dizer com isso?, Voc poderia dar um exemplo?.
Mesmo em relao questo fechada, o entrevistador deve estar apto a usar o probe adequado.
Considere o seguinte exemplo de uma resposta insatisfatria bastante comum:

Entrevistador: Pense em sua vida em geral. Em que medida voc est satisfeito com ela:
totalmente satisfeito(a), muito satisfeito(a), pouco satisfeito(a) ou nada
satisfeito(a)?
Entrevistado: Eu detesto meu trabalho, assim, eu diria no muito satisfeito(a).

Neste caso, o probe correto a ser aplicado pelo entrevistador, para garantir que o entrevistado
produza uma resposta de acordo com o objetivo da questo, repetir a questo enfatizando o marco
de referncia: Mas, pensando em sua vida em geral..., e os pontos da escala, dado que na resposta o
entrevistado tambm no usou a escala oferecida no enunciado.
O uso efetivo do probe requer do entrevistador o conhecimento dos objetivos das questes e a
capacidade de ouvir atentamente o que o entrevistado diz, para decidir se a resposta dada atende aos
objetivos da questo:

Entrevistador: Em que medida voc acha que a realizao de eleies faz o governo prestar
ateno no que o povo pensa: muito, um pouco ou quase nada?

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 83 construo do questionrio

Entrevistado: Eu no estou certo. Espero que as eleies faam o governo prestar ateno no
povo.
Entrevistador: Certamente, mas voc acha que a realizao de eleies faz o governo prestar
ateno no que o povo pensa: muito, um pouco ou quase nada?

Os entrevistadores so tambm instrudos a sempre usar o probe o que voc acha? toda vez
que a resposta for no sei, em uma tentativa de evitar o falso negativo, ou seja, pessoas que tm
opinio usarem o no sei como uma sada fcil para uma questo.
Os experimentos tm tambm mostrado como aspectos da situao da entrevista, tal como a
presena do cnjuge, podem produzir efeitos na resposta (Aquilino, 1993). Alm de tais efeitos, ao
levar em conta a situao da entrevista, tambm somos confrontados com um leque variado de
questes que vo de consideraes ticas preocupao com a segurana dos entrevistadores. O
seguinte relato de uma entrevistadora da PRMBH (2002) contundente:
O entrevistado sorteado para responder o questionrio morava em sua casa com sua filha, sua me e uma
amiga, segundo sua prpria descrio durante a conduo da entrevista. Desde o incio, a me do
entrevistado seguiu elogiando a entrevistadora, sempre muito solcita, deixando entender que gostaria de
ter uma nora como a entrevistadora. Ao mesmo tempo, a amiga do entrevistado, que estava na cozinha
ouvindo a entrevista, se mostrou bastante irritada e hostil em relao presena da entrevistadora na casa.
Ao final da entrevista, quando perguntado sobre sua situao conjugal, o entrevistado declarou que era
solteiro. Neste momento, a amiga saiu da cozinha e se dirigiu, visivelmente irritada, ao segundo andar da
casa. De repente, a amiga comeou a jogar objetos (pregadores de roupa, almofadas, etc.) escada
abaixo, com a inteno de acertar o entrevistado, que se encontrava assentado no primeiro degrau da
escada. O entrevistado, muito constrangido, explicou entrevistadora que vivia com a amiga em situao
de concubinato e pediu que, por favor, ela no revelasse este fato ao pastor de sua igreja. Em seguida, a
ento amiga desceu as escadas carregando uma mala e, descontroladamente, gritava que estava indo
embora da casa. A entrevistadora encerrou a entrevista e saiu da casa, ainda sendo assediada pela me
do entrevistado.

Um outro aspecto da pesquisa a sua apresentao fator muito importante para evitar
recusas.A equipe da PRMBH sentiu necessidade de utilizar vrios instrumentos para evitar recusas,
como: carta de apresentao enviada ao domiclio antes da primeira visita do entrevistador e folder de
apresentao com um leque de questes antecipando respostas s perguntas que os entrevistados
normalmente fazem acerca dos objetivos e procedimentos da pesquisa. No entanto, apesar da nfase
no fato de a pesquisa ser realizada pela universidade, fator que abre portas e d credibilidade,
situaes no antecipadas acontecem: um entrevistador aluno da UFMG foi surpreendido pela
apreenso gerada no entrevistado ao se apresentar como sendo da Federal...

Os experimentos

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 84 construo do questionrio

Na introduo deste Anexo, ressaltamos a importncia dos experimentos no processo de


transformao do survey de arte em cincia. Contudo, em funo de ter sido desenvolvida
principalmente nos Estados Unidos e na Europa, para populaes com altos nveis de escolaridade, a
metodologia de survey e os experimentos no tm enfrentado, com a devida nfase, alguns dos
problemas de validade e confiabilidade das respostas associados baixa escolaridade e baixos nveis
de informao dos entrevistados brasileiros. O fato de aqui no Brasil usarmos o survey em uma
populao muito heterognea em termos educacionais e de sofisticao do conhecimento, com amplos
segmentos semialfabetizados, nos levou a focalizar, dentre outros aspectos da metodologia: a) a
terminologia usada, que afeta a validade dos dados; e b) a criao de opinies, que pode ocorrer, por
exemplo, quando o formato da questo permite a uma pessoa que jamais ouviu falar de um assunto, ou
no o compreende, a emitir uma opinio (o chamado falso positivo). Com esse propsito, a PRMBH
(2002) realizou trs tipos de experimentos para a verificao de efeitos nas respostas de alguns
aspectos envolvidos no processo cognitivo subjacente elaborao das respostas que supomos mais
impactantes no nosso contexto educacional e cultural. O primeiro tipo de experimento, que testa o uso
de terminologias alternativas, se refere questo do significado pretendido pelo pesquisador versus a
interpretao feita pelo entrevistado. O segundo tipo de experimento testa o uso da opo no sei e
se refere produo de falsos positivos versus falsos negativos; enquanto o terceiro tipo de
experimento testa efeitos relacionados ao modo de coleta do dado, com o uso da entrevista face-a-face
ou do questionrio autoaplicado.
Uma pergunta selecionada para o primeiro tipo de experimento est ligada a uma importante
discusso metodolgica em torno de medidas de confiana interpessoal. A medida de confiana
interpessoal, alm de ser um importante elemento no debate sobre capital social, tem sido utilizada por
Ronald Inglehart na produo de teorias sobre cultura poltica. No importante survey internacional
World Vales Survey,se destaca curiosamente o resultado para o Brasil, quando mais de 90% da
populao declara que no se pode confiar nas pessoas (Inglehart, 1997). No modelo terico
empregado por Inglehart, a confiana nas pessoas um importante indicador de mudana cultural e
um dos componentes dos valores racionais/seculares. Tais valores, por sua vez, estariam ligados ao
bem-estar material e democracia estvel. Alm de nos remeter a uma importante discusso sobre o
2
conceito de confiana aspectos mais tericos , a medida de confiana interpessoal, tal como
utilizada por Inglehart, tambm incita a discusso metodolgica sobre a elaborao da medida. Um
importante aspecto metodolgico diz respeito diferena semntica dos termos utilizados na
elaborao da pergunta, cujo significado deve ser contextualizado em diferentes pases.

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 85 construo do questionrio

Susanne Lundasen (2002, p.132) apresentou resultados de pesquisas (General Social Survey)
realizadas nos Estados Unidos nas dcadas de 1970 e 1980, nas quais diferentes formulaes da
pergunta resultaram em grandes diferenas no percentual de resposta. O contexto do pr-teste da
PRMBH nos levou tambm a formular uma hiptese metodolgica para explicar os resultados para o
Brasil do World Vales Survey que colocam o Brasil, junto com a Turquia, como o pas com o menor
ndice de confiana interpessoal entre as mais de sessenta sociedades estudadas por Inglehart. Esse
curioso e preocupante dado certamente incita a busca de interpretaes tericas, mas um aspecto
metodolgico que nos chamou a ateno nos parece relevante para a produo de tais resultados.
Entendemos que a formulao da pergunta, tal como traduzida do World Vales Survey para o
portugus, utilizava-se de uma expresso que, no contexto brasileiro, remetia a um dito popular. Isso
nos levou a hipotetizar que a terminologia utilizada, ou seja, um dito popular, poderia estar contribuindo
para o altssimo percentual de brasileiros que declaravam que cuidado nunca demais. No
experimento split-ballot da PRMBH, utilizamos a traduo original cuidado nunca demais e a
expresso alternativa podemos confiar em poucas pessoas. Assim, essas duas formulaes foram
testadas mantendo-se constante a expresso para representar confiana: podemos confiar na maioria
das pessoas. O resultado nos surpreendeu quando os percentuais de respostas para as duas
formulaes foram iguais, com 90,7% respondendo cuidado nunca demais na primeira formulao e
90,9% respondendo podemos confiar em poucas pessoas na segunda formulao.
Embora o resultado do experimento no tenha demonstrado uma variao nas respostas a partir
da mudana na formulao da pergunta, entendemos que a investigao quanto s questes tericas e
de mensurao envolvidas na discusso sobre a medida de confiana interpessoal ainda est no seu
incio e com um grande campo para ser explorado; por exemplo, o entendimento das dimenses do
conceito de confiana, a construo de medidas nicas versus medidas compostas e at a relao
(diferenas) entre medidas atitudinais e comportamentais.
Outro experimento utilizando diferentes terminologias foi em relao s categorias de
classificao de etnia e cor. Em uma das subamostras, utilizamos as categorias do IBGE branco,
preto, pardo, amarelo e indgena; e na outra subamostra, substitumos a categoria pardo pela
categoria moreno, mantendo as outras categorias iguais. A variao dos percentuais na distribuio
de frequncias das questes foi grande; ao apresentarmos a categoria moreno, o percentual de
respostas aumentou significativamente em relao ao percentual de respostas para a categoria
pardo, diminuindo o percentual de brancos e pretos. Esse resultado certamente fomenta um

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 86 construo do questionrio

importante debate sobre os significados e os entendimentos das medidas de etnia/cor (ver Simes et
al., 2004).
O segundo tipo de experimento testa os efeitos na resposta quando decidimos oferecer ou no a
opo no sei como alternativa de resposta. Para medidas de percepo ou de conhecimento,
quando no oferecemos a opo no sei dentre as categorias de respostas, o entrevistado, ao se
sentir constrangido em declarar espontaneamente no sei, poder ser levado a escolher qualquer
uma das categorias apresentadas (o que se chama de falso positivo). Ou seja, na ausncia de um
filtro para aqueles que no tm opinio (Converse e Presser, 1986), poderemos produzir uma opinio
que no existe, o que, alis, Bourdieu (apudThiollent, 1985) j destacava como o primeiro postulado
das pesquisas de opinio que deve ser colocado em questo para uma anlise rigorosa. Por um lado, o
filtro ou o semifiltro (a apresentao da opo no sabe no prprio enunciado da pergunta)
importante para tornar explcita ao respondente a legitimidade de uma resposta no sei. Por outro
lado, quando oferecemos a opo no sei, os respondentes, mesmo tendo uma opinio sobre o
assunto em questo, podero buscar uma sada mais fcil de resposta declarando no conhecer o
suficiente para opinar, em vez de emitir sua opinio (o que se chama de falso negativo). Esse dilema
uma discusso importante para as medidas atitudinais (crenas, opinies). O que estaremos medindo
com perguntas de percepo, ou seja, o que buscamos com maior empenho evitar: a criao de
opinio enquanto um artefato sociolgico ou a subestimao das crenas e opinies do conjunto de
entrevistados?
A questo selecionada para o split-ballot da PRMBH (2002) foi uma medida de percepo sobre
o Oramento Participativo. Quatro perguntas foram elaboradas, cada uma abordando um aspecto do
Oramento Participativo em relao: 1) ao poder da populao de decidir sobre obras na cidade, 2)
prestao de contas da prefeitura junto populao, 3) ateno s demandas populares e 4) ao
poder dos vereadores.
A avaliao desses aspectos do Oramento Participativo levou em conta se aumentou,
diminuiu ou continua igual. Para uma das subamostras, no oferecemos a opo no sei; e para a
outra, oferecemos a opo no sei expressa enquanto ou voc no conhece o suficiente para
opinar.
As diferenas percentuais na distribuio das respostas foram muito altas para as quatro
perguntas feitas. Respectivamente, para o no sei voluntrio e para o no conhece o suficiente para
opinar, os resultados foram os seguintes: 1a pergunta: 9,1 % e 46,2%; 2a pergunta: 16,8% e 50,3%; 3a
a
pergunta: 12,7% e 42,9%; 4 pergunta: 19,2% e 55,1%.

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 87 construo do questionrio

Outro resultado importante de se investigar a diferena dos percentuais de respostas para a


categoria continua igual em relao s outras categorias quando oferecemos a opo no sei.
Nesse caso, ao compararmos as mesmas categorias de respostas entre si, observamos uma
diminuio do percentual para a categoria aumentou, pouca diferena para a categoria diminuiu e
uma grande diminuio do percentual para a categoria continua igual. Esta ltima categoria,
caracterizada como um ponto do meio, como uma categoria intermediria de intensidade, ou neutra,
pode tambm ser interpretada como uma alternativa para uma sada mais fcil de resposta, o que
muitas vezes corresponderia ao no sei (Converse e Presser, 1986). Nossos resultados so
consistentes com vrios experimentos que j foram conduzidos para comparar os efeitos da utilizao
ou no do ponto intermedirio (Schuman e Presser, 1981) e mostraram uma variao das respostas
justamente em relao ao uso da opo no sei.
O terceiro tipo de experimento, relativo ao modo de coleta do dado (entrevista face-a-face ou
questionrio autoaplicado), foi conduzido utilizando-se questes em duas temticas diferentes: a
percepo sobre preconceito e a declarao do valor da renda familiar mensal. Por se tratarem de
questes sensveis, as perguntas foram aplicadas utilizando-se a entrevista face-a-face (em que o
entrevistador faz as perguntas diretamente) para uma das subamostras e utilizando-se o carto
autoaplicado (sendo separado em envelope lacrado para o sigilo da resposta) para a outra subamostra.
A utilizao de diferentes modos de conduo da entrevista para as questes sensveis, como
so as questes sobre preconceito, baseia-se em experimentos que demonstraram um maior
percentual de pessoas que admitiam o preconceito no modo autoaplicado do que na entrevista face-a-
face.
As questes sobre preconceito referiam-se ao sentimento em relao a: a) se uma pessoa da
famlia se casasse com uma pessoa branca e b) se um filho(a) se casasse com uma pessoa branca,
no caso dos entrevistados que se autoclassificaram como pretos. A situao oposta foi apresentada
queles que se autoidentificaram como branco, pardo/moreno ou outro. As alternativas de resposta
foram: apoiaria totalmente, tenderia a apoiar, tenderia a se opor e se oporia totalmente.
Outras questes sobre preconceito se referiam identificao de situaes j ocorridas com o
respondente: tratado com menos respeito, no to bem atendido em restaurantes ou lojas, as
pessoas agem como se estivessem com medo de voc, as pessoas agem como se fossem melhores
do que voc, vigiado ou seguido em lojas e tratado de maneira diferente por causa da cor da
pele. Na ocasio do pr-teste do questionrio, a observao dos entrevistadores foi de um grande
constrangimento por parte dos entrevistados ao responderem essa questo. Dessa maneira, a

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 88 construo do questionrio

utilizao de um modo de coleta do dado que garantisse o sigilo das respostas foi colocada como
alternativa metodolgica para uma questo em que se tratava de uma temtica sensvel no contexto
brasileiro.
Para as duas sequncias de questes, foram utilizados o modo face-a-face e o modo
autoaplicado em duas subamostras de um experimento split-ballot, no qual, mantendo-se a mesma
formulao, apenas variava o modo de conduo da entrevista. Os resultados no demonstraram
diferenas quanto distribuio dos percentuais das respostas, o que ressalta a necessidade de um
aprofundamento do entendimento das especificidades da questo da discriminao no contexto
brasileiro, quando a utilizao de um recurso metodolgico para garantir o sigilo das respostas no
funcionou como esperado.
Outro desafio, bem conhecido entre os pesquisadores que utilizam a metodologia de survey para
coleta de dados, perguntar o valor da renda (familiar ou individual), uma vez que tambm tomada
como uma temtica sensvel, na medida em que se sabe que o nmero de entrevistados que se
recusam a responder esse tipo de questo bastante grande nos mais diversos pases. Portanto, essa
questo se colocou como uma candidata verificao dos efeitos na resposta produzidos pelos modos
de coleta do dado. Assim, utilizou-se o experimento relativo ao modo de coleta do dado (entrevista
face-a-face ou questionrio autoaplicado) com a expectativa de que o nmero de respostas no modo
autoaplicado fosse maior do que na entrevista face-a-face. Os percentuais daqueles que se recusaram
a dar respostas sobre a renda, contudo, no apresentaram diferenas que indicassem efeitos da
variao dos modos de coleta do dado.
A utilizao dos experimentos um importante instrumento para a investigao sobre a validade
e a confiabilidade das medidas e demanda um conhecimento especfico sobre a sua metodologia.
Cada resultado deve ser analisado levando-se em conta a natureza especfica de cada medida, alm
da fundamentao terica na explicao dos efeitos nas respostas. No caso do uso do survey no
contexto brasileiro, os experimentos podero ser um instrumento muito til na adequao da
metodologia para populaes altamente heterogneas em termos educacionais e culturais.

Comentrios finais
O processo de construo do questionrio da PRMH, trabalho longo e minucioso, efetivamente
se tornou um fascinante aprendizado para todos ns, professores e alunos, na arte e na cincia de
fazer perguntas. Esperamos que esse processo e seus instrumentos, brevemente descritos neste
Anexo, possam incentivar outros cientistas socias a ver o pr-teste como uma fase crucial na gerao

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 89 construo do questionrio

de dados vlidos e confiveis, sendo, portanto, um momento do survey que deve ser feito com o maior
rigor e com o uso de tcnicas bem elaboradas. Ns, da PRMBH, estamos totalmente convencidos
disso.

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 90 construo do questionrio

Notas:
1
O nosso Manual do Entrevistador uma adaptao ao nosso contexto social e de pesquisa do manual
desenvolvido ao longo de cinquenta anos pelo Survey Research Center do Institute for Social Research da
Universidade de Michigan.
2
Susanne Lundasen (2002, p.132) levantou os diferentes significados do termo confiana interpessoal e apontou
trs diferentes nveis, apresentados por Couch e Jones (1997): confiana generalizada (na natureza humana),
confiana relacional (relacionada com as pessoas conhecidas especficas) e confiana na rede (nvel
intermedirio relacionado com as redes sociais ou familiares).

Referncias
Aquilino, W. Spouse presence during the interview on survery responses concerning marriage. Public
Opinion Quarterly, 1993;57:358-76.
Bradburn, N.; Sudman, S. Asking questions: a practical guide to questionnaire design. San Francisco:
Jossy-Bass, 1982.
Clark, H.; Schober, M. Asking questions and influencing answers. In: Tanur, J. M. (org.). Questions
about questions: inqueries into the cognitive bases of surveys. New York: Russel Sage Foundation,
1992.
Converse, J. M.; Presser, S. Survey questions: handcrafting the standartized questionnaire. Beverly
Hills: Sage, 1986.
Converse, P. The nature of belief systems in mass publics. In: Apter, D. (org.). Ideology and discontent.
New York: Free Press, 1964. p.206-61.
Couch, L.; Jones, W. Measuring levels of trust.Journal of Research in Personality, 1997;31:317-36.
Fowler Jr., Floyd J.Improving survey questions: design and evaluation. Thousand Oaks, CA: Sage
Publications,1995.
Fowler Jr., Floyd J. Pesquisa de levantamento. Porto Alegre: Penso, 2011.
Geer, J. G. What do open-ended questions measure? Public Opinion Quarterly, 1988;52:365-71.
Inglehart, R. Modernization and postmodernization: cultural, economic, and political change in 43
societies. Princeton: Princeton University Press, 1997.
Lundasen, S. Podemos confiar nas medidas de confiana? Opinio Pblica, 2002;7(2):304-27.
Marsh, C. The Survey method: the contribution of survey to sociological explanation. London: George
Allen & Unwin, 1982.
Payne, S. L. The art of asking questions. Princeton: Princeton University Press, 1951.

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 91 construo do questionrio

Reis, B. P. W. O tabelo e a lupa: teoria, mtodo generalizante e idiografia no contexto brasileiro.


Revista Brasileira de Ciencias Sociais, 1991;16.
Schuman, H.; Presser, S. Questions and answers in attitude surveys: experiments on question form,
wording and context. New York: Academic Press, 1981.
Schwarz, N.etal.Response scales as frame of reference: the impact of frequency range on diagnostic
judgment. Applied Cognitive Psychology, 1991;5:37-50.
Stouffer, S. A.; Lazarsfeld, P. F. Social research to test ideas. New York: Free Press of Glencoe, 1962.
Strack, F.; Martin, L. L. Thinking, judging, and communicating: a process account of context effects in
attitude surveys. In: Hippler, N. et al.(org.). Social information processing and survey methodology.
New York: Springer, 1987. p. 123-148.
Sudman, S. et al. Thinking about answers: the application of cognitive processes to survey
methodology. San Francisco: Jossey-Bass, 1996.
Thiollent, M. Critica metodolgica, investigao social e enqute operria. So Paulo: Polis, 1985.

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 92 construo do questionrio

Formulando questes para


que sejam boas Medidas
(Fowler Jr., Floyd J. Pesquisa de levantamento capitulo 6)

Em levantamentos, respostas no so intrinsecamente de interesse, mas por conta de sua


relao com alguma coisa que se supe que elas meam. Questes boas so confiveis
(fornecem medidas consistentes em situaes comparveis) e vlidas (as respostas
correspondem ao que elas pretendem medir). Este captulo discute abordagens tericas e
prticas para a formulao de questes para que sejam medidas confiveis e vlidas.

Formular uma questo para um instrumento de pesquisa formular uma medida, no uma
investigao conversacional. Em geral, uma resposta dada a uma questo de levantamento no
carrega um interesse intrnseco. Ela valiosa na medida em que pode mostrar que possui uma relao
previsvel com os fatos ou com os estados subjetivos de interesse. Boas questes maximizam a
relao entre as respostas registradas e o que o pesquisador est tentando medir.
De certo modo, respostas de levantamento so simples respostas evocadas em uma situao
artificial criada pelo pesquisador. A questo crtica neste captulo : o que uma resposta a uma questo
de levantamento nos diz sobre alguma realidade na qual temos interesse. Vejamos alguns tipos
especficos de respostas e seus significados:

1. Um respondente nos diz que votou em Kerry e no em Bush para presidente em 2004. A
realidade na qual estamos interessados em que nvel, se houve algum, ele foi influenciado
na cabine de votao. A resposta dada no levantamento pode diferir de o que aconteceu na
cabine de votao por diversas de razes. O respondente pode ter pressionado o boto
errado e, portanto, no saber em quem ele realmente votou; ele pode ter esquecido; ou
tambm pode ter alterado sua resposta intencionalmente por algum motivo.
2. Um respondente nos diz quantas vezes foi ao mdico durante o ano passado. Este o
mesmo nmero a que o pesquisador chegaria se tivesse seguido o respondente cerca de 24

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 93 construo do questionrio

horas todos os dias durante o ano passado? Problemas de recordao, de definio do que
constitui uma visita ao mdico e de boa vontade para responder com preciso podem afetar a
correspondncia entre o nmero que o respondente fornece e a conta a que o pesquisador
teria chegado de forma independente.
3. Quando um entrevistado qualifica o seu sistema de escolas pblicas como bom em vez de
regular ou ruim, o pesquisador interpretar tal resposta como refletindo avaliaes e
percepes daquele sistema escolar. Se o entrevistado classificou apenas uma escola (em
vez de todo o sistema), se inclinou a resposta para agradar o entrevistador ou se entendeu a
questo de maneira diferente dos outros, sua resposta pode no refletir os sentimentos que o
pesquisador tentou medir.

Muitos levantamentos so analisados e interpretados como se o pesquisador soubesse com


certeza o que as respostas significam. Estudos formulados para avaliar a correspondncia entre as
respostas dos entrevistados e os valores verdadeiros mostram que muitos deles respondem a vrias
questes muito bem. Mesmo assim, assumir correspondncia perfeita entre as respostas que as
pessoas do e alguma outra realidade ingnuo. Quando as respostas so boas medidas, so
normalmente o resultado de um processo de formulao cuidadoso. Nas sees seguintes, so
discutidas maneiras especficas pelas quais os pesquisadores podem melhorar a correspondncia
entre as respostas dos entrevistados e o estado verdadeiro das coisas.
Um dos objetivos de uma boa medida aumentar a confiabilidade das questes. Quando dois
respondentes esto em uma mesma situao, eles devem responder s questes da mesma forma.
medida que h inconsistncia entre eles, um erro aleatrio introduzido, e a medio menos precisa.
A primeira parte deste captulo lida com como aumentar a confiabilidade das questes.
H tambm a questo de o que uma resposta dada significa em relao ao que o pesquisador
est tentando medir: Quo bem a resposta corresponde? As ltimas duas sees deste captulo so
dedicadas validade, a correspondncia entre as respostas e os valores verdadeiros e formas de
melhorar tal correspondncia (Cronbach e Meehl, 1955).

Aumentando a confiabilidade das respostas


Uma maneira de assegurar a consistncia da medio que para cada respondente em uma
amostra feito o mesmo conjunto de perguntas. As respostas a essas perguntas so gravadas. O

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 94 construo do questionrio

pesquisador gostaria de estar apto a assumir que as diferenas nas respostas derivam das diferenas
entre os entrevistados no que eles tm para dizer e no das diferenas no estmulo ao qual os
respondentes foram expostos. A formulao das questes obviamente uma parte central do estmulo.
Uma coleta de dados de levantamento uma interao entre um pesquisador e um respondente.
Em uma pesquisa autoadministrada, em papel ou via computador, o pesquisador fala diretamente com
o entrevistado por meio de um questionrio escrito ou por palavras em uma tela de computador. Em
outros levantamentos, um entrevistador l as palavras do pesquisador para o respondente. Em ambos
os casos, o instrumento de pesquisa o protocolo para um dos lados da interao. A fim de fornecer
uma experincia de coleta de dados consistente para todos os respondentes, uma boa questo tem as
seguintes propriedades:

O lado do pesquisador do processo de pergunta e resposta totalmente planejado, de


forma que as questes escritas preparam totalmente o respondente para respond-las.
A questo significa a mesma coisa para todos os respondentes.
Os tipos de respostas que constituem uma resposta apropriada para a questo so
comunicados de forma coerente a todos os respondentes.

Evitando a formulao inadequada


O exemplo mais simples de formulao inadequada de uma questo quando, de alguma forma,
as palavras do pesquisador no constituem uma questo completa.

FORMULAO INCOMPLETA:
Ruim Melhor

6.1 Idade? Qual era sua idade em seu ltimo aniversrio?

6.2 Razo pela qual foi ao mdico da ltima Qual foi o problema mdico ou a razo pela qual voc foi ao
vez? mdico mais recentemente?

Entrevistadores (ou respondentes) tero de adicionar palavras ou substitu-las para que se possa
respond-las a partir das palavras na coluna da esquerda. Se o objetivo que todos os respondentes

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 95 construo do questionrio

respondam s mesmas questes, ento melhor que o pesquisador escreva as questes de forma
completa.
s vezes, a formulao opcional requerida para atender s diferentes circunstncias dos
respondentes. Isso no significa, contudo, que o pesquisador tenha que desistir de escrever as
questes. Se a entrevista assistida por computador, frequentemente possvel adequar a formulao
das questes. Se usado um roteiro de entrevista em papel, uma conveno comum colocar termos
opcionais entre parnteses. Tais palavras sero usadas pelo entrevistador quando forem adequadas
situao e omitidas quando no forem necessrias.

EXEMPLOS DE TERMOS OPCIONAIS:


6.3 Voc foi (ou algum que vive aqui com voc) atacado ou agredido por um
desconhecido durante o ltimo ano?
6.4 Voc (ele/ela) informou o ataque polcia?
6.5 Que idade tinha (CADA PESSOA) no (seu/dele/dela) ltimo aniversrio?

No exemplo 6.3, a frase entre parnteses seria omitida se o entrevistador j soubesse que o
respondente vivia sozinho. Se mais de uma pessoa vivia na casa, contudo, o entrevistador incluiria
isso. A opo entre parnteses oferecida em 6.4 pode parecer de menor importncia. Os parnteses,
contudo, alertam o entrevistador para o fato de que uma escolha de termo deve ser feita; o pronome
adequado utilizado, e o princpio de que o entrevistador precisa ler apenas a questo exatamente
como escrita a fim de apresentar um estmulo satisfatrio mantido.
Uma variao que mostra a mesma situao ilustrada em 6.5. Um formato como esse pode ser
usado se a mesma pergunta fosse feita para cada pessoa em uma famlia. Em vez de repetir
infinitamente as mesmas palavras, uma nica questo escrita instruindo o entrevistador para
substituir uma designao apropriada (seu marido, seu filho, sua filha mais velha).
Tanto em papel quanto pelo computador, o objetivo fazer o entrevistador realizar perguntas
que faam sentido e que se valham dos conhecimentos previamente obtidos na entrevista para
adequar as questes s circunstancias individuais dos respondentes. H outro tipo de formulao
opcional que visto ocasionalmente em questionrios e que no aceitvel.

EXEMPLO DE FORMULAO OPCIONAL INACEITVEL:

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 96 construo do questionrio

6.6 O que voc mais gosta neste bairro? (Ns estamos interessados em qualquer coisa,
como casas, pessoas, parques ou o que quer que seja.)

Presumivelmente, o que est entre parnteses foi pensado para ajudar os respondentes que
tenham dificuldade em responder questo. A partir de um ponto de vista da medio, contudo, isso
viola o princpio da entrevista padro. Se o entrevistador usa o contedo entre parnteses quando um
respondente no chega prontamente a uma resposta, aquele subconjunto de respondentes ter
respondido uma questo diferente. Tais opes so introduzidas quando o pesquisador no acredita
que a questo inicial uma boa questo. A abordagem apropriada escrever, em primeiro lugar, uma
boa questo. Aos entrevistadores no deve ser dada nenhuma opo sobre quais questes ler ou
como l-las, exceto, como nos exemplos anteriores, para fazer as questes se adaptarem s
circunstncias particulares de um respondente de uma forma padronizada.
O que se segue um exemplo diferente de uma formulao de questo incompleta. H trs
erros envolvidos no exemplo.

EXEMPLO DE UMA FORMULAO POBRE:


6.7 Eu gostaria que voc classificasse diferentes caractersticas do seu bairro como muito
bom, bom, razovel ou ruim. Por favor, pense cuidadosamente sobre cada item quando eu
os ler.

a. Escolas pblicas
b. Parques
c. Transporte pblico
d. Outro

O primeiro problema do exemplo 6.7 a ordem principal. As alternativas de resposta so lidas


antes de uma instruo para pensar cuidadosamente sobre os itens especficos. O respondente
provavelmente esquecer a questo. O entrevistador provavelmente ter que fazer alguma explicao
ou reformulao antes que o respondente esteja preparado para dar uma resposta. Em segundo lugar,
as palavras que o entrevistador precisa perguntar sobre os itens da lista no so fornecidas. Uma
questo muito melhor seria a seguinte:

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 97 construo do questionrio

6.7a Eu irei pedir a voc para que classifique diferentes caractersticas do seu bairro.Eu
quero que voc pense cuidadosamente sobre as suas respostas.
Como voc classificaria (CARACTERSTICA): muito bom, bom, razovel ou ruim?

O entrevistador inseriria sequencialmente cada item (escolas pblicas, parques, etc.) at que as
quatro questes tivessem sido feitas. Esse formado d ao entrevistador a formulao necessria para
perguntar o primeiro e todos os outros itens subsequentes da lista como questes completas. Isso
tambm coloca os elementos da questo em uma ordem apropriada, de forma que as alternativas de
resposta so lidas para o respondente da maneira que elas mais provavelmente sero lembradas.
O terceiro problema com o exemplo 6.7 a quarta alternativa:outro. O que o entrevistador dir?
Ele far uma nova questo, como H alguma outra coisa no seu bairro que voc aprecie?. Como
sero redigidas as questes de classificao? No raro ver a opo outro em uma lista de questes
em um formulrio similar ao do exemplo. Claramente, da forma como apresentado em 6.7, o
planejamento inadequado.
Os exemplos apresentados ilustram questes que no poderiam ser apresentadas
consistentemente a todos os respondentes como um resultado da formulao incompleta.
Outro passo necessrio para melhorar a consistncia criar um conjunto de questes que fluam
sem problemas e facilmente. Se as questes tm uma formulao estranha ou confusa, se h palavras
difceis de pronunciar ou se combinaes de palavras soam estranhas juntas, os entrevistadores
mudaro as palavras para faz-las soarem melhor ou para torn-las mais fceis de ler. possvel
treinar e supervisionar os entrevistadores para seja feitoo mnimo de mudanas. No entanto, o melhor
modo de ajudar os entrevistadores oferecer-lhes questes fceis de ler.

Garantindo um significado coerente para todos os respondentes


Se a todos os entrevistados so feitas exatamente as mesmas perguntas, um passo foi dado
para garantir que as diferenas nas respostas podem ser atribudas s diferenas dos respondentes.
Mas h uma considerao mais profunda: todas as questes devem significar a mesma coisa para
todos os respondentes. Se dois respondentes entendem que umaquesto significa coisas diferentes,
suas respostas podem ser diferentes apenas por essa razo.
Um problema em potencial usar palavras que no so universalmente entendidas. Em
amostras gerais de populaes, importante lembrar que uma srie de experincias educacionais e

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 98 construo do questionrio

culturais sero representadas. At mesmo com respondentes muito bem-educados, usar palavras
simples que so curtas e amplamente entendidas um mtodo seguro para a formulao de
questionrios.
Indubitavelmente, um erro muito mais comum do que usar palavras no familiares o uso de
termos ou conceitos que podem ter mltiplos significados. A prevalncia de interpretaes errneas de
formulaes comuns vem sendo bem documentada por aqueles que estudaram o problema (por
exemplo, Belson, 1981; Fowler Jr., 1992; Oksenberg et al, 1991; Tanur, 1991; Tourangeau, Rips e
Rasinski, 2000).

EXEMPLO DE TERMOS DEFINIDOS POBREMENTE:


6.8 Quantas vezes no ano passado voc viu ou falou com um mdico sobre sua sade?

Problema. H dois termos ou conceitos ambguos nessa questo. Primeiro, h base para
incerteza sobre o que constitui um profissional da sade. Apenas as pessoas com formao em
medicina e que a praticam esto includas? Se sim, os psiquiatras esto includos, mas
psiclogos, quiroprticos, osteopatas e podlogos no esto. E os mdicos-assistentes ou
enfermeiros que trabalham diretamente para os mdicos em consultrios? Se uma pessoa vai a
um consultrio mdico para ser vacinada por um enfermeiro, isso conta?Segundo, o que
constitui ver ou falar com um mdico? Consultas por telefone contam? Visitas a um consultrio
mdico quando o mdico no visto contam?
Solues. Normalmente, a melhor abordagem fornecer aos entrevistadores e respondentes as
definies que eles precisam:

6.8a Ns vamos perguntar a voc sobre mdicos e sobre a obteno de aconselhamentos


de um mdico. Nesse caso, estamos interessados em todos os profissionais que tenham o
grau ou que trabalham diretamente para um doutor em medicina em um consultrio, como
enfermeiros ou mdicos-assistentes.

Quando a definio do que esperado extremamente complicada e tomaria um longo tempo


para ser efetivada, como pode ser o caso nessa questo, sugere-se uma abordagem mais construtiva,
ou seja, por meio de perguntas suplementares sobre eventos desejados que so particularmente
suscetveis de serem omitidos. Por exemplo, visitas a psiquiatras, visitas para tomar vacinas e
consultas por telefone normalmente so subnotificadas e podem justificar questes especiais de

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 99 construo do questionrio

acompanhamento. Perguntar questes especficas de acompanhamento,a fim de ter certeza de que


eventos no foram deixados de lado, uma forma fcil de reduzir tais erros.

EXEMPLO DE TERMOS DEFINIDOS POBREMENTE:


6.9 Voc tomou caf da manh ontem?

Problema. O problema que a definio de caf da manh varia muito. Algumas pessoas
consideram caf e uma rosquinha a qualquer momento antes do meio-dia um caf da manh.
Outras no consideram que tomaram caf da manh a menos que isso inclua uma grande
entrada, como bacon e ovos, e que seja consumido antes das 8h. Se o objetivo medir o
consumo de comida pela manh, os resultados provavelmente tero erros considerveis
decorrentes das diferentes definies de caf da manh.
Solues. H duas opes de abordagens para a soluo: definir caf da manh (6.9a) ou
perguntar s pessoas o que elas comeram antes das 10h.

6.9aPara os nossos propsitos, vamos considerar caf da manh como uma refeio
consumida antes das 10h, que inclua alguma protena, como ovos, carne ou leite, alguns
gros, como torradas ou cereal, e alguma fruta ou vegetal, incluindo suco.
Usando essa definio, voc tomou caf da manh ontem?

Embora a opo 6.9a seja normalmente uma abordagem muito boa, nesse caso muito
complicada. Em vez de tentar comunicar uma definio comum aos respondentes, o pesquisador pode
simplesmente perguntar s pessoas o que elas comeram antes das 10h. Na fase de codificao, o que
foi consumido pode ser avaliado coerentemente para ver se isso se encaixa nos padres de caf da
manh, sem precisar que cada respondente compartilhe a mesma definio.

EXEMPLO DE TERMOS DEFINIDOS POBREMENTE:


6.10 Voc a favor ou contra a legislao para o controle de armas?

Problema. A legislao para o controle de armas pode significar banir a venda legal de certos
tipos de armas, pedir s pessoas para que registrem suas armas, limitar o nmero ou o tipo de
armas que as pessoas podem possuir ou limitar quais pessoas podem possu-las. As respostas

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 100 construo do questionrio

no podem ser interpretadas sem suposies sobre o que os respondentes pensam que a
questo significa. Eles indubitavelmente interpretam essa questo de forma diferente.
Soluo. Definir o que seria a legislao para o controle de armas:

6.10a. Uma proposta para o controle das armas que a nenhuma pessoa que j tenha sido
condenada por um crime violento seja permitindo comprar ou possuir uma pistola, um rifle
ou uma espingarda. Voc se ope ou apoia uma legislao como esta?

Pode-se argumentar que essa apenas uma de uma variedade de propostas para o controle das
armas. Esse exatamente o ponto. Se queremos perguntar mltiplas questes sobre possveis
diferentes estratgias para o controle das armas, devemos perguntar separadamente questes
especficas que podem ser geralmente entendidas por todos os respondentes e interpretadas pelos
pesquisadores. No se resolve o problema de uma questo complexa deixando-se para o respondente
decidir qual questo ele quer responder.
H uma tenso potencial entre dar uma definio complicada para todos os respondentes e
tentar manter as questes claras e simples. Isso particularmente verdadeiro para levantamentos
administrados pelo entrevistador, assim como as definies so particularmente difceis de entender
quando so dadas oralmente.
Uma abordagem potencial dizer aos entrevistadores para fornecer definies aos respondentes
que pedirem esclarecimentos ou aparentarem no compreender bem uma questo. Uma preocupao
acerca de tais abordagens que os entrevistadores no daro definies coerentes se tiverem que
improvisar. Contudo, entrevistas assistidas por computador facilitam o fornecimento de definies
precisamente formuladas.
A outra preocupao, mais importante, que apenas alguns respondentes entendero a
definio necessria. Aqueles que no solicitarem esclarecimentos ou que no aparentarem estar
confusos vo ter uma lacuna de informaes que poder afetar suas respostas.
Conrad e Schober (2000) experimentaram dar certa liberdade aos entrevistadores para
fornecerem definies e explicaes quando elas parecessem necessrias. Houve alguma evidncia
de que a preciso melhorou, mas o aumento veio a um preo de mais treinamento de entrevistadores e
entrevistas mais longas. Enquanto existira necessidade de se pesquisarformas adequadas de se fazer
questes sobre conceitos complexos, a melhor abordagem para a maioria dos levantamentos evitar
termos difceis ou ambguos e definir aqueles que sero usados na formulao das questes.

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 101 construo do questionrio

Evitando questes mltiplas


Outra maneira de fazer questes no confiveis perguntar duas coisas na mesma questo.

EXEMPLO DE DUAS PERGUNTAS EM UMA:


6.11. Voc quer ser rico e famoso?

Problema. bvio que rico e famoso no so a mesma coisa. Uma pessoa pode querer ser um,
mas no querer ser o outro. Os respondentes, quando se deparam com duas questes, tero de
decidir a qual responder, e essa deciso ser feita de forma inconsistente por diferentes
respondentes.

O exemplo 6.11 foi um tanto exagerado; sabe-se que a maioria das questes mltiplas um
pouco mais sutil.

EXEMPLO DE DUAS PERGUNTAS EM UMA:


6.12 Nos ltimos 30 dias, quando voc sacou dinheiro em um caixa eletrnico, com que
frequncia sacou menos de 25 dlares: sempre, normalmente, algumas vezes, nunca?

Problemas.Essa questo do exemplo 6.12 requer trs clculos cognitivos: calcular o nmero de
visitas a um caixaeletrnico, o nmero de vezes que foram sacados menos de 25 dlares e a
relao entre os dois nmeros. Tecnicamente, h apenas uma questo, mas necessrio
responder pelo menos duas questes antesde se obter a resposta final.
Soluo.A pergunta seria mais bem formulada se fossem feitas duas questes:

6.12a Nos ltimos 30 dias, quantas vezes voc sacou dinheiro em um caixa eletrnico?
6.12b (SE ALGUMA) Em quantas dessas vezes voc sacou menos de 25 dlares?

Observe outras duas virtudes das sries 6.12a e 6.12b: identificam-seaqueles que no usaram
um caixa eletrnico, aos quais a questo 6.12b no se aplica;e, ao perguntar por nmeros em ambas
as questes, evita-se que os respondentes faam um clculo. Simplificar a demanda sobre o
respondente quase sempre uma boa ideia.

EXEMPLO DE DUAS PERGUNTAS EM UMA:

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 102 construo do questionrio

6.13 A que tipo de lugar voc vai para o seu atendimento mdico de rotina?

Problema.Essa questo admite que todos os respondentes tm uma rotina de cuidados mdicos,
o que no uma suposio precisa.
Soluo. Recomenda-se perguntar em duas questes. Provavelmente, a melhor abordagem
perguntar aos respondentes se eles tiveram alguma rotina de cuidados mdicos em algum
perodo; por exemplo, nos ltimos 12 meses. Se sim, prossiga com a questo sobre o tipo de
lugar.

A opo no sei
Quando os respondentes so questionados sobre suas prprias vidas, sentimentos ou
experincias, a resposta no sei normalmente uma resistncia embuscar uma resposta efetiva. Por
outro lado, s vezes eles legitimamente no sabem ou no formaram opinio sobre o assunto.
Conforme o assunto se afasta de suas vidas imediatas, mais plausvel e razovel que alguns
respondentes no tenham o conhecimento adequado para fornecer uma resposta ou no tenham
formado uma opinio ou sentimento. Nesses casos, novamente ocorre a questo duas em uma, cuja
soluo desmembr-la para o entrevistado:Voc tem a informao necessria para responder
pergunta?Se sim, qual a resposta?.
H duas abordagens para lidar com esse tipo desituao.
Pode-se apenas perguntar as questes a todos os respondentes, confiando que o respondente
ter a iniciativa de responder no sei. Contudo, relevante considerar que os respondentes diferem
em sua complacncia para voluntariamente responderem que no sabem(Schuman; Presser, 1981) e
que os entrevistadores so inconsistentes na forma como lidar com essas respostas (Fowler Jr. e
Mangiore, 1990; Groves, 1989).
Asegunda alternativa executar, a todos os respondentes, uma triagem de questes
padronizadas a fim de identificar se eles se sentem ou no familiarizados o suficiente com um tpico
para ter uma opinio ou sentimento sobre ele. Nesses casos, independentemente do tema na questo,
sempre recomendado ponderar a familiaridade do respondente com o assunto, para decidir se far
ou no a triagem. Seh ampla familiaridade com o assunto por parte dos respondentes, no importar
realizar ou no uma questo de triagem para conhecimento do assunto. Se um nmero notvel de

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 103 construo do questionrio

respondentes no estiver familiarizado ou nunca pensou sobre o tpico, melhor fazer uma questo de
triagem sobre a familiaridade com o tpico.

Formulao especializada para subgrupos especiais


Os pesquisadores tm discutido muito o fato de o vocabulrio ser diferente paracada subgrupo
da populao. Argumenta-se que medies padronizadas, na verdade, requerem diferentes questes
para diferentes subgrupos (Schaeffer, 1992).
Entretanto, quase nunca se criam formulrios de questionrios diferentes para subgrupos
diferentes. Antes de compor formulrios exclusivos, os metodologistas procuramincessantemente a
melhor forma de elaborar questes que exibamum significado consistente para toda a populao.
Algumas vezes, a linguagem utilizada na elaborao de uma questo mais tpica de um
determinado segmento da populao; e, em geral, os mais instrudos requerem menos adaptaes de
vocabulrio. Outros pontos relevantes dizem respeito a substituir adequadamente palavras e a treinar
os pesquisadores para escolherem as verses dos formulrios. No fcil encontrar palavras
exatamente equivalentes para algum grupo especfico da populao, a fim de tornar a questo mais
compreensvel. Tambm no to simples treinar os entrevistadores para seguirem regras confiveis e
decidirem corretamente qual verso utilizar em determinado caso.Esses fatores tornam tais
processosto truncados que provvel gerar mais insegurana do que elimin-la.
O grande desafio como coletar dados anlogos de pessoas que falam idiomas diferentes. Os
esforos mais cuidadosos para traduzir uma verso original em uma nova lngua contam com um
tradutor diferente, que faz uma retrotraduo da nova verso para o idioma original e ento tenta
conciliar as diferenas entre o original e a verso antes traduzida.
Esse processo seria muito melhorado se os formuladores da questo original estivessem
preocupados com a facilidade da traduo. Por exemplo, nmeros so traduzidos mais facilmente do
que adjetivos. Conceitos abstratos e palavras coloquiais so provvel e particularmente mais difceis de
serem traduzidas com preciso. Escalas de classificaes adjetivas possivelmente no so
equiparveis em todos os idiomas. Ainda que seja tomado grande cuidado, muito difcil ter certeza de
que as pessoas esto respondendo as mesmas questes em idiomas diferentes. Quanto mais
concretas forem as questes, maiores as chances de comparabilidade entre as lnguas ou culturas.
Marin e Marin (1991) e Harkness et al. (2003) apresentam boas anlises dos desafios de se coletar
dados comparveis de pessoas que falam ingls e espanhol e entre culturas diversas.

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 104 construo do questionrio

Expectativa padro para tipos de resposta


Como afirmado, fundamental dar aos entrevistadores um bom roteiro para que possam ler as
questes exatamente como formuladase tambm essencial formular questes que signifiquem a
mesma coisa para todos os respondentes. O outro componente-chave de uma boa questo a
percepo, por parte de todos os respondentes,de que h uma resposta adequada para a pergunta.
A forma mais simples de fornecer aos respondentes a mesma percepo de o que constitui uma
resposta adequada dar-lhes uma lista de respostas aceitveis. Essas questes so chamadas de
questes fechadas. O respondente precisa escolher uma, ou, s vezes, mais de uma, de um conjunto
de alternativas fornecidas pelo pesquisador.

EXEMPLO:
6.14 Qual foi a principal razo pela qual voc foi ao mdico?Por um novo problemade
sade, para o acompanhamento de um problema de sade anterior, paraum checkup de
rotina ou por alguma outra razo?

Questes fechadas no so adequadas em todos os casos. O leque de respostas possveis


pode ser mais extenso do que razovel de se fornecer. O pesquisador no pode sentir que todas as
respostas razoveis podem ser antecipadas. Por essas razes, ele pode preferir no fornecer uma lista
de alternativas ao respondente. Nesse caso, a questo deve informar o tipo de resposta esperado
sempre que possvel.

EXEMPLO:
6.15 Quando voc teve sarampo?

Problema. A questo no especifica os termos nos quais o respondente deve responder.


Considere as seguintes respostas possveis: Cinco anos atrs; Enquanto eu estava no
exrcito; Quando eu estava grvida do nosso primeiro filho; Quando eu tinha 32 anos; Em
1987. Todas essas respostas poderiam ser dadas pela mesma pessoa e todas so apropriadas
questo como colocada. Entretanto, elas no so todas aceitveis no mesmo levantamento,
porque estatsticas descritivas requerem respostas comparveis. Um entrevistador no pode

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 105 construo do questionrio

usar as palavras no exemplo 6.14 e consistentemente obter dados comparveis, porque cada
respondente deve adivinhar que tipo de resposta esperado.
Soluo.A questo precisa explicar ao respondente que tipo de resposta esperado deve ser
criada:

6.15a Quantos anos voc tinha quando teve sarampo?

Obviamente, a opo 6.15a a forma que a questo deveria ter sido formulada pelo pesquisador
para todos os respondentes.

EXEMPLO:
6.16 Por que voc votou no candidato A?

Problemas. Quase todas as questes com Por que levantam problemas, j que o sentido de
causalidade ou a estrutura de referncia pode influenciar as respostas. No exemplo 6.16, o
respon-dente pode escolher falar sobre os pontos fortes do candidato A, as fraquezas do
candidato B ou as razes pelas quais ele usou determinado critrio (Minha me foi Republicana
ao longo da vida). necessrio consentir que os respondentes que veem as coisas exatamente
da mesma forma podem responder de forma diferente.
Soluo. Especificar o foco da resposta.

6.16a Quais caractersticas do candidato A levaram voc a votar nele em relao ao


candidato B?

Esse tipo de questo explica aos respondentes que o pesquisador quer que eles falem sobre o
candidato A, ou seja, a pessoa na qual eles votaram. Se todos os respondentes respondem com a
mesma estrutura de referncia, ento o pesquisador estar apto a comparar as respostas dos
diferentes respondentes de forma direta.

EXEMPLO:
6.17. Quais so algumas das coisas deste bairro que voc mais gosta?

Problemas. Ao responder uma questo como essa, algumas pessoas vo apenas mencionar um
ou dois pontos, enquanto outros mencionaro vrios. possvel que isso reflita diferenas

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 106 construo do questionrio

importantes na percepo ou nos sentimentos dos respondentes. Pesquisas tm mostrado muito


claramente que a educao altamente relacionada ao nmero de respostas que as pessoas
do a questes como essas. E tambm os entrevistadores afetam o nmero de respostas.
Soluo. Especificar o nmero de pontos a serem levantados:

6.17a Qual a caracterstica deste bairro que voc elegeria como a que voc mais gosta?
6.17b Diga-me trs coisas relacionadas a viver neste bairro de que voc mais gosta.

Embora essa no seja uma soluo satisfatria para absolutamente todas as questes, uma
forma eficaz de reduzir a variao indesejada nas respostas entre os respondentes para a maioria das
questes como essas dos exemplos.
O ponto bsico ter em mente que as respostas podem variar em razo de entendimentos
diferentes(por parte dos respondentes) em relao aos tipos de resposta apropriados. Especificar
melhor as propriedades de uma resposta desejada pode remover fontes desnecessrias de incertezas
no processo de medio.

Tipos de medidas/tipos de questes


Os procedimentos relatados so elaborados para maximizar a confiana, na medida em que as
pessoas, em situaes equivalentes, respondero a questes de maneira similar. No entanto,
podehaver total confiana e ainda no se mensurar o que se deseja.
Quando uma resposta fornece uma medida verdadeira e atinge o significado que o pesquisador
espera, esse processo chamado de validade. Nesta seo, alm das maneiras de se maximizar a
confiabilidade das questes, sero discutidos aspectos da formulao de questes que podem
aumentar a validade das medies de levantamento.
Para essa discusso, necessrio distinguir entre duas questes:as que avaliam fatos ou
eventos objetivamente mensurveis e as que analisam estados subjetivos (como atitudes, opinies e
sentimentos). A ideia de validade diferente para medidas objetivas e subjetivas, mesmo que as
diferenas sejam bem sutis.
Quando possvel verificar a exatido de uma resposta por meio de uma observao
independente, a medida de validade similar ao valor da medida verdadeira para o relato de
levantamento. Na teoria, pode-se obter um clculo independente, preciso, do nmero de vezes que um
indivduo usou um caixa eletrnico durante um ano. Na prtica, provavelmente impossvel obter tal

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 107 construo do questionrio

medio independente (p. ex., ter acesso aos registros do uso do caixa eletrnico); porm, o
entendimento da validade , de fato, consistente para situaes objetivas.
Em contrapartida, quando as pessoas so questionadas sobre estados subjetivos, sentimentos,
atitudes e opinies, no h uma forma objetiva de validar as respostas. Somente o respondente tm
acesso aos seus sentimentos ou opinies. Portanto, a validade dos relatos de estados subjetivos
determinada somente por meio de correlaes e correspondncias com outras respostas ou outros
fatos j relatados pelo respondente. As mensuraes de estados subjetivos no permitem medidas
verdadeiramente diretase independentes; o significado das respostas deve ser inferido a partir dos
padres de associao.

Nveis de mensurao
Em Cincias Sociais, h quatro formas de medies, as quais produzem quatro tipos diferentes
de tarefas para os respondentes e quatro tipos diferentes de dados para anlise. So elas:

1. Nominal: pessoas ou eventos so classificados em categorias desordenadas. Exemplo:


Voc do sexo masculino ou feminino?.
2. Ordinal: pessoas ou eventos so ordenados ou colocados em categorias organizadas ao
longo de uma nica dimenso. Exemplo: Como voc classificaria sua sade: muito boa,
boa, regular ou ruim?.
3. Intervalar:so inscritos nmeros que fornecem informaes significativas sobre a
distncia entre estmulos ordenados ou classes (na verdade, intervalos de dados so
muito raros; temperatura em Fahrenheit um dos poucos exemplos comuns).
4. Razo: nmeros so atribudos como as razes entre valores e significados, assim como
os intervalos entre eles. So contagens ou medies por um objetivo, escalas fsicas como
distncia, peso ou presso. Exemplo: Quantos anos voc tinha no seu ltimo aniversrio?.

Muito comumente em levantamentos, quando se est coletando dados factuais, solicitado aos
respondentes que encaixem a si mesmos ou suas experincias em uma categoria, criando dados
nominais, ou lhes solicitado um nmero (muitas vezes, uma relao de dados).

Exemplos de questes que fornecem dados nominais: Voc est empregado?,Voc


casado? e Voc tem artrite?.

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 108 construo do questionrio

Exemplos de questes que os respondentes devem fornecer nmeros reais para uma
relao de dados: Quantas vezes voc foi ao mdico?,Quanto voc pesa? e Quanto lhe
pago por hora?.

Tambm para coletar dados factuais, podem ou devem ser inquiridasrespostas ordinais aos
respondentes. Por exemplo, requisitar a eles que reportem seus rendimentos em categorias
relativamente amplas ou que descrevam seu comportamento em termos no numricos (como
habitualmente, s vezes, raramente ou nunca). Se for solicitadorelato de eventos factuais em termos
ordinais, porque o pesquisador no necessita de muita preciso nas respostas ou porque ser muito
difcil relatarum nmero exato. Entretanto, normalmente, h uma base numrica real subjacente a uma
resposta ordinal para uma questo factual.
A situao um pouco diferente com relao aos relatos de dados subjetivos. Ao longo dos
anos, psiclogos psicofsicos (como, por exemplo, Thurstone e Chave, 1992) esforaram-see ainda
afoitam-se para as pessoas atriburem nmeros a estados subjetivos que satisfaam as hipteses do
intervalo e da razo de dados. Todavia, na grande maioria das vezes, solicitado aos respondentes
que forneam dados nominais e ordinais sobre estados subjetivos. A questo nominal Em qual
categoria seus sentimentos, opinies ou percepes se encaixam?.
Ao formular um instrumento de levantamento, uma tarefa bsica do pesquisador decidir que
tipo de medio desejado. Quando essa deciso for tomada, h algumas implicaes claras para a
forma em que a questo ser perguntada.

Tipos de questes
As questes de pesquisa podem ser grosseiramente classificadas em dois grupos:

1. Questes fechadas: fornecida aos respondentes uma lista de respostas aceitveis.


2. Questes abertas: as respostas aceitveis no so exatamente fornecidas para os
respondentes.

Quando a finalidade colocar as pessoas em categorias desordenadas (dados nominais), o


pesquisador pode escolher se perguntar uma questo aberta ou fechada. Questes praticamente
idnticas podem ser formuladas de qualquer forma.

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 109 construo do questionrio

EXEMPLOS DE QUESTES ABERTAS E FECHADAS:


6.18 Quais as suas condies de sade? (aberta)
6.18a Em qual das seguintes condies voc se encaixa atualmente?(LER A LISTA)
(fechada)
6.19 Qual voc considera o problema mais importante que nosso pas enfrenta hoje?
(aberta)
6.19a Aqui temos uma lista dos problemas com os quais muitas pessoas no pas esto
preocupadas. Qual voc considera o problema mais importante que nosso pas enfrenta
hoje? (LER A LISTA) (fechada)

As questes abertas possuem as vantagens de permitirem que o pesquisador obtenha respostas


imprevistas; de descreverem de forma mais prxima as vises reais dos respondentes; e,
especialmente, deserem preferidas pelos respondentes que gostam da oportunidade de responder a
algumas questes com suas prprias palavras. Responder apenas escolhendo uma resposta fornecida
e nunca ter a oportunidade de dizer o que realmente se pensa pode ser uma experincia frustrante.
Como regra geral, questes abertas so apropriadas quando uma lista de respostas possveis maior
do que o vivel de se apresentar aos respondentes.
Questes fechadas, em virtude de fornecerem alternativas para escolha, so normalmente uma
forma mais satisfatria de produzir dados, por quatro razes:

1. A tarefa de responder questo pode ser feita de forma mais segura.


2. O pesquisador pode interpretar o significado das respostas de forma mais segura (Schuman
e Presser, 1981).
3. maior a probabilidade de que um nmero suficiente de pessoas dar alguma resposta
particular que seja analiticamente interessante.As respostas para questes abertas so
bastante particulares e, por isso, no so analiticamente teis.
4. O registro, tanto pelos respondentes quanto pelos entrevistadores, bastante facilitado,
visto que a maioria das coletas de dados atualmente assistida por computador; mais
simples computar as alternativas marcadas do que analisar ou digitar respostas a questes
abertas.

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 110 construo do questionrio

Se o pesquisador pretende coletar dados ordinais, as categorias devem ser fornecidas ao


respondente. No se pode ordenar respostas de maneira confivel ao longo de um nico continuum a
menos que seja especificado na questo um conjunto de respostas ordenadas admissveis. Visto que
provavelmente esse tipo de mensurao o prevalente em pesquisas de levantamento, torna-se
proeminente uma discusso mais aprofundada sobre aao se responder a questes do tipo ordinal.
A Figura 6.1 mostra um continuum, no qual os respondentes fazemavaliao de algum tipo
mas, ressalta-se que a abordagem geral se aplica a todas as questes ordinais.Uma dimenso
assumida pelo pesquisador,a qual varia dos sentimentos mais negativos possveis aos mais positivos
possveis. Os pesquisadores colocam os respondentes em categorias ordenadas atribuindo-lhes
designadoresou rtulos no continuum. Os respondentes, ento, so solicitados a considerar tais
rtulos, outorgando-os a seus prprios sentimentos ou opinies, e a se imputar na categoria
apropriada.

SENTIMENTO SOBRE ALGO


Extremamente Positivo Extremamente Negativo
ESCALA DE DUAS CATEGORIAS
Bom No Bom
ESCALA DE TRS CATEGORIAS
Bom Regular Ruim
ESCALA DE QUATRO CATEGORIAS
Muito Bom Bom Regular Ruim
ESCALA DE CINCO CATEGORIAS
Excelente Muito Bom Bom Regular Ruim
ESCALA DE ONZE CATEGORIAS
10 9 8 7 6 5 4 3 2 10
Figura 6.1 Escalas subjetivas contnuas.

Figura 6.1 Escalas subjetivas contnuas.

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 111 construo do questionrio

H dois pontos importantes sobre os tipos de dados gerados por essas questes. Primeiro, os
respondentes entendero de formas diferentes os significados dos rtulos ou das categorias. A nica
suposio necessria para se obter anlises significativas que, em mdia, as pessoas que
classificam seus sentimentos como bom sentem-se mais positivas do que aquelas que os classificam
como regular. Ao se detectar entendimentos diferentes de um determinado critrio, comobom e
regular, h uma desconfiana na mensurao, mas ela ainda pode ter significado (isto , correlaciona-
se com o estado de sentimentos subjacente que o pesquisador quer medir).
Segundo ponto:essa escala de medio ordinal relativa. A distribuio de pessoas escolhendo
um determinado rtulo ou categoria depende da escala particular apresentada.
Considere a Figura 6.1 e duas abordagens de escalas ordinais apresentadas: a de 3 pontos
(bom, regular ou ruim) e da 5 opes descritivas (excelente, muito bom, bom, regular e ruim).
Comparando as duas escalas, nota-se que adicionar excelente e muito bom em todas as
probabilidades no apenas fragmenta a categoria bom em trs partes, mas tambm muda todo o
sentido da escala. As pessoas respondem posio ordinal das categorias assim como o fazem aos
descritores.
Em um recente experimento de Wilson et al. (2004), foi solicitado aos respondentes que
usassem duas escalas de 5 pontos para classificar sua sade; uma de 5 pontos igual da Figura 6.1
que continha excelente, muito bom, bom, regular e ruim e outra usando muito boa, boa, moderada,
ruim e muito ruim. Os respondentes foram, ento, orientados a usar uma escala de 1 a 10 para
fornecer um equivalente numrico para cada categoria verbal nas duas escalas.Como se poderia
esperar, o nmero dado para muito boa foi maior quando esta era a primeira resposta (9,8 versus 7,8)
e boa recebeu um escore numrico de 7,3 quando esta foi a segunda categoria, mas apenas 5,4
quando foi a terceira.
Tais escalas so significativas se forem usadas como devem ser: para classificar as pessoas.
Por si s, a declarao de que uma porcentagem da populao sente que algo est bom ou melhor
no inadequada, uma vez que implica que a populao est sendo descrita em algum sentido
absoluto. Na verdade, a porcentagem mudaria se a pergunta fosse diferente.
Somente afirmaes comparativas (ou afirmaes sobre relaes) so justificveis ao se utilizar
medidas ordinais:

comparando respostas mesma questo ao longo dos grupos (por exemplo, 20% a mais do
grupo A do que do grupo B classificou o candidato como bom ou melhor); ou

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 112 construo do questionrio

comparando respostas de amostras comparveis ao longo do tempo (por exemplo, 10% a mais
classificou o candidato como bom ou melhor em janeiro do que em novembro).

Os mesmos comentrios gerais se aplicam aos dados obtidos pela ordenao dos itens feita
pelos prprios respondentes. Por exemplo, na pergunta Considerando as escolas, os servios de
polcia e a coleta de lixo, qual o servio mais importante para voc?, o percentual referente
aosresultados obtidoscomo o topo do ranking ou o ranking mdio de um item completamente
dependente da lista particular fornecida. Comparaes entre distribuies quando as alternativas foram
trocadas/substitudas no so significativas.

Itens concordo/no concordo: um caso especial


Itens concordo/no concordo so muito predominantes em pesquisas de levantamento e,
portanto, merecem uma ateno especial. A tarefa dada aos respondentes em tais itens diferente
daquela de situar a si prprio em uma categoria ordenada. A abordagem habitual ler uma afirmao
aos respondentes e perguntar a eles se concordam ou no com ela. A afirmao est localizada em
algum lugar em um continuum tal como o retratado na Figura 6.1. As localizaes dos respondentes no
continuum so calculadas pela descoberta de se eles dizem que seus sentimentos so muito prximos
afirmao (por concordarem) ou se so muito distantes de onde aquela afirmao est localizada
(por discordarem).
Quando se compara questes apresentadas no formato concordo/no concordo com questes
no formato direto de classificao, h numerosas desvantagens para o primeiro. Veja o seguinte
exemplo:

6.20 Minha sade est ruim. Voc concorda fortemente, concorda, discorda ou discorda
fortemente?
6.20a Como voc classificaria sua sade: excelente, muito boa, boa, regular ou ruim?

As desvantagens da primeira afirmao 6.20 so:

A escala de classificao coloca os respondentes em cinco categorias; as questes


concordo/no concordo so quase sempre analisadas por colocar os respondentes em dois

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 113 construo do questionrio

grupos (os que concordam e os que no concordam). Portanto, mais informao obtida da
classificao.
Questes concordo/no concordo, para que sejam interpretveis, devem ser perguntadas
apenas em realao a extremos em um continuum. Se a afirmao fosse Minha sade
regular, uma pessoa poderia discordar tanto porque boa ou porque ruim. Essa
caracterstica limita a habilidade de ordenar as pessoas no meio de um continuum.
Os respondentes normalmente acham confusa a forma de dizer que sua sade boa por
discordar que ela ruim.
Estudos mostram que alguns respondentes so particularmente provveis de concordar (ou
consentir) quando as questes so colocadas dessa maneira; ou seja, h pessoas que
concordariam tanto que sua sade ruim quanto que ela no ruim se a questo 6.20
fosse declarada na negativa (Dillman e Tamai, 1991; Krosnick et al., 2007; Schuman e
Presser, 1981).

Em razo dessas complexidades, rotineiramente se constata que a tarefa de classificao direta


tem mais validade do que a questo concordo/no concordo comparvel. Para tarefas unidimensionais
de escala, difcil justificar o uso da questo 6.20, j que a 6.20a mais compreensvel. Veja outro
exemplo de afirmaes complexas para se obter respostas:

6.21 Com as condies econmicas conforme esto atualmente, no razovelter mais de


dois filhos.

Essa questo est perguntando pelo menos trs coisas de uma vez: o estado econmico
percebido, o olhar sobre o nmero mximo apropriado de filhos e o olhar sobre a relao entre a
economia e o tamanho da famlia.Alm disso, se uma pessoa responde que concorda ou discorda,
difcil saber com o que o respondente concorda ou discorda. Aprofundamento mais, se a pessoa no
acha que as condies econmicas so ruins (o que a questo impe como uma suposio) e/ou que
as condies econmicas no impliquemno tamanho da famlia, mas acredita que dois filhos um bom
objetivo para uma famlia, torna-se muito complexo responder questo.
O formato concordo/no concordo parece ser uma maneira bastante simples de construir
questes. Mas, na verdade, usar essa forma para fornecer medidas confiveis e teis no fcil e

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 114 construo do questionrio

requer muito cuidado e ateno minuciosa. Normalmente, os pesquisadores tero dados mais
confiveis, vlidos e interpretveis se evitarem as questes concordo/no concordo.

Aumentando a validade dos relatos factuais


Antes de iniciarmos a discusso desta seo, ressalta-se que uma rica literatura metodolgica
sobre relatos factuais est disponvel, inclusive demonstrando as comparaes de relatos com registros
em uma variedade de reas, em particular o relato de eventos econmicos e de sade. Recomenda-se
consultar: Cannell, Marquis e Laurent, 1977, para um bom resumo; bem como Edwards et al., 1994;
Edwards, Winn e Collins, 1996; e Tourangeau, Rips e Rasinski, 2000.
Quando um pesquisador pergunta uma questo factual a um respondente, o objetivo ter um
relato com perfeita preciso; ou seja, obter a mesma resposta que o pesquisador teria dado se tivesse
acesso s informaes necessrias para responder questo.
Sabe-se que a maioria dos entrevistados responde a vrias questes com rigor. Por exemplo,
so relatadas mais de 90% das noites passadas em um hospital dentro de 6 meses de uma entrevista
(Cannell, Marquis e Laurent, 1977).
Contudo, a exatido dos relatos dependedo assunto da questo e da maneira como ela feita.
H quatro razes bsicas que desencaceiam a falta de preciso nos relatos de eventos:

1. Eles no entendem a questo.


2. Eles no sabem a resposta.
3. Eles no conseguem lembrar, embora saibam a resposta.
4. Eles no querem relatar a resposta no contexto da entrevista.

O pesquisador pode combater cada um desses problemas em potencial, tomando os passos


apresentados a seguir.

1. Entendendo a questo
Se os respondentes de uma mesma questo a entendem, isso certamente resultar em erro.
Como discutido antes, quando os pesquisadores abordam eventos que tm definies complexas,
como assaltos ou servios mdicos, eles tm duas opes: fornecer definies para todos os

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 115 construo do questionrio

respondentes; ou permitir que os respondentes deem as informaes necessrias para classificar suas
experincias em categorias detalhadas/complexas e, depois, ter os codificadores que categorizem as
respostas.
Fowler Jr. (1992) mostrou que, ao responderem a questes com termos ambguos, as pessoas
produzem dados completamente distorcidos. Os pesquisadores no podem presumir que um
respondente pedir para que se esclarea a questo caso no a tenha entendido. Para maximizar a
validade de dados de um levantamento factual, um primeiro passo essencial escrever questes que
sero consistentemente entendidas por todos os respondentes.

2. Falta de conhecimento
A falta de conhecimento como uma fonte de erro pode ser de dois tipos principais: (a) O
respondente escolhido no sabe a resposta para a questo, mas algum na famlia selecionada sabe;
ou (b) ningum na famlia selecionada sabe a resposta. A soluo para a primeira situao escolher o
respondente correto, ou seja, no se refere formulao da questo. Na maioria das vezes, o
problema que o respondente da famlia solicitado a relatar informaes sobre outros membros da
famlia ou dela como um todo. As solues incluem o seguinte:

Identificar e entrevistar o membro mais bem informado da famlia.


Usar procedimentos de coleta de dados que permitam ao respondente consultar outros
membros dafamlia.
Eliminar respondentes substitutos; apenas pea aos respondentes para fornecer
informaes sobre eles prprios.

s vezes, necessria uma estratgia complexa de coleta de dados. Por exemplo, a Nacional
Crime Victimization Survey, conduzida pelo Bureau of the Census, obtm relatos de crimes domsticos
de um nico informante da famlia; mas, alm disso, pergunta a cada adulto da famlia diretamente
sobre crimes pessoais, como furtos. Se a entrevista bsica ser conduzida pessoalmente, os custos
das entrevistas com outros membros da famlia podem ser reduzidos se formulrios autoadministrados
forem deixados para que sejam preenchidos pelos membros ausentes da famlia ou se entrevistas
secundrias forem feitas por telefone. Uma variao pedir ao principal respondente para reportar o

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 116 construo do questionrio

mais completamente possvel a informao desejada para todos os membros da famliae, depois,
enviar a ele um resumo para verificao, permitindo a consulta a outros membros da famlia.
Quando perguntamos aos respondentes questes sobre eles mesmos que no conseguem
responder, h um problema de formulao da questo. Teoricamente, pode-se diferenciar entre a
informao que o respondente no consegue lembrar e a informao que ele nunca teve. Em ambos os
casos, o problema para o pesquisador formular questes que quase todos possam responder. Dentre
as opinies disponveis,tm-se:

Mude as questes para perguntar informaes que sejam menos detalhadas ou mais fceis
de lembrar.
Ajude o respondente a estimar a resposta.
Mude ou pule o objetivo.

Frequentemente, as questes solicitam respostas com mais detalhes do que os objetivos da


pesquisa necessitam. Podem-se citar os seguintes exemplos: uma questo solicita aos respondentes
que digam os nomes de todos os medicamentos que eles tomam (uma questo muito difcil) quando o
objetivo descobrir quem est tomando medicao para presso alta (uma questo muito mais fcil);
ou a questo pergunta sobre rendimentos de forma livre (uma maneira implicitamente muito detalhada)
quando obter uma estimativa de renda em categorias amplas satisfaria os objetivos da pesquisa.
A recomendao segue alguns princpios bvios: pequenos eventos, de menos
impacto,provavelmente sero mais esquecidos do que os mais significativos; eventos recentes so
mais bem reportados do que os que ocorreram em um passado mais distante (Cannell et al., 1977).
Algumas vezes, vlido mudar os objetivos da questo para melhorar o relato, perguntando por
eventos que so mais fceis de recordar. Por exemplo, embora seja desejvel saber de todos os
crimes que aconteceram no ltimo ano, haver menos erros no relato se for solicitado aos
respondentes informar apenas os dos ltimos seis meses.
Um relativo novo conjunto de estratgias de formulao de questes resultou do crescente
envolvimento de psiclogos cognitivistas nos mtodos de pesquisa (Jabine et al., 1984; Sirken et al.,
1999; Willis, 2005). Vrias tticas esto sendo testadas para ajudar os respondentes a recordar
eventos (p. ex., pela sugesto de possveis associaes) ou eventos em um determinado lugar no
tempo (p. ex., pela recordao dos respondentes de alguma coisa que aconteceu cerca de um ano

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 117 construo do questionrio

atrs). Calendrios de eventos ajudam os respondentes a situar os acontecimentos no tempo e a


lembr-los, inserindo-os em um contexto (Belli et al., 2004).
Estudos sobre diversas tarefas de pesquisa tm mostrado que os respondentes, na verdade, no
usam a recordao para responder a algumas questes; eles estimam a resposta (Burton; Blair, 1991).
Por exemplo, se perguntamos aos respondentes o nmero de vezes que eles foram a uma mercearia
para comprar comida em algum perodo, eles normalmente fazem uma estimativa baseada no seu
padro habitual em vez de tentar lembrar dos eventos individualmente. Essa observao leva os
pesquisadores a formular estratgias para ajudar os respondentes a fazerem estimativas mais exatas.
Finalmente, importante reconhecer que h assuntos que, apesar de os pesquisadores
desejarem que sejam relatados, os entrevistados realmente no podem responder. Por exemplo, as
pessoas no sabem os custos de seus tratamentos mdicos que so pagos pelo plano de sade. Caso
se queira realmente obter tais custos, necessrio anotar o que exatamente os respondentes podem
estar aptos a relatar (p. ex., apenas os gastos prprios) ou acrescentar que sero necessrios dados
dos prestadores ou seguradores.

3. Convenincia social
H certos fatos ou eventos que os respondentes preferiro no relatar de maneira precisa em
uma entrevista. Situaes de sade com algum grau de inconvenincia social, como transtornos
mentais ou doenas venreas, so significativamente menos relatadas do que outras. Hospitalizaes
associadas a condies particularmente ameaadoras, quer pelos possveis estigmas que podem ser
associados a elas ou por seu natural risco de morte, so relatadas em taxa menor do que a mdia
(Cannell et al., 1977). As estimativas referentesao consumo de lcool sugerem fortemente um relato
inferior, embora os problemas de relato possam ser uma combinao das dificuldades de recordao e
das preocupaes dos respondentes sobre as normas sociais em relao ao consumo de lcool. Priso
e falncia so outros eventos que so consistentemente menos relatados, mas que parecem
improvveis de ser esquecidos (Locander et al., 1976).
Provavelmente,em uma configurao padro de entrevista h limites no que as pessoas vo
relatar. Se um pesquisador realmente espera que algum admita algo muito embaraoso ou ilegal,
esforos extraordinrios so necessrios para convencer os respondentes de que os riscos so
mnimos e de que as razes para correr tal risco so importantes. A seguir, so apresentados alguns
passos que o pesquisador deve considerar ao realizar questes particularmente sensveis (ver tambm
Catania et al., 1990; Bradbum; Sudman, 1982).

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 118 construo do questionrio

1. Minimize o senso de julgamento e maximize a importncia da preciso. primordialdar


ateno especial introduo e ao vocabulrio que podem implicar que o pesquisador poder
avaliar certas respostas negativamente.
2. Os pesquisadores devem estar sempre conscientes de que os respondentes esto em uma
conversa com o pesquisador. As questes e o comportamento do entrevistador, se houver um,
constituem toda a informao que o respondente tem sobre o tipo de interpretao que o
pesquisador dar s respostas. Portanto, o pesquisador precisa ter muito cuidado com relao
s pistas que o respondente est recebendo acercado contexto no qual suas respostas sero
interpretadas.
3. Use procedimentos autoadministrados de coleta de dados. Embora os dados no sejam
conclusivos, h algumas evidncias de que entrevistas por telefone so mais sujeitas a vieses
de convenincia social do que entrevistas pessoais (Aquilino, 1994; de Leeuw; van der
Zouwen, 1988; Fowler Jr. et al., 1998; Henson et al., 1977); Mangione et al., 1982). Outros
estudiosos da rea, como por exemplo, Aquilino, 1994; Aquilino e Losciuto, 1990; Dillman e
Tamai, 1991; Fowler Jr. et al., 1998; Hochstim, 1967, tambm demonstram clara evidncia de
que um formulrio autoadministrado em papel ou no computador, em vez de ter um
entrevistador fazendo as perguntas, produzir menos vis de convenincia social para alguns
itens. Para levantamentos que lidam com tpicos sensveis, deve ser considerado um
levantamento por correio ou administrado em grupo. Um levantamento por entrevista pessoal
tambm pode incluir algumas questes autoadministradas: dado ao respondente um conjunto
de questes para que responda em uma apostila. Se o levantamento assistido por
computador, os respondentes podem digitar suas respostas diretamente nele propiciando o
mesmo efeito. Esta ltima abordagem tem mostrado um aumento significativodos relatos de
uso recente de drogas ilegais (Penne et al., 1998; Tourangeau; Smith, 1998). E ainda, Tumer et
al. (1998) e Villarroel et al. (2006) tm revelado que levantamentos por telefone obtm uma
estimativa muito maior de atividades socialmente sensveis relacionadas a sexo e drogas
quando as respostas so digitadas diretamente em um computador usando a caracterstica do
toque de tom no telefone do que quando um pesquisador faz as perguntas.
4. Garanta a confidencialidade e o anonimato. Quase todos os levantamentos prometem aos
respondentes que as respostas sero tratadas confidencialmente e que ningum, alm dos
pesquisadores, ser capaz de associar individualmente os respondentes a suas respostas.

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 119 construo do questionrio

Normalmente, os respondentes so assegurados de tais fatos pelos pesquisadores na


introduo e,se houver alguma nas cartas precedentes.Reforceisso por meio de um termo de
compromisso assinado pelos pesquisadores. Formulrios autoadministrados sem identificao
proporcionam maior garantiade que as respostas so annimas, no apenas confidenciais.
Finalmente, para levantamentos sobre assuntos particularmente sensveis ou pessoais, h
algumas estratgias elaboradas de levantamento, como tcnicas aleatrias de resposta, na
qual o respondente no pode ser ligado a suas respostas. Essas tcnicas so descritas por
Fox; Tracy, 1986; e Fowler Jr., 1995.)
5. importante enfatizar novamente que o limite da pesquisa de levantamento o que as
pessoas esto dispostas a contar aos pesquisadores sob as condies da coleta de dados
projetada pelo pesquisador. Com certeza, h algumas questes que talvez no sirvam de
amostras de probabilidade se no forem submetidas a esforos extraordinrios. Alguns dos
procedimentos discutidos nesta seo como tentar criar um contexto neutro para as
respostas e enfatizar a importncia da preciso e da neutralidade do processo de coleta de
dados provavelmente so procedimentos vlidos para a maioria das questes. Qualquer
questo, no importa o quo inocente ela possa parecer, pode ter uma resposta embaraosa
para algum da amostra. melhor projetar todas as fases de um instrumento de pesquisa com
a delicadeza de reduzir os efeitos da convenincia social e do embarao para qualquer
resposta.

Aumentando a validade das respostas que descrevem estados


subjetivos
Como discutido anteriormente, a validade das questes subjetivas tem um significado diferente
daquele das questes objetivas. No h um critrio externo; pode-se estimar a validade de uma medida
subjetiva apenas pela extenso na qual as respostas so associadas de maneira esperada com as
respostas para outras questes ou por meio de outras caractersticas do indivduo ao qual isso deve
ser relacionado. Sugerimos consultar Tlimer e Martin (1984), para uma ampla discusso de questes
que afetam a validade de medidas subjetivas.
H basicamente trs passos para o aumento da validade de medidas subjetivas, descritos os
itens a seguir.

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 120 construo do questionrio

1 passo
Torne as questes o mais confivel possvel. Reveja a seo sobre confiabilidade das questes,
lidando com a ambiguidade dos termos, com apresentaes padronizadas e com a impreciso nos
formulrios de resposta, e faa o possvel para obter as questes que significaro a mesma coisa para
todos os respondentes. Na medida em que as medies subjetivas no so confiveis, sua validade
ser reduzida. Uma questo especial a confiabilidade das escalas ordinais, que so dominantes entre
as medies de estados subjetivos. As alternativas de resposta oferecidas devem ser unidimensionais
(isto , tratar de apenas uma questo) e uniformes (apresentadas em ordem, sem inverso).

EXEMPLOS DE ESCALAS PROBLEMTICAS


6.22 Como voc classificaria seu trabalho: muito gratificante, gratificante mas estressante,
no muito gratificante ou nada gratificante?
6.23 Como voc classificaria seu trabalho: muito gratificante, algo gratificante, gratificante
ou nada gratificante?

A questo 6.22 tem duas escalas de propriedade gratificao e estresse que no devem ser
relacionadas. Nem todas as alternativas so esgotadas. A questo 6.22 deveria ser feita em duas
questes se for o caso de se medir gratificao e estresse dos trabalhos. Em 6.23, alguns podem ver
gratificante como mais positivo do que algo gratificante e ficar confuso sobre como as categorias
foram ordenadas. Ambos os problemas so comuns e devem ser evitados.

2 passo
Ao posicionar as pessoas em classes ordenadas ao longo de um continuum, melhor ter mais
categorias do que poucas. Lgico que deve haver um limitepara a preciso da discriminao AO SE
fornecer classificaes ordenadas. Quando o nmero de categorias excede a habilidade dos
respondentes em discriminar seus sentimentos, ou seja, quando so numerosas, elas simplesmente
produzem um rudo no confivel. Alm disso, podem dificultar a escolha das respostas,
particularmente se for pesquisa por telefone. Apesar dessas ponderaes, relevante considerar que
para se mensurar a variao real entre os respondentes, quanto mais categorias, mais aumenta sua
validade.

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 121 construo do questionrio

3 passo
Faa questes mltiplas, com diferentes formulrios de questes, que meam o mesmo estado
subjetivo; combine as respostas em uma escala. As respostas para todas as questes so
potencialmente influenciadas pelo estado subjetivo e pelas caractersticas especficas do respondente
ou das questes. Alguns respondentes evitam categorias extremas; alguns tendem a concordar mais
do que discordar. Questes mltiplas ajudam at mesmo sustentas idiossincrasias de respostas e
aumentam a validade do processo de medio (Cronbach, 1951; DeVellis, 2003).

Relatividade
O ponto mais fundamental de se lembrar sobre o significado das medies subjetivas a sua
relatividade. As distribuies podem ser comparadas apenas quando a situao de estmulo a
mesma. Pequenas mudanas na formulao, que mudam o nmero de alternativas oferecidas ou
mudam a posio de uma questo em um questionrio, podem fazer uma diferena vital na forma de
as pessoas responderem. Sugerimos consultar Schuman; Presser, 1981; Bradbum;Sudman, 1982; e
Tumer; Martin, 1984, para vrios exemplos dos fatores que afetam as distribuies de respostas.
A distribuio de respostas para uma questo subjetiva no pode ser interpretada diretamente;
ela tem significado apenas quando as diferenas entre as amostras expostas ao mesmo questionrio
so comparadas ou quando os padres de associao entre as respostas so estudados.

Erro e formulao de questes


Uma propriedade definitiva dos levantamentos sociais que as respostas s questes so
usadas como medidas. A extenso em que aquelas respostas so boas medidas obviamente uma
dimenso crtica da qualidade das estimativas do levantamento. As questes podem se tornar
medies pobres por no serem confiveis (por formarem resultados errticos) ou por serem
tendenciosas, produzindo estimativas que consistentemente erram em uma direo a partir do valor
verdadeiro (p. ex., quando as prises de motoristas alcoolizados so subnotificadas).
Sabemos um pouco sobre como tornar as questes mais confiveis; os princpios descritos neste
captulo so slidos. Embora outros pontos possam ser adicionados lista, criar questes no
ambguas que forneam medidas consistentes ao longo dos respondentes sempre um passo
construtivo para boas medies.
A questo da validade mais complexa. De certo modo, cada varivel a ser mensurada requer
uma pesquisa capaz de identificar o melhor conjunto de questes para medi-la e para produzir

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 122 construo do questionrio

estimativas acerca de quo vlida a medida resultante . Muitas das sugestes indicadas neste
captulo para melhorar os relatos emergiram de um programa de 20 anos para avaliar e melhorar as
medies de variveis relacionadas sade (Cannell et al., 1977a; Cannell et al,, 1977b). H vrias
reas que necessitam de muito mais estudos sobre validao.
Reduzir os erros de medida por meio de uma boa formulao de questes uma das maneiras
menos custosas de melhorar as estimativas de levantamento. Em qualquer levantamento, deve-se
atentar cuidadosamente para a formulao de questes e para o pr-teste (discutido no Captulo 7),
bem como para o uso da literatura de pesquisa existente sobre como mensurar o que se deseja.
tambm muito necessriocontinuar construindo uma literatura em que a validade das medies seja
avaliada e relatada. Robinson et al. (1997) e McDowell (2003) compilaram dados sobre a validade de
vrias medies de multi-item comumente utilizadas e, assim, documentarm como as medies tm
sido validadas, bem como quanto trabalho ainda precisa ser feito.

EXERCCIOS
1. Use os critrios discutidos neste captulo para avaliar as seguintes questes como confivel,
interpretvel e medies analiticamente teis. Escreva questes melhores se conseguir.
a. Para medir os rendimentos: Quanto voc ganha?
b. Para medir a sade: Quo saudvel voc est?
c. Para medir a satisfao com a vida: Como voc classificaria sua vida: muito boa, melhor do
que a mdia, um pouco dos dois, poderia ser melhor ou muito ruim?
d. Para medir opinies sobre leis de aborto: Diga-me se voc concorda ou no com a
declarao a seguir: O aborto moralmente muito questionvel; abortos deveriam ser ilegais,
exceto em emergncias.
2. Escreva uma srie de questes para medir a posio a favor ou contra planos de sade
universais.
3. Escreva uma srie de questes para medir o grau de envolvimento poltico.
4. Escreva uma hiptese sobre uma possvel relao entre duas variveis (por exemplo, boa sade
relacionada com receber assistncia mdica de qualidade; ou boa qualidade de habitao est
relacionada com altos rendimentos). Ento, sob cada parte da hiptese, escreva uma informao
de que voc necessitaria a fim de atribuir um valor a uma pessoa para cada uma das duas
variveis. Em seguida, elabore uma questo (ou um conjunto delas) para cada parte.As
respostas devem fornecer as informaes de que voc necessita. Indique se as suas questes

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 123 construo do questionrio

perguntam sobre informaes factuais ou subjetivas e se os dados resultantes sero nominais,


ordinais, intervalos ou propriedades de razes.

Leitura complementar
Fowler Jr., Floyd J. Improving survey questions. Thousand Oaks, CA: Sage, 1995.
Fowler Jr., Floyd J. Pesquisa de levantamento.Porto Alegre: Penso, 2011.
Krosnick, J. A.; Judd, C. M.; Wittenbrink, B. The measurement of attitudes. In: Albarracin, D.; Johnson,
B. T.; Zanna, M. P. (eds.). The handbook of attitudes. New York: Psychology Press, 2007. p.21-78.
Tourangeau, R.; Rips, L.; Rasinski, K. The psychology of survey response.Cambridge, UK: Cambridge
University Press, 2000.

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 124 construo do questionrio

Avaliando questes e
instrumentos de
levantamento(Fowler Jr., Floyd J. Pesquisa de
levantamento capitulo 7)

A elaborao de um bom instrumento de levantamento de dados envolve selecionar as questes


a fim de que elas corroborem com os objetivos da pesquisa, testando-as para assegurar que
sejam indagadas e respondidas como planejado e, em seguida, estruturando-as de maneira que
facilitem o trabalho de respondentes e entrevistadores. Este captulo descreve os passos para a
elaborao de bons instrumentos de levantamento.

Todo levantamento de dados requer ou um roteiro de entrevista, o qual constitui uma espcie de
guia para entrevistadores em pesquisas, ou um questionrio que os respondentes iro ler e preencher
sem auxlio. Esses documentos, que sero apresentados impressos ou por programas de computador,
sero utilizados como instrumentos genricos de levantamento de dados.
Compreender a correta estruturao de uma boa questo e a melhor maneira de utilizar
questes como parmetros, consoante o que foi discutido no Captulo 6, certamente o elemento
principal para a elaborao de um bom instrumento de levantamento. No entanto, h uma srie de
instrues muito prticas essenciais para a produo de um bom instrumento de coleta de dados. Este
captulo apresenta um resumo desses passos. Converse e Presser (1986), Bradbum e Sudman (1992),
Fowler Jr. (1995), Groves et al. (2004), Presser et al. (2004) e Willis (2005) apresentam longas e
detalhadas discusses a respeito desses passos.
A elaborao de um instrumento de levantamento de dados possui dois componentes: (a) decidir
o que averiguar e (b) elaborar e testar questes que sero boas ferramentas de avaliao. Geralmente,
o primeiro passo definir os objetivos do levantamento, embora essas metas possam ser revisadas,
baseadas em testes subsequentes de questes. Ento, o processo de escolha e o teste de questes

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 125 construo do questionrio

iniciado. Os passos envolvidos no processo de desenvolvimento de levantamento de dados podem


incluir:

focar em discusses em grupos;


esquematizar prottipo de um conjunto de questes;
fazer uma reviso crtica para detectar falhas comuns;
realizar entrevistas individuais cognitivas (evitando a reproduo de procedimentos de
coleta de dados propostos);
inserir questes em um instrumento de levantamento de dados;
realizar um pr-teste utilizando uma aproximao de procedimentos de coleta de dados
propostos.

Definindo objetivos
Um pr-requisito para elaborar um bom instrumento de levantamento de dados decidir o que
ser averiguado. Isso pode parecer simples e evidente, mas um passo frequentemente esquecido, em
detrimento dos resultados. Um valioso primeiro passo escrever um pargrafo sobre as funes que
devero ser executadas pelo levantamento de dados. Na elaborao de um instrumento de
levantamento de dados, pesquisadores so geralmente tentados a adicionar questes que no
contribuem para alcanar as metas do projeto. Uma maneira de evitar essas tentaes ter um bom
relatrio dos propsitos, contra os quais a incluso de uma rea especfica de pesquisa pode ser
avaliada. Outro passo que um pesquisador precisa elaborar uma lista do que deve ser averiguado
para atingir as metas do projeto. Essas no devem ser questes; devem ser variveis a serem avalia-
das, listadas em categorias ou reas que tenham sentido.
Um plano de anlise deve ser desenvolvido para acompanhar uma lista de variveis a serem
analisadas. Um bom comeo j dever ter sido feito associado elaborao da amostra. O
pesquisador j dever ter definido quais subgrupos da populao requerem estimativas especiais.
Nesse ponto, o pesquisador precisa refinar essas ideias, com o intuito de criar trs listagens: (a) de
quais variveis so elaboradas para serem variveis dependentes, para as quais medidas de tendncia
central (p. ex., meios ou distribuies) so estimadas; (b) de quais variveis precisam ser
independentes, com o objetivo de compreender distribuies e padres de associao; e (c) de quais

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 126 construo do questionrio

variveis podem ser necessrias como variveis de controle e interveno para explicar padres
observados e analisar hipteses conflitantes.

Esses trs documentos, um relatrio de propostas, uma lista dos tipos de variveis a serem
analisadas e um esboo de um plano de anlise so componentes essenciais para a elaborao de um
instrumento de levantamento de dados.

Passos preliminares para a elaborao de questes


Grupos focais
Antes de elaborar um esboo de uma lista estruturada de questes, quase sempre de grande
importncia conduzir discusses a respeito do tpico do projeto com indivduos que integram a
populao a ser estudada. A proposta inicial dessas discusses comparar a realidade sobre a qual os
sujeitos estaro respondendo a questes com os conceitos abstratos constituintes objetivos do estudo.
Exemplo. O objetivo averiguar o nmero de visitas a mdicos. Um grupo de discusso poderia
se focar no que comumente considerado como uma visita ao mdico. Os dois conceitos-chave so
visita e mdico. Os participantes podem ser indagados sobre os vrios contatos que eles tiveram re-
lacionados a mdicos (p. ex., atendimentos mdicos por telefone, consultas para a realizao de
radiografias ou testes em laboratrio, aplicao de vacinas) e se esses contatos poderiam ou no ser
considerados visitas. Aos participantes tambm poderia ser inquirido a respeito das vrias pessoas
contatadas para cuidar de sua sade (p. ex., psiclogos, psiquiatras, tcnicos em enfermagem,
oftalmologistas, optometristas, fisioterapeutas) e perguntar se estes podem ou no ser considerados
mdicos.
Essa discusso pode proporcionar informaes crticas de, pelo menos, trs tipos:

Os tipos de contatos considerados visitas pelos indivduos. Essa informao ajudaria o


pesquisador a refinar os objetivos e os termos utilizados na questo para estabelecer o que
pode ou no ser includo. Por exemplo, consultas por telefone podem ser includas? Se um
estudante de enfermagem visto em um consultrio mdico, deve ser levado em
considerao?

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 127 construo do questionrio

O que os indivduos sabem. Por exemplo, est claro que um psiquiatra formado em
Medicina, mas um psiclogo no o ? Quesuposies podem ser feitas sobre o
conhecimento prvio e percepes das pessoas, treinamento ou credenciais de seguro-
sade?
A compreenso de algumas palavras-chave ou termos. A palavra mdico significa um
indivduo formado em Medicina ou mais genrica (como quando utilizamos o nome de
uma marca comercial para nos referirmos ao produto) referindo-se a quaisquer profissionais
que usem jalecos brancos e lidem com questes relacionadas sade? Termos como
provedor de cuidados com a sade ou profissional dos cuidados com a sade teriam o
mesmo significado para os respondentes?

Discusses de grupos focais so mais bem realizadas com seis a oito participantes. O protocolo
geral discutir as percepes, as experincias e talvez os sentimentos dos indivduos relacionados ao
que ser averiguado no levantamento de dados. O nmero de grupos que ser necessrio pode variar,
mas praticamente qualquer instrumento de levantamento de dados ser bem-sucedido com ao menos
dois grupos focais nos estgios iniciais do processo de elaborao do instrumento de levantamento de
dados.

Esboando questes
Munido de uma lista do que ser avaliado, o pesquisador deve se esforar em encontrar uma
nica questo ou relao de questes necessrias para criar medidas das variveis da lista. Muitas
questes, como as que lidam com informaes prvias ou problemas demogrficos, so padro para a
maioria dos levantamentos de dados. Pode ser til revisar as questes utilizando o General Social
Survey, com o apoio do National Opinion Research Center, da University of Chicago. Muitas pesquisas
so tambm realizadas pela internet pelo Interuniversity Consortium of Political and Social Research
(ICPSR), da University of Michigan. McDowell (2003) expe um excelente recurso para a realizao
desses levantamentos de dados com temas relacionados aos cuidados com a sade. Cpias de
instrumentos de levantamentos de dados originais, advindos das mais importantes organizaes de
levantamento, tambm so teis como referncias. Com base neles, o pesquisador pode abstrair ideias
sobre como questes especficas so estruturadas e como gerar questes padronizadas e formatar
instrumentos de levantamentos de dados.
Usufruir de trabalhosj elaborados muito sensato. Obviamente, melhor revisar questes

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 128 construo do questionrio

feitas por pesquisadores que anteriormente fizeram trabalhos com o mesmo tpico. Alm disso, se
questes j foram feitas em outras amostras, a coleta de dados para comparao pode contribuir para
a confiabilidade da pesquisa. Todavia, o simples fato de que uma questo foi utilizada por algum
anteriormenteno garantia de que ela muito boa ou que certamente apropriada para a dada
pesquisa. Muitas questes inadequadas so largamente utilizadas por pesquisadores que no realizam
uma anlise crtica. Todas as questes devem ser testadas para que haja garantias de que funcionam
para os sujeitos, para o contexto e para os objetivos de um determinado estudo.

Avaliao pr-levantamento reviso crtica sistemtica


A partir do momento em que o conjunto de questes esboado, aconselhvel submet-lo a
uma reviso crtica. Lesser e Forsyth (1996) produziram uma lista de falhas a serem localizadas em um
conjunto de questes. Fowler e Cosenza (2008) tambm propuseram uma lista de padres para
questes que podem ser aplicados inicialmente para teste. Enquanto a no utilizao de listas pode
tomar a tarefa exaustiva, o uso de ambas as listas pode auxiliar na identificao de uma srie de
caractersticas de questes que so indicadas como problemticas. Uma extenso disso tem sido
desenvolvida por Graesser et al. (2006), a qual composta por uma lista de 12 problemas em questes
que podem ser identificados por meio do uso de uma ferramenta eletrnica de avaliao. A utilizao
de uma dessas listagens pode ser til na identificao de questes que podem precisar de reviso;
bem como na indicao de dificuldades que requerem ateno durante as prximas fases de teste.

Entrevistas cognitivas em laboratrio


Uma vez que a lista de questes estiver pronta, revisada e classificada como confivel, o
prximo passo averiguar se os sujeitos podero entender e responder s questes. Discusses de
grupos de foco podem proporcionar algumas solues para problemas de compreenso, mas elas no
fornecem opes para discutir a avaliao de vocabulrio especfico ou o nvel de dificuldade da tarefa
de resposta. Nos estgios iniciais da estruturao de questes, o pesquisador tambm pode realizar
testes, aplicando-as em grupos de amigos, parentes e colegas de trabalho. Verses recentes de
instrumentos de levantamentos de dados contm questes confusas, que no podem ser lidas como
foram escritas, e que so praticamente impossveis de serem respondidas.
A partir do momento em que as questes esto em sua forma primitiva, mas antes de serem

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 129 construo do questionrio

submetidas a pr-testes em campos formais, uma espcie formal de teste, comumente denominada
testes cognitivos, um importante passo (DeMaio e Rothgeb, 1996; Forsyth e Lesser, 1992; Fowler Jr.,
1995; Lesser e Tourangueau, 1989; Presser et al., 2004; Willis, 2005; Willis et al., 1999). Embora
entrevistas cognitivas tenham uma variedade de formas, h certas caractersticas que so comumente
compartilhadas. Primeiramente, respondentes so voluntrios dispostos a estender o seu perodo de
participao para alm do necessrio na realizao da coleta de dados, com o objetivo de auxiliar os
pesquisadores. Frequentemente, o servio dos respondentes recompensado, e eles so levados ao
laboratrio, onde as entrevistas podem ser observadas e gravadas.
Em geral, essas entrevistas no so realizadas por entrevistadores comuns. Em algumas
ocasies, os entrevistadores so psiclogos cognitivos; em outras, as entrevistas so realizadas pelos
prprios investigadores ou indivduos encarregados de supervisionar entrevistadores. Na maioria dos
casos, os entrevistadores possuem um vasto conhecimento sobre os objetivos de cada questo, o que
possibilita a percepo de problemas relacionados compreenso dos respondentes ou forma como
eles respondem s questes.
O padro bsico requer perguntar aos respondentes uma srie de questes, avaliando a maneira
como os indivduos as compreenderam e como as responderam. No raro os respondentes so
solicitados a pensar em voz alta enquanto preparam suas respostas. Em outros casos, os indivduos
so convidados a responder uma srie de perguntas sobre sua compreenso e sobre dificuldades
relacionadas s suas respostas. Duas das tarefas mais comuns so:

1. Solicitar aos respondentes que expliquem, com suas prprias palavras, o que a questo
est pedindo.
2. Solicitar aos respondentes que justifiquem sua escolha em favor de uma resposta, em
detrimento das outras.

A meta coletar informaes suficientes a respeito da compreenso e preparao das respostas


dos entrevistados, com o intuito de avaliar se estes realizaram a tarefa de acordo com as expectativas
do pesquisador. H quatro tipos especficos de questes que devem ser respondidas pelo teste
cognitivo:

1. As questes so satisfatoriamente compreendidas?


2. Os respondentes possuem as informaes necessrias para responder s questes?

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 130 construo do questionrio

3. As respostas refletem com preciso o que os respondentes desejam comunicar?


4. As respostas fornecem consideraes vlidas a respeito do tpico principal da questo?

H um certo limite sobre o que pode ser obtido por intermdio de entrevistas em laboratrios.
Poucas entrevistas desse tipo so realizadas (geralmente o nmero de entrevistas inferior a 10), pois
elas exigem trabalho e, na maioria das organizaes, podem ser conduzidas apenas por um reduzido
nmero de pessoas. Segundo, as entrevistas so conduzidas sob condies artificiais; tarefas pelas
quais os respondentes esto realmente interessados, e so hbeis para executar, podem no ser
passveis de execuo por uma amostra cruzada realizada em suas residncias. Entretanto, estas
entrevistas so muito utilizadas como um passo essencial na elaborao e avaliao de um
instrumento de levantamento de dados. Questes que no so satisfatoriamente compreendidas ou
respondidas em um laboratrio certamente no iro ter melhor resultado em uma situao real.
Problemas de compreenso e dificuldades com a tarefa de resposta no so consideradas confiveis
em pretextos de campo como seriam em entrevistas em laboratrios, onde o processo para resposta
pode ser examinado.
A entrevista cognitiva em laboratrio tem sido comumente empregada para testar protocolos de
entrevista. Os mesmos problemas de compreenso e dificuldades da tarefa de resposta, contudo, se
aplicam a mtodos autoadministrados. Embora o teste-padro de mtodos autoadministrados, como
descrito a seguir, geralmente envolva a ampliao de questes similares quelas empregadas em
entrevistas cognitivas, a compreenso dos respondentes mais aparente quando o processo de per-
guntas e respostas realizado oralmente. Deste modo, para questes de teste elaboradas para serem
autoadministradas, uma entrevista cognitiva pode ser um meio eficaz de identificar problemas que no
seriam observados no pr-testepadro.

Elaborao, formato e leiaute


Os instrumentos de levantamento
Uma vez que uma lista de questes preparada para o pr-teste final, necessrio arranjar as
questes de maneira que facilite o processo de entrevista ou autoadministrao. O primeiro passo
ordenar as questes. Muitos pesquisadores optam por iniciar aplicando questes relativamente fceis e
diretas, que podem apresentar ao respondente o tpico da pesquisa. Questes que exigem um

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 131 construo do questionrio

raciocnio mais apurado, ou aquelas que lidam com temas delicados, so comumente reservadas para
as ltimas sesses. Um procedimento aconselhvel numerar as questes de cada sesso: Al, A2, Bl,
B2, e assim por diante. Dessa forma, quando questes so adicionadas ou excludas, no necessrio
renumerar todas as questes.
Quer o levantamento de dados seja administrado por um entrevistador, quer pelo prprio
respondente, o objetivo principal dos esquemas e formato do questionrio deve ser facilitar a tarefa dos
entrevistadores e dos respondentes. Com o intuito de alcanar este objetivo, a seguir podero ser
observadas algumas regras, elaboradas para um instrumento de levantamento de dados administrado
por um entrevistador:

1. Adotar uma conveno que diferencie as palavras lidas pelos entrevistadores para os
respondentes, e as palavras que so instrues. Uma conveno comum o emprego de
letras em caixa alta para instrues e em caixa baixa para questes que devem ser lidas em
voz alta.
2. Se uma entrevista apresentada em forma impressa, e no monitorada por computador,
necessrio fazer uso de instrues que permitam ao respondente que ignore questes que
foram elaboradas para um grupo especfico de indivduos. Uma conveno comum
colocar INSTRUES EM LETRAS MAISCULAS. As instrues devem ser ligadas a
respostas especficas, auxiliando o entrevistador. Obviamente, instrumentos monitorados
por computador pularo questes automaticamente, com base nas respostas fornecidas.
3. Colocar vocabulrio opcional em parnteses. Convenes como (dele/dela) ou
(esposo/esposa) podem ser empregadas com naturalidade por entrevistadores se eles
forem alertados por termos em parnteses. Uma conveno similar utiliza todas as letras
maisculas (por exemplo, CNJUGE) quando o entrevistador precisa substituir uma palavra
que no fornecida na prpria questo. A assistncia do computador geralmente oferece
vocabulrio opcional para ser utilizado, em vez de um entrevistador adaptar o vocabulrio
situao.
4. Garantir que todas as palavras que devero ser utilizadas pelo entrevistador esto, de fato,
escritas. Isso inclui no apenas a estruturao das questes, mas transies, introdues
para questes, definies necessrias e explicaes.

Para questionrios autoadministrados, os mesmos princpios se aplicam; isto , a meta principal

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 132 construo do questionrio

facilitar a utilizao do questionrio. O formato de um questionrio autoadministrado o mais


importante. Em contraste com entrevistas, os respondentes no so beneficiados com a prtica, eles
usualmente no recebem a motivao necessria para realizar um bom trabalho e no so
selecionados de acordo com suas habilidades para lidar com questionrios. A seguir sero
apresentados cinco princpios-guia:

1. Um questionrio autoadministrado deve ser, em especial, auto- explicativo. No h a


necessidade da leitura de instrues, uma vez as mesmas no sero lidas adequadamente.
2. Questionrios autoadministrados devem se restringir a respostas objetivas. Checar uma
tabela de respostas, clicar em uma alternativa ou circular um nmero devem ser as nicas
tarefas solicitadas. Quando os respondentes so convidados a responder com suas prprias
palavras, as respostas so geralmente incompletas, vagas, de difcil compreenso e, por
essa razo, dotadas de limitado valor como medidas.
3. importante que no haja uma grande variedade de formatos de questes em questionrios
autoadministrados. Quanto maior o nmero de questes similares, menor a probabilidade de
falhas na compreenso por parte do respondente; e tambm a tarefa se tomar mais fcil
para os respondentes.
4. Um questionrio deve ser elaborado da maneira mais clara e organizada possvel. Reduo
do tamanho de letra (ou outra estratgia para colocar vrias questes em uma nica pgina)
reduz consideravelmente a taxa de resposta em comparao com o mesmo nmero de
questes organizadas para atrair a ateno do leitor, em mais de uma pgina.
5. No aconselhvel fornecer informaes redundantes aos respondentes, atravs de
imagens e perguntas escritas que transmitem a mesma mensagem sobre como proceder.
Se os indivduos podem se confundir sobre o que eles precisam fazer, eles iro. Se esforce
para tornar tudo simples e claro.

A maioria dos princpios listados anteriormente tambm pode ser aplicada em instrumentos
monitorados por computador. Alm disso, auxiliar os respondentes e entrevistadores a lidar com
dificuldades comuns surgidas durante o processo, como encontrar a maneira adequada para corrigir
respostas anteriores ou o que fazer se respondentes desejam ignorar uma questo uma parte
importante no trabalho de elaborao. A chave para evitar todas essas dificuldades localizar os
problemas com antecedncia, por meio de testes. Boas descries de procedimentos de teste so
apresentadas por Dillman; Redline (2004), Tamai; Moore (2004), Hansen; Couper (2004) e Baker,

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 133 construo do questionrio

Crawford e Swinehart (2004).

Pr-testes de campo
Uma vez que o instrumento de levantamento de dados esteja prximo de sua concluso, um
pr-teste de campo do instrumento e dos procedimentos se faz necessrio. O propsito de tais pr-
testes descobrir como os protocolos de coleta de dados e os instrumentos do levantamento de dados
iro funcionar sob circunstncias reais.

Pr-teste e roteiro de entrevista


O pr-teste tradicional realizado por organizaes de pesquisa geralmente consistem em
entrevistadores experientes realizarem de 20 a 50 entrevistas com respondentes retirados de uma
populao semelhante quela que ser includa na pesquisa. Os entrevistadores so solicitados a
desempenhar duas funes nestes pr-testes: Eles so entrevistadores conduzindo o procedimento e
so observadores do processo de coleta de dados que devem alertar os pesquisadores sobre
melhorias necessrias nos instrumentos de levantamento de dados. provavelmente mais tpico deste
processo de retomo de informaes que ele ocorra em reunies de grupo, embora haja casos nos
quais os entrevistadores se dirigem aos pesquisadores individualmente.
Pr-testes como os descritos aqui so essenciais para o processo de elaborao do
levantamento de dados. Uma funo particularmente importante testar a utilidade do instrumento,
tanto as questes quanto os esquemas, da perspectiva dos entrevistadores. Contudo, estes testes
tambm possuem uma srie de limitaes. O padro utilizado pelos entrevistadores para a
identificao de problemas no especificado, e quase certo que os entrevistadores apresentam
inconsistncias no que consideram como problema. Tambm, uma discusso em grupo no o meio
mais aconselhvel para reunir informaes sistemticas sobre a experincia de pr-teste.
Os pesquisadores tm adicionado passos elaborados para tomar a experincia de pr-teste o
mais sistemtica e eficaz possvel. Uma inovao simples solicitar aos entrevistadores que
preencham uma espcie de relatrio sobre cada questo, para compartilh-lo em uma reunio de
grupo posterior. Um relatrio desse tipo solicita aos entrevistadores que avaliem cada questo no que
diz respeito a (a) se ela de fcil leitura, (b) se os respondentes entenderam satisfatoriamente a
questo e (c) se os indivduos responderam s questes adequadamente (Fowler Jr., 1995).

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 134 construo do questionrio

Obviamente, os entrevistadores precisam adivinhar se as questes sero ou no respondidas e


compreendidas; contudo, esta uma tarefa necessria. A vantagem de um formulrio que
entrevistadores so solicitados a voltar sua ateno para esses aspectos sutis da elaborao de
questes, to distintos dos aspectos prticos do instrumento de levantamento de dados, com os quais
eles esto mais familiarizados. Ainda, dispor de entrevistadores que j responderam a esse tipo de
formulrio facilita aos investigadores o resumo de relatrios elaborados pelos entrevistadores, bem
como a identificao de problemas de uma forma eficaz.
A mais importante, e provavelmente de maior utilidade, inovao no que diz respeito ao pr-
teste de campo o uso de gravaes de udio e observao de comportamento para a avaliao de
questes de levantamento de dados. Com a permisso dos respondentes, a qual quase sempre
obtida, toma-se fcil gravar pr-testes de entrevistas feitas tanto pessoalmente quanto por telefone.
Gravadores treinados podem ento escutar essas gravaes e avaliar problemas no processo de
pergunta e resposta de uma maneira satisfatria.
Trs comportamentos tm sido essenciais na identificao de problemas com questes de
levantamento de dados (Fowler e Cannell, 1996; Oksenberg et al., 1991): (a) se o entrevistador realiza
ou no a leitura das questes como foram escritas, (b) se ou no solicitado pelo respon- dente
maiores explicaes a respeito das questes e (c) se o respondente inicialmente fornece uma resposta
inadequada que requere a interveno do entrevistador. Foi constatado que, ou as questes
constantemente produzem comportamentos desse tipo, ou elas no os produzem de forma alguma em
entrevistas; ou seja, h questes que so constantemente mal interpretadas pelos entrevistadores, o
que leva os respondentes a solicitarem maiores explicaes ou a responderem de forma inadequada.
Esse tipo de sistema no identifica todas as questes que so constantemente mal interpretadas pelos
respondentes. No entanto, quando um desses comportamentos ocorre em 15% ou mais de pr-testes
de entrevistas, tem sido demonstrado que ou a questo tende a produzir dados distorcidos, ou se torna
suscetvel influncia do entrevistador (Fowler Jr., 1991; Fowler Jr. eMangione, 1990).
Um benefcio adicional da observao de comportamento de pr-testes de entrevistas que os
resultados so sistemticos e podem ser reproduzidos. Deste modo o processo de avaliao da
questo conduzido de forma alheia a opinies subjetivas de pesquisadores e entrevistadores, e
evidncias concretas e passveis de reproduo so produzidas sobre questes inadequadas.
Arquivos de acompanhamento so a terceira fonte de informao advinda de pr-teste de uma
entrevista monitorada por computador. Quando uma entrevista monitorada por um computador,
possvel recuperar os caminhos seguidos pelo entrevistador durante a entrevista. Tais arquivos podem

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 135 construo do questionrio

identificar situaes nas quais os entrevistadores precisaram voltar para telas e questes anteriores.
Ter de retomar a questes anteriores diminui a produtividade de um entrevistador e geralmente
evidencia que a questo no foi elaborada adequadamente. Observar como funes de auxlio so
utilizadas pode fornecer indcios de onde a ajuda necessria e quo teis as vrias funes de
auxlio so. Novamente, uma informao adicional sobre arquivos de acompanhamento que os
resultados so sistemticos e confiveis (Couper et al., 1997; Hansen e Couper, 2004).

Pr-teste de questionrio autoadministrado


Instrumentos autoadministrados requerem mais pr-testes do que instrumentos de
levantamento de dados administrado por um entrevistador, porque entrevistadores podem solucionar
algumas dificuldades que os pesquisadores no solucionaram ao elaborar o instrumento de
levantamento de dados. Infelizmente, o pr-teste de um instrumento autoadministrado , de certa
forma, de difcil realizao, uma vez que problemas de compreenso e dificuldades para responder
questes so menos evidentes. Embora a observao de como os indivduos preenchem formulrios
ou lidam com o computador seja uma maneira de identificar questes ou instrues pouco claras, ela
no to satisfatria como uma gravao de udio ou a observao de comportamento proporcionada
pelas entrevistas.
O melhor meio de realizar pr-testes de questionrios autoadministrados pessoalmente, com
um grupo de potenciais respondentes. Se for um levantamento de dados baseado em computador, os
respondentes podem fornecer suas respostas por meio de computadores portteis. Primeiramente, eles
devem preencher o questionrio como se j estivessem respondendo ao levantamento de dados.
Ento, o pesquisador pode conduzir a discusso sobre o instrumento. Um dos tpicos , obviamente,
se as instrues foram claras. O segundo tpico se as questes foram claras. O terceiro se houve
problemas em compreender o tipo de respostas exigido ou em fornecer respostas para as questes
como essas (Dillman e Redline, 2004).
Adicionalmente a grupos de teste, a utilizao de um instrumento baseado em computador pode
beneficiar-se de testes contnuos, nos quais alguns respondentes so observados lidando com o
computador e com as questes (Tamai e Moore, 2004). A observao direta ou a gravao em vdeo
podem ser utilizadas para identificar potenciais dificuldades. Novamente, arquivos de acompanhamento
podem ser examinados para identificar problemas operacionais ou lugares visitados pelos responden-
tes para corrigir respostas.

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 136 construo do questionrio

Eliminando os erros de um instrumento assistido por computador


A aplicao de instrumentos de teste em entrevistadores e respondentes pode fornecer
informaes sobre facilidades de uso, mas no demonstra se o protocolo de coleta de dados est
correto ou no. A principal rea de observao, a qual requer maior cuidado, a rea das instrues
puladas.
Uma grande vantagem do auxlio do computador ajudar os respondentes e entrevistadores a
conduzir a entrevista adequadamente: quando ou como cada questo feita relacionado com as
respostas dadas a questes anteriores. Seguramente, a preciso de instrues puladas requer uma
reviso apurada das verses finais dos instrumentos impressos. Contudo, os desafios de checar a
preciso de instrumentos monitorados por computador so muito maiores do que em instrumentos
impressos. O problema que programas de teste no so capazes de perceber quais questes so
puladas e, consequentemente, podem ignorar o fato de que algumas deveriam ter sido respondidas.
Uma anlise apurada de um programa e um detalhado processo de testes so processos importantes.
Todavia, se um instrumento extenso e apresenta eventualidades complexas, esses processos podem
ser inadequados.
Por essa razo, a partir do momento em que um levantamento de dados iniciado, deveria ser
uma prtica padro tabular a distribuio das respostas. Somente por meio da anlise de tais mtodos
um pesquisador pode ter certeza de que as instrues esto desempenhando seu papel corretamente.

Durao dos instrumentos de levantamento


Um dos resultados de um pr-teste adequado descobrir quanto tempo se levar para finalizar
um instrumento de levantamento de dados. O critrio para a durao de uma entrevista deve incluir os
custos, o feito ou taxa de resposta, as limitaes nas habilidades dos respondentes e a motivao para
responder questes. O nvel de abrangncia da durao de um questionrio autoadministrado e o quo
intensamente ele pode afetar os custos e as taxas de resposta variam de acordo com a populao
estudada e/ou com tpico; generalizaes so difceis de ser realizadas. Ressalta-se que tambm
difcil generalizar a durao das entrevistas.
Quando um pesquisador pensa em perguntar mais do que sente que deveria, h duas escolhas
a serem feitas. Ele pode simplesmente excluir questes. O mtodo alternativo disponibilizar
subsees de questes para representar subamostras de respondentes. Esse mtodo aumenta a

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 137 construo do questionrio

complexidade do levantamento de dados e reduz a preciso de estimativas dessas variveis, portanto,


aconselhvel disponibilizar todas as questes de uma s vez. Uma vantagem clara da coleta de
dados assistida por computador a facilidade com que esses mtodos podem ser implementados.

Concluso
Houve um tempo em que o processo de avaliao de questes era considerado uma tarefa
bastante subjetiva, eventualmente subordinada s preferncias de entrevistadores e pesquisadores.
Hoje, sabemos que preciso ir alm. As questes em levantamento de dados devem ter o mesmo
significado para todos os respondentes; responder s questes deve ser uma tarefa que a maioria dos
respondentes possa realizar; e as palavras em um roteiro de entrevistas devem ser adequadas, de
maneira que os entrevistadores possam ser guiados na administrao da entrevista.
Indubitavelmente, no importando o quo clara uma questo possa ser, alguns respondentes
apresentaro dificuldades para a responder e alguns entrevistadores no iro a compreender. H
julgamentos a serem feitos sobre o quo mal elaborada uma questo pode ser, de modo que melhorias
sejam possibilitadas.
Uma parte crtica do processo de elaborao e avaliao de instrumentos de levantamento de
dados coletar informaes sobre a compreenso, sobre a tarefa de responder s questes e sobre
como entrevistadores e respondentes usam os protocolos,a fim de que anlises possam ser feitas a
respeito de possveis modificaes nas questes e nos instrumentos. A avaliao adequada de
questes e instrumentos, antes mesmo da elaborao de uma pesquisa, um elemento crucial para a
prtica de um bom levantamento de dados. um dos meios mais baratos de reduzir erros em
estimativas de levantamentos de dados.
Embora seja trabalhoso definir meios eficientes de avaliar questes, os procedimentos citados
neste texto constituem um apanhado de tcnicas teis que, quando usadas, tero um impacto positivo
nos dados da pesquisa.

EXERCCIOS
Utilize as questes elaboradas no exerccio do Captulo 6 e transforme-as em uma lista de
questes que poderiam ser administradas por um entrevistador em um formulrio padro.
1. Teste cognitivamente as questes e revise-as, se necessrio.
2. Realize um pr-teste com as questes conseguintes. Revise se for preciso.

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 138 construo do questionrio

3. Agora, coloque as mesmas questes no formato autoadministrado. Em seguida, realize


um pr-teste.

Leitura complementar
Presser, S. et al. Methods for testing and evaluating survey questionnaires. Hoboken, NJ: John Wiley,
2004.
Willis, G. Cognitive interviewing. Thousand Oaks, CA: Sage, 2005.

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 139 construo do questionrio

Bibliografia

Beatty, P. C.; Willis, G. B. Research synthesis: the practice of cognitive interviewing. Public Opinion
Quarterly, 2007;71:287-311.
Bradburn, N.; Sudman, S.; Wansink, B. Asking questions: the definitive guide to questionnaire design
for market research, political polls, and health questionnaires (revised edition).San Francisco:
Josse Bass, 2004.
Conrad, F. G.;Blair, J. Sources of errors in cognitive interviewing. Public Opinion Quarterly,
2009;73(1):32-55.
Couper, M. P.; Tourangeau R.; Conrad,F. G.; Crawford, S. What they see is what we get: response
options for web surveys. Social Science Computing Review, 2004;2:111-27.
Couper, M.; Tourangeau, R.; Kenyon, K. Picture this! exploring visual effects in web surveys. Public
Opinion Quarterly, 2004;68:255-66.
Fowler Jr., Floyd J. Pesquisa de levantamento. Porto Alegre: Penso, 2011. Cap.6.
Fowler Jr., Floyd J.Pesquisa de levantamento.Porto Alegre: Penso, 2011. Cap.7.
Geer, John G. What do open-ended questions measure? Public Opinion Quarterly, 1988;52:365-71.
Gilham,M.; Granberg, D. Should we take dont know for an answer?. Public Opinion Quarterly,
1993;57(3)348-57.
Simes, S.; Pereira, M.P. A arte e a cincia de se fazer perguntas. In:Aguiar, N. (ed.). Desigualdades
sociais, redes de sociabilidades e participao poltica. Belo Horizonte: Editora UFMG, 2007.
Sudman, S.; Bradbum, N. M.; Schwarz, N. Implications for questionnaire design and the
conceptualization of the survey interview. In:Thinking about answers: the application of cognitive
processes to survey methodology. San Francisco: Jossey-Bass, 1996.
Sudman, S.; Bradbum, N. M.; Schwarz, N. Methods for determining cognitive processes and
questionnaire problems. In:Thinking about answers: the application of cognitive processes to
survey methodology. San Francisco: Jossey-Bass, 1996.
Willis, G.; DeMaio T.; Harris-Kojetin, B. Is the bandwagon headed to the promised land? Evaluating the
validity of cognitive interviewing techniques. In:Cognition and survey research. New York: John
Willey & Sons, 1999.

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 140 construo do questionrio

Informaes de Contato
Solange Simes
Professora da Eastern Michigan University
Department of Sociology, Criminology and Anthropology
AND
Departament of Womens and Gender Studies

Tel: 1 734 6462562


ssimoes@emich.edu

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados
Aspectos cognitivos da metodologia de survey e a
Pg. 141 construo do questionrio

Refernciascomplementares
Profa. Solange Simes
Eastern Michigan University
713H Pray Harrold Hall
Ypsilanti, MI 48197
Tel1 734 6462562
http://www.fafich.ufmg.br/

Mauro Lucio Jeronymo


Doutorando em Cincia Poltica
Departamento de Cincia Poltica
Fafich UFMG
Tel:(31) 996855438
maurojer@yahoo.com

Ministrio do Desenvolvimento Social e Agrrio MDSA


Secretaria Nacional de Renda de Cidadania SENARC
Ciclo de Treinamento em Metodologias de Anlise de Dados

Das könnte Ihnen auch gefallen