O viés do entrevistador, também chamado de efeito ou parcialidade do entrevistador, é a influência de quem pergunta sobre as respostas em pesquisas presenciais e por telefone. Ele age de duas formas: diante de quem ouve, as pessoas dão respostas mais aceitáveis e reagem a quem pergunta, o que puxa os resultados para um lado; e as respostas coletadas pelo mesmo entrevistador se parecem entre si, o que tira precisão dos resultados. O questionário online autoaplicado tira o entrevistador de cena: todos leem as mesmas palavras, e ninguém ouve a resposta. Mas ninguém incentiva a pessoa nem explica uma pergunta, só responde quem está na internet, e as respostas mudam quando a pesquisa troca de modalidade. Este guia é para quem faz entrevistas ou pensa em trocá-las pelo questionário online.
Principais pontos
- Diante de um entrevistador, as pessoas dão respostas mais aceitáveis, e algumas respostas mudam conforme quem entrevista.
- As respostas de um mesmo entrevistador se parecem entre si: os resultados perdem precisão, sem pender para um lado.
- Online não há entrevistador, mas também ninguém incentiva a pessoa ou explica uma pergunta, e menos gente responde.
- Fique com o entrevistador em pesquisas longas ou complexas e para quem não está online; nos outros casos, use o questionário online e procure sinais de pressa.
O que é o viés do entrevistador
O viés do entrevistador é a influência de quem pergunta sobre as respostas: pela presença, pelo jeito de perguntar e por quem ele é. Parte dela é sistemática e empurra as respostas para um lado. A outra é aleatória: as diferenças entre entrevistadores só tiram precisão e, a rigor, se chamam variância do entrevistador, não viés. É a diferença entre viés e erro aleatório.
Primeiro, as pessoas dizem a quem ouve o que soa aceitável: ao telefone, muita gente dá a certas perguntas respostas diferentes das que daria sozinha na internet, observa a AAPOR, a associação americana de pesquisa de opinião pública, nas suas boas práticas. É o viés de desejabilidade social: diante de alguém, a pessoa aumenta o que é bem-visto e diminui o que é malvisto.
Segundo, algumas respostas mudam conforme quem entrevista. Numa pesquisa americana, em algumas perguntas sobre o papel de homens e mulheres, tanto homens quanto mulheres deram respostas mais igualitárias a entrevistadoras; em muitas outras, o gênero de quem entrevistava não fez diferença (Kane e Macaulay, 1993). O efeito é mais provável em perguntas sobre traços visíveis, como gênero ou raça, ou sobre comportamentos que as pessoas preferem não contar, como o consumo de álcool ou drogas (Davis e colegas, 2010).
Terceiro, cada entrevistador pergunta do seu jeito, e as respostas que ele coleta se parecem entre si. A perda de precisão cresce com o número de entrevistas por entrevistador; na Pesquisa Social Europeia (European Social Survey), o tamanho dessa perda variou muito entre os países (Zins e Burgard, 2020).
Como o viés aparece durante a entrevista
Quase sempre, a influência vem de um entrevistador que se afasta do roteiro sem perceber. Veja seis situações típicas (exemplos, não resultados de estudos) e o que muda no questionário online.
| O que acontece | O que dá errado nos dados | No questionário online autoaplicado |
|---|---|---|
| Depois de muitas entrevistas, “Qual é o seu prato preferido neste restaurante?” vira “Qual é o seu prato preferido?” | As respostas deixam de se referir ao restaurante e variam conforme o entrevistador e o horário | Todos leem as mesmas palavras |
| Alguns passageiros ouvem “Como você paga a passagem?”, outros “Que cartão de transporte você usa?” | A segunda forma empurra as pessoas para o cartão; os dois grupos não podem ser comparados | Todos leem as mesmas palavras |
| Um cliente responde “magenta”; a lista tem roxo e rosa, e o entrevistador marca roxo | A leitura do entrevistador toma o lugar da resposta da pessoa | A pessoa escolhe ou escreve a própria palavra em “Outros (especifique)”; depois, uma só pessoa classifica esses textos com uma só regra |
| O entrevistado só faz um gesto com a cabeça ao ouvir “Você gosta de sorvete?” | O entrevistador registra um gesto que ele mesmo interpreta | A pessoa clica na resposta |
| O entrevistador supõe que uma mulher não vai querer trabalho braçal e pula essas perguntas | As respostas refletem a suposição do entrevistador | Todas as perguntas aparecem, ou são puladas só por uma regra de lógica que você definiu |
| O entrevistador lê as opções em voz alta | As pessoas tendem a escolher a última opção que ouviram | As pessoas tendem a escolher as primeiras opções que veem: a ordem pesa nos dois casos |
Por isso os entrevistadores são treinados para ler cada pergunta exatamente como está escrita (veja “Se você trabalha com entrevistadores: como reduzir a influência deles”).
O que o questionário online autoaplicado elimina
Sem entrevistador, todos leem a mesma redação, e ninguém ouve, anota ou interpreta a resposta. Numa grande comparação americana, as entrevistas por telefone tiveram mais erro aleatório, mais respostas com o mínimo de esforço e mais respostas socialmente desejáveis que as de membros de painéis online, acostumados a responder pesquisas (Chang e Krosnick, 2009). Conferidas com os registros de uma universidade, as respostas pela internet a perguntas delicadas foram mais exatas que por telefone (Kreuter, Presser e Tourangeau, 2008).
A influência social, porém, não some. Nesse estudo, algumas pessoas negaram na internet o que os registros mostravam, e a redação das perguntas continua pesando. Alguém por perto, como o garçom ao lado da mesa ou o gerente na sala, traz parte do efeito de volta. Envie o link para que cada um responda sozinho, no próprio aparelho.
Os problemas que surgem sem entrevistador
Online, ninguém mantém a pessoa interessada nem explica uma pergunta, menos gente participa, e as respostas não se comparam diretamente com as de entrevistas.
Ninguém incentiva a pessoa a continuar
Entrevistadores treinados conduzem a pessoa pelas perguntas difíceis e a incentivam a continuar quando o interesse cai (AAPOR). Online, parte das pessoas responde com o mínimo de esforço (satisficing, na literatura): marca “Não sei” ou a opção do meio, pula perguntas, repete a mesma resposta em toda a matriz. Num experimento com calouros de uma universidade belga, quem respondeu pela internet marcou “Não sei” e o meio da escala com mais frequência e pulou mais perguntas do que quem foi entrevistado pessoalmente, e terminou mais rápido (Heerwegh e Loosveldt, 2008). Na comparação americana com o telefone, foi o contrário: os estudos compararam modalidades e pessoas diferentes, e o online não é sempre melhor nem sempre pior. Ofereça “Não sei” só onde essa for uma resposta real.
Ninguém explica a pergunta
O questionário precisa se explicar sozinho. Escreva perguntas que se entendam sem ajuda e uma introdução curta, com instruções de preenchimento.
Quem pode e quem quer responder
O questionário online só chega a quem está na internet e cujo contato você tem, e, em média, menos pessoas respondem online do que em outras modalidades; um entrevistador também consegue convencer quem hesita. Veja os limites do questionário online e lembre que uma taxa de resposta baixa é um alerta, não prova de viés.
As respostas mudam quando a pesquisa troca de modalidade
Quando uma pesquisa com entrevistadores passa para a internet, algumas respostas mudam por causa da modalidade, e não das opiniões, sobretudo em perguntas delicadas ou socialmente carregadas. Informe isso ao comparar com anos anteriores e mantenha a redação e a ordem das perguntas.
Quando o entrevistador ainda é a melhor escolha
Mantenha o entrevistador quando:
- a pesquisa é longa ou complexa e pede uma relação de confiança, cara a cara;
- algumas perguntas pedem ajuda, que o entrevistador dá sem induzir a resposta;
- parte do grupo não está online ou tem dificuldade para ler, como moradores mais velhos de uma cidade pequena;
- ouvir muita gente de um grupo resistente ou difícil de alcançar vale mais que o custo;
- você precisa aprofundar as respostas abertas com novas perguntas.
A entrevista pessoal é a que mais custa, e a por telefone custa mais que a online, porque exige entrevistadores (AAPOR). Se o seu caso for a entrevista de desligamento, veja como usar o questionário online nas entrevistas de desligamento.
Se você trabalha com entrevistadores: como reduzir a influência deles
Regras que mantêm os entrevistadores no roteiro:
- Ler cada pergunta exatamente como está escrita, com as opções de resposta.
- Usar estímulos neutros, como repetir a pergunta ou perguntar “Mais alguma coisa?”, em vez de sugerir uma resposta.
- Nunca demonstrar concordância, surpresa ou desaprovação.
- Treinar com entrevistas de prática e, depois, observar algumas entrevistas ou voltar a contatar alguns entrevistados para conferir o trabalho.
- Distribuir as entrevistas entre mais entrevistadores, em vez de concentrar muitas em poucos.
Questionário online no Survey.com.br: as verificações que substituem o entrevistador
Online, escreva perguntas que ninguém precise interpretar e, depois, procure sinais de pressa.
- Se a lista pode não cobrir todas as respostas, escolha “como campo de texto” em “Mostrar a opção Outros”: a pessoa escreve em “Outros (especifique)”, e os textos aparecem em “Outras respostas”, nos resultados.
- Marque “Resposta obrigatória” só quando, sem aquela resposta, o questionário da pessoa perde o valor, e nunca em perguntas delicadas, que pedem a opção “Prefiro não responder”.
- Em “Respostas individuais”, cada resposta mostra o “Tempo de resposta” ao lado da média do questionário. Um tempo muito abaixo da média, com a mesma resposta em todas as linhas das matrizes, sugere pressa. Mas a média inclui formulários deixados abertos antes do envio: compare com o tempo que você leva para ler as perguntas e examine essas respostas, sem excluí-las só pelo tempo.
- Na mesma página, “Respostas puladas” conta também as perguntas que uma regra de lógica ocultou ou pulou: com lógica, olhe só as perguntas que todos viram.
- Em “Resumo”, a “Taxa de conclusão” é o percentual de quem terminou entre todos os que começaram.
Prometa confidencialidade, não anonimato: diga que os resultados serão divulgados só de forma agregada, sem mostrar à parte grupos com menos de 10 pessoas (o Survey.com.br não esconde grupos pequenos; quem confere a contagem é você). Com o rastreamento de respostas ligado (ele vem desligado por padrão), o convite por e-mail associa cada resposta ao e-mail que o recebeu e avisa isso ao destinatário.
Resumo
Quem pergunta muda as respostas: pelo que as pessoas dizem a quem ouve, por quem é o entrevistador e pelo jeito de cada um perguntar. Online, essa influência some, mas entram as respostas com o mínimo de esforço, um grupo de respondentes menor e diferente e uma quebra em relação às entrevistas anteriores. Escolha pelas suas perguntas e pelo seu público; online, escreva opções que ninguém precise interpretar e procure sinais de pressa.
Se você ouve clientes de restaurante, comece pelo modelo abaixo.
Modelo pronto: pesquisa de satisfação para restaurante
O modelo tem 7 perguntas. O cliente responde sozinho, no próprio celular, pelo QR code na mesa ou na conta.
Ver o modelo