Perguntas vagas, complexas e longas no questionário: como corrigir

Perguntas vagas, complexas ou longas fazem você perder respostas úteis, porque uma pergunta só funciona quando todos os respondentes a entendem do jeito que você quis dizer. Três coisas atrapalham isso: a linguagem complicada demais (jargão, siglas, dupla negação), a pergunta vaga demais (um assunto indefinido, uma palavra como “com frequência”, nenhum período) e a pergunta longa demais (que tenta se explicar, ou uma grade com muitas linhas). Quem não entende pode chutar, pular a pergunta ou desistir, e a resposta a uma pergunta mal entendida parece igual a qualquer outra nos resultados. Cada problema vem com um exemplo reescrito, e duas verificações simples mostram boa parte do que você não enxerga no próprio rascunho: ler as perguntas em voz alta e testá-las com algumas pessoas parecidas com os seus respondentes.

Principais pontos

  • Use palavras do dia a dia: nenhuma sigla sem explicação, nenhuma dupla negação.
  • Diga o assunto, o período e o que contar; quando o número importa, peça uma contagem em vez de “com frequência”.
  • Faça cada pergunta numa frase só, com a definição antes dela ou na descrição, e mantenha as grades com poucas linhas curtas.
  • Leia cada pergunta em voz alta; depois, peça a algumas pessoas parecidas com os seus respondentes que pensem em voz alta ao responder.

Linguagem complicada: jargão, siglas e dupla negação

Uma pergunta é complicada demais quando usa palavras que os seus respondentes não usam ou uma estrutura que eles precisam decifrar antes de responder. O Pew Research Center e a AAPOR, a associação americana de pesquisa de opinião pública, recomendam palavras simples e concretas, que o público da pesquisa entenda.

Adequada para quem? Distribuidor e consumidor julgam isso de jeitos diferentes; a nova versão pergunta sobre a experiência do próprio respondente.

Escreva as siglas por extenso e troque termos técnicos por palavras comuns, como recomenda o Statistics Canada, o órgão oficial de estatística do Canadá: “os treinamentos que a empresa ofereceu”, e não “as ações de T&D”. Palavras que só circulam dentro da empresa, como o codinome de um produto, também são jargão.

A dupla negação pode confundir o respondente, alerta o Pew. Ela costuma aparecer quando uma afirmação negativa encontra uma escala de concordância, e “discordo” vira a negação de outra negação.

Perguntas vagas: assunto indefinido, palavras imprecisas e falta de período

Uma pergunta é vaga quando dois respondentes podem, com razão, entendê-la como duas perguntas diferentes; nesse caso, as respostas não podem ser somadas. O Statistics Canada pede que a pergunta traga todos os detalhes da situação a que se refere: o quê, onde e quando. Palavras precisas e um período definido estão entre as regras básicas para formular perguntas de qualquer questionário.

“O que você acha dos estacionamentos?” pode falar dos lugares livres no centro, do preço ou dos carros parados na calçada. Uma pergunta ambígua como essa precisa nomear a situação:

Ou imagine uma oficina recém-aberta que pergunta: “Com que frequência o seu carro precisou de conserto no ano passado?” Uns contam as idas à oficina, outros os consertos que eles mesmos fizeram, e “ano passado” pode ser o ano civil ou os últimos 12 meses. Para a oficina que faz a pesquisa, só interessam os consertos feitos por profissionais.

Palavras como “com frequência” e “regularmente”, os quantificadores vagos, não têm uma quantidade fixa: num estudo com universitários, o que “com frequência” significava como opção de resposta mudava conforme o assunto da pergunta (Rocconi e colegas, 2020). Numa pergunta, uma palavra assim deixa cada pessoa escolher o próprio limite. Quando você precisa do número que vai apresentar, peça uma contagem num período definido.

Perguntas longas: quando a pergunta tenta se explicar

Uma pergunta longa faz a pessoa ler mais e ainda a deixa tentando descobrir o que entra na conta. A AAPOR recomenda perguntas curtas. Pergunte numa frase só e coloque a definição antes da pergunta ou na descrição dela, que o Survey.com.br mostra logo abaixo do título (no editor, o campo diz “Digite uma descrição extra (opcional)”).

Os exemplos mudam o que as pessoas contam. Num estudo com perguntas sobre alimentação, eles aumentaram as menções aos itens citados, sobretudo quando eram incomuns, e pareceram deixar as respostas mais precisas quando lembravam as pessoas de coisas que elas teriam deixado de fora (Tourangeau e colegas, 2014). Então escolha os exemplos de propósito: os casos que as pessoas costumam esquecer, introduzidos com “como”. Empurrar o respondente para uma resposta é outro problema: a pergunta sugestiva.

Uma grade longa também é uma pergunta longa

Uma pergunta do tipo matriz com muitas linhas e afirmações compridas é uma pergunta longa em outro formato. Numa grade longa, algumas pessoas marcam a mesma opção em todas as linhas (o straight-lining), sinal de que pararam de ler as afirmações. Use uma ideia por linha (duas ideias na mesma linha formam uma pergunta dupla), rótulos curtos, poucas linhas e poucas colunas. Divida uma grade longa por tema e transforme as afirmações principais em perguntas separadas. Como a matriz aparece no celular e o que muda ao dividi-la está no guia sobre matrizes no celular.

Como encontrar perguntas confusas antes de enviar o questionário

Você não enxerga a ambiguidade das próprias perguntas, porque sabe o que quis dizer. Duas verificações encontram muitos desses problemas.

Primeiro, leia cada pergunta em voz alta: frases longas, palavras em que você tropeça e duplas negações aparecem quando são ouvidas. Depois, para cada uma, pergunte: quem responde, sobre o quê, em que período e o que deve contar? Duas pessoas poderiam entendê-la de jeitos diferentes?

Segundo, faça um pré-teste curto das perguntas. A AAPOR recomenda fazê-lo com pessoas parecidas com os seus respondentes e cita as entrevistas cognitivas como uma das formas; segundo o Centro Nacional de Estatísticas de Saúde dos Estados Unidos (NCHS), essas entrevistas mostram como os respondentes entendem as perguntas, pensam nelas e as respondem. Peça a algumas dessas pessoas que respondam pensando em voz alta. Depois de cada resposta, e não antes, pergunte:

Quando duas pessoas entenderem a mesma pergunta de jeitos diferentes, reescreva-a.

A “Visão prévia” do Survey.com.br exibe o questionário do jeito que o respondente verá e não registra respostas; abra-a também no celular. Para medir o tempo num teste com respostas de verdade, veja como testar o questionário com algumas pessoas antes de enviar.

Verificação O que revela Como corrigir
Leia cada pergunta em voz alta Frases longas, tropeços, dupla negação Encurte, divida, use a forma afirmativa
Procure siglas e palavras internas Jargão Escreva por extenso; use as palavras do respondente
Pergunte “sobre o quê, onde e em que período?” Assunto indefinido, falta de período Diga a situação e o período
Sublinhe “com frequência”, “regularmente” e “recentemente” Quantificadores vagos Peça uma contagem num período definido
Conte as frases da própria pergunta Pergunta longa Uma frase só; a definição antes dela ou na descrição
Conte as linhas de cada grade e leia as afirmações Grade longa Menos linhas, mais curtas; divida por tema
Peça a algumas pessoas que pensem em voz alta O que você não enxerga sozinho Reescreva e teste de novo as perguntas alteradas

Conclusão

Perguntas confusas são de três tipos, cada um com uma correção simples: palavras do dia a dia e a forma afirmativa para a linguagem complicada; assunto, período e contagem definidos para as perguntas vagas; uma frase só, com a definição ao lado, para as longas, grades incluídas. Ler as perguntas em voz alta e ouvir algumas pessoas pensando em voz alta ao responder mostram boa parte do que você não vê sozinho.

Modelos de pesquisa e exemplos prontos por tema

Abra um modelo próximo do seu tema e confira cada pergunta do mesmo jeito: um assunto, palavras simples, um período definido.

Ver os modelos

Leia também