Perguntas vagas, complexas ou longas fazem você perder respostas úteis, porque uma pergunta só funciona quando todos os respondentes a entendem do jeito que você quis dizer. Três coisas atrapalham isso: a linguagem complicada demais (jargão, siglas, dupla negação), a pergunta vaga demais (um assunto indefinido, uma palavra como “com frequência”, nenhum período) e a pergunta longa demais (que tenta se explicar, ou uma grade com muitas linhas). Quem não entende pode chutar, pular a pergunta ou desistir, e a resposta a uma pergunta mal entendida parece igual a qualquer outra nos resultados. Cada problema vem com um exemplo reescrito, e duas verificações simples mostram boa parte do que você não enxerga no próprio rascunho: ler as perguntas em voz alta e testá-las com algumas pessoas parecidas com os seus respondentes.
Principais pontos
- Use palavras do dia a dia: nenhuma sigla sem explicação, nenhuma dupla negação.
- Diga o assunto, o período e o que contar; quando o número importa, peça uma contagem em vez de “com frequência”.
- Faça cada pergunta numa frase só, com a definição antes dela ou na descrição, e mantenha as grades com poucas linhas curtas.
- Leia cada pergunta em voz alta; depois, peça a algumas pessoas parecidas com os seus respondentes que pensem em voz alta ao responder.
Linguagem complicada: jargão, siglas e dupla negação
Uma pergunta é complicada demais quando usa palavras que os seus respondentes não usam ou uma estrutura que eles precisam decifrar antes de responder. O Pew Research Center e a AAPOR, a associação americana de pesquisa de opinião pública, recomendam palavras simples e concretas, que o público da pesquisa entenda.
- Em vez de: “Você considera adequada a distribuição de bebidas de baixo teor alcoólico com aroma de fruta?”
- Pergunte: “É fácil ou difícil encontrar cerveja com sabor de fruta nas lojas perto de você?” (de “Muito fácil” a “Muito difícil”, mais “Não procuro esse tipo de cerveja”, para que quem nunca procura não chute)
Adequada para quem? Distribuidor e consumidor julgam isso de jeitos diferentes; a nova versão pergunta sobre a experiência do próprio respondente.
Escreva as siglas por extenso e troque termos técnicos por palavras comuns, como recomenda o Statistics Canada, o órgão oficial de estatística do Canadá: “os treinamentos que a empresa ofereceu”, e não “as ações de T&D”. Palavras que só circulam dentro da empresa, como o codinome de um produto, também são jargão.
A dupla negação pode confundir o respondente, alerta o Pew. Ela costuma aparecer quando uma afirmação negativa encontra uma escala de concordância, e “discordo” vira a negação de outra negação.
- Em vez de: “Você concorda ou discorda: o refeitório não deveria deixar de servir refeição quente.”
- Pergunte: “O refeitório deve continuar servindo refeição quente ou deixar de servir?” (“Continuar servindo” / “Deixar de servir”)
Perguntas vagas: assunto indefinido, palavras imprecisas e falta de período
Uma pergunta é vaga quando dois respondentes podem, com razão, entendê-la como duas perguntas diferentes; nesse caso, as respostas não podem ser somadas. O Statistics Canada pede que a pergunta traga todos os detalhes da situação a que se refere: o quê, onde e quando. Palavras precisas e um período definido estão entre as regras básicas para formular perguntas de qualquer questionário.
“O que você acha dos estacionamentos?” pode falar dos lugares livres no centro, do preço ou dos carros parados na calçada. Uma pergunta ambígua como essa precisa nomear a situação:
- Pergunte: “Num dia útil comum, é fácil ou difícil para você encontrar lugar para estacionar no centro da cidade?” (de “Muito fácil” a “Muito difícil”, mais “Não estaciono no centro”)
Ou imagine uma oficina recém-aberta que pergunta: “Com que frequência o seu carro precisou de conserto no ano passado?” Uns contam as idas à oficina, outros os consertos que eles mesmos fizeram, e “ano passado” pode ser o ano civil ou os últimos 12 meses. Para a oficina que faz a pesquisa, só interessam os consertos feitos por profissionais.
- Pergunte: “Nos últimos 12 meses, quantas vezes você levou o carro para consertar numa oficina ou centro automotivo? Não conte revisões de rotina nem consertos que você mesmo fez.”
Palavras como “com frequência” e “regularmente”, os quantificadores vagos, não têm uma quantidade fixa: num estudo com universitários, o que “com frequência” significava como opção de resposta mudava conforme o assunto da pergunta (Rocconi e colegas, 2020). Numa pergunta, uma palavra assim deixa cada pessoa escolher o próprio limite. Quando você precisa do número que vai apresentar, peça uma contagem num período definido.
- Em vez de: “Você pratica exercícios regularmente?”
- Pergunte: “Nos últimos 7 dias, em quantos dias você fez pelo menos 30 minutos de esporte, caminhada rápida ou bicicleta?” (de 0 a 7)
Perguntas longas: quando a pergunta tenta se explicar
Uma pergunta longa faz a pessoa ler mais e ainda a deixa tentando descobrir o que entra na conta. A AAPOR recomenda perguntas curtas. Pergunte numa frase só e coloque a definição antes da pergunta ou na descrição dela, que o Survey.com.br mostra logo abaixo do título (no editor, o campo diz “Digite uma descrição extra (opcional)”).
- Em vez de: “A nossa próxima pergunta diz respeito às atividades domésticas que exigem esforço físico. Por atividades que exigem esforço físico podemos citar: limpar a piscina, cortar grama, mudar móveis de lugar etc. Em uma semana, quantas vezes você faz atividades que exigem esforço físico?”
- Pergunte: “Pense em trabalhos físicos em casa ou no quintal que deixam você ofegante, como capinar, carregar sacos de cimento ou mudar móveis de lugar. Nos últimos 7 dias, em quantos dias você fez esse tipo de trabalho por 10 minutos ou mais sem parar?”
Os exemplos mudam o que as pessoas contam. Num estudo com perguntas sobre alimentação, eles aumentaram as menções aos itens citados, sobretudo quando eram incomuns, e pareceram deixar as respostas mais precisas quando lembravam as pessoas de coisas que elas teriam deixado de fora (Tourangeau e colegas, 2014). Então escolha os exemplos de propósito: os casos que as pessoas costumam esquecer, introduzidos com “como”. Empurrar o respondente para uma resposta é outro problema: a pergunta sugestiva.
Uma grade longa também é uma pergunta longa
Uma pergunta do tipo matriz com muitas linhas e afirmações compridas é uma pergunta longa em outro formato. Numa grade longa, algumas pessoas marcam a mesma opção em todas as linhas (o straight-lining), sinal de que pararam de ler as afirmações. Use uma ideia por linha (duas ideias na mesma linha formam uma pergunta dupla), rótulos curtos, poucas linhas e poucas colunas. Divida uma grade longa por tema e transforme as afirmações principais em perguntas separadas. Como a matriz aparece no celular e o que muda ao dividi-la está no guia sobre matrizes no celular.
Como encontrar perguntas confusas antes de enviar o questionário
Você não enxerga a ambiguidade das próprias perguntas, porque sabe o que quis dizer. Duas verificações encontram muitos desses problemas.
Primeiro, leia cada pergunta em voz alta: frases longas, palavras em que você tropeça e duplas negações aparecem quando são ouvidas. Depois, para cada uma, pergunte: quem responde, sobre o quê, em que período e o que deve contar? Duas pessoas poderiam entendê-la de jeitos diferentes?
Segundo, faça um pré-teste curto das perguntas. A AAPOR recomenda fazê-lo com pessoas parecidas com os seus respondentes e cita as entrevistas cognitivas como uma das formas; segundo o Centro Nacional de Estatísticas de Saúde dos Estados Unidos (NCHS), essas entrevistas mostram como os respondentes entendem as perguntas, pensam nelas e as respondem. Peça a algumas dessas pessoas que respondam pensando em voz alta. Depois de cada resposta, e não antes, pergunte:
- “O que ‘regularmente’ quer dizer para você aqui?”
- “O que você contou?”
- “Em que período você pensou?”
- “Teve alguma palavra de que você não tinha certeza?”
Quando duas pessoas entenderem a mesma pergunta de jeitos diferentes, reescreva-a.
A “Visão prévia” do Survey.com.br exibe o questionário do jeito que o respondente verá e não registra respostas; abra-a também no celular. Para medir o tempo num teste com respostas de verdade, veja como testar o questionário com algumas pessoas antes de enviar.
| Verificação | O que revela | Como corrigir |
|---|---|---|
| Leia cada pergunta em voz alta | Frases longas, tropeços, dupla negação | Encurte, divida, use a forma afirmativa |
| Procure siglas e palavras internas | Jargão | Escreva por extenso; use as palavras do respondente |
| Pergunte “sobre o quê, onde e em que período?” | Assunto indefinido, falta de período | Diga a situação e o período |
| Sublinhe “com frequência”, “regularmente” e “recentemente” | Quantificadores vagos | Peça uma contagem num período definido |
| Conte as frases da própria pergunta | Pergunta longa | Uma frase só; a definição antes dela ou na descrição |
| Conte as linhas de cada grade e leia as afirmações | Grade longa | Menos linhas, mais curtas; divida por tema |
| Peça a algumas pessoas que pensem em voz alta | O que você não enxerga sozinho | Reescreva e teste de novo as perguntas alteradas |
Conclusão
Perguntas confusas são de três tipos, cada um com uma correção simples: palavras do dia a dia e a forma afirmativa para a linguagem complicada; assunto, período e contagem definidos para as perguntas vagas; uma frase só, com a definição ao lado, para as longas, grades incluídas. Ler as perguntas em voz alta e ouvir algumas pessoas pensando em voz alta ao responder mostram boa parte do que você não vê sozinho.
Modelos de pesquisa e exemplos prontos por tema
Abra um modelo próximo do seu tema e confira cada pergunta do mesmo jeito: um assunto, palavras simples, um período definido.
Ver os modelos