Os vieses de quem lê os dados são bem conhecidos. Os vieses do respondente, os de quem produz o dado, agem antes: nenhuma estatística posterior conserta o que já chegou torto.
Na Clínica Aurora
O coordenador mais novo da Clínica Aurora, rede de clínicas médicas, queria mostrar serviço e resolveu reforçar a medição por conta própria: passou uma semana na saída dos consultórios com uma prancheta, colhendo avaliações paciente a paciente, com sorriso e caneta em punho. Resultado: média 4,9. Mandou no grupo de coordenadores com três foguetes.
Mari Ferreira, consultora da Solvis que acompanha a conta da Aurora, abriu na mesma tela o número do totem da mesma unidade, na mesma semana: 4,1.
— Alguém aí está mentindo — disse o coordenador, meio rindo, meio ofendido.
— Ninguém está mentindo — respondeu Mari, com a sobrancelha erguida de quem já tinha visto esse gráfico antes. — Mas pense no que é dizer “achei ruim”, olhando nos olhos, dentro da clínica que cuida da sua saúde. Uma dessas duas pesquisas está medindo outra coisa. Quer descobrir qual?
O outro lado da balança: os vieses do respondente
Os atalhos mentais de quem analisa (confirmação, ancoragem, sobrevivência) são só metade do problema. Há uma segunda família de vieses, que age antes, dentro da cabeça de quem responde. Eles distorcem o dado na origem, e nenhuma estatística posterior conserta o que já chegou torto (artigo Anatomia de uma boa pergunta: viés na entrada, lixo na saída).
A boa notícia: são conhecidos, catalogados há décadas pela metodologia de pesquisa, e quase todos têm antídoto de projeto. Eis os sete que mais atacam pesquisas de satisfação.
1. Desejabilidade social: a resposta que fica bem
As pessoas ajustam respostas para parecer (e se sentir) bem: mais generosas, mais saudáveis, menos reclamonas do que são. Em satisfação, o efeito clássico é a nota-gentileza: o cliente que não quer “prejudicar a moça do caixa” e dá 5 para uma experiência 3.
O efeito cresce com a presença humana: pesquisa respondida na frente de um entrevistador (ou do próprio atendente) infla sistematicamente as notas, fenômeno medido em décadas de comparações entre modos de coleta. Antídoto de projeto: anonimato real e autoatendimento. O respondente sozinho diante da tela diz mais verdade do que diante de uma pessoa. É um argumento científico direto a favor do totem contra a prancheta do promotor. E nunca peça a avaliação através de quem está sendo avaliado (“dá uma notinha pra mim?”).
2. Aquiescência: a tendência a concordar
Já apresentada nos artigos Anatomia de uma boa pergunta e Escala Likert: diante de uma afirmação, parte das pessoas concorda por padrão, qualquer que seja o conteúdo. Quando dá, prefira escalas de avaliação às de concordância e formule afirmações neutras. Em questionários longos, vale alternar o sentido das afirmações para flagrar quem concorda com tudo.
3. Halo na resposta: uma impressão pinta todas as notas
O mesmo efeito halo que distorce quem analisa, agora do lado de lá: uma impressão dominante (o atendente simpático, a fila revoltante) contamina a avaliação de todos os itens. O cliente encantado com a vendedora dá 5 até para a limpeza do banheiro em que não entrou. Sinal de alerta na análise: notas idênticas em todos os itens, sem variação. Antídotos: perguntas específicas e concretas em vez de genéricas (“a fila andou rápido?” sofre menos halo que “avalie o atendimento”), o “não sei/não usei” como saída honesta (artigo Anatomia de uma boa pergunta), e a leitura por distribuição, que revela o bloco de respostas em linha reta.
4. Recência e pico: a memória edita a experiência
A memória não guarda a média da experiência; guarda o pico e o final (a regra do pico-fim, documentada por Kahneman e Redelmeier). Uma hora de jantar impecável com dez minutos finais de espera pela maquininha vira, na lembrança, “demorou”. E quanto mais tempo passa, mais a edição avança (artigo O momento da verdade: Ebbinghaus). Antídotos: coletar no momento (a resposta de agora é menos editada) e saber o que se está medindo: a pesquisa transacional colhe a experiência; a relacional, semanas depois, colhe a memória da experiência (artigo Tipos de pesquisa). As duas são informação, mas não a mesma informação.
5. Estilos de resposta: cada pessoa tem uma régua
Há quem nunca dê nota máxima (“10 é só pra Deus”) e quem dê 10 para tudo que não ofende. Há inclusive padrões culturais documentados: populações inteiras mais propensas aos extremos ou ao centro da escala. Entre lojas de perfis demográficos muito diferentes, parte da diferença de nota diz mais sobre a régua de cada público do que sobre a experiência. Antídotos: rótulos verbais em todos os pontos (artigo Escala Likert, que encurtam a variação de interpretação), comparar cada unidade com ela mesma no tempo antes de compará-la com as outras, e ligas de comparáveis (artigo Comparações justas).
6. Auto-seleção: o viés de quem aparece
O mais estatístico dos vieses de respondente, já dissecado no artigo Amostra (Literary Digest): quem escolhe responder não representa quem não escolheu. Os extremos (encantados e furiosos) respondem mais; o meio silencioso, que é a maioria, some. A defesa está na coleta no fluxo natural da experiência, por onde todo perfil passa, e na fricção mínima, porque cada segundo de esforço a mais filtra mais gente do meio. Monitorar a taxa de resposta, e não só as notas, é o que revela a saúde da coleta.
7. Vieses embutidos no enunciado: quando o autor sabota
Os três sabotadores que a redação instala dentro da pergunta:
- Pergunta tendenciosa: já carrega a resposta (“Você concorda que melhorou?”, artigo Anatomia de uma boa pergunta, fratura nº 1).
- Dupla negação: “Você discorda que o atendimento não foi ruim?” O respondente erra a direção da escala sem perceber que errou. Regra: enuncie sempre no positivo.
- Âncora indevida: a mesma ancoragem que distorce quem analisa, plantada na pergunta. “Quanto tempo esperou: até 5, 10, 20 ou mais de 30 minutos?” As opções ensinam o que é “normal” e puxam a estimativa. Faixas de resposta são uma declaração de expectativas; desenhe-as neutras, ou pergunte aberto.
A tabela de bolso
| Viés | O que faz | Antídoto principal |
|---|---|---|
| Desejabilidade social | Nota-gentileza | Anonimato, autoatendimento |
| Aquiescência | “Concordo” com tudo | Avaliação em vez de concordância |
| Halo | Uma impressão pinta tudo | Perguntas concretas + “não usei” |
| Recência/pico | Memória editada | Coletar no momento |
| Estilos de resposta | Cada um com sua régua | Rótulos verbais; comparar no tempo |
| Auto-seleção | Só os extremos aparecem | Coleta no fluxo, fricção mínima |
| Enunciado viciado | A pergunta sopra a resposta | Redação neutra, positiva, sem âncora |
Por que isso importa
Metade desses vieses é atenuada por arquitetura de coleta: anonimato, momento certo, fricção mínima, todos os perfis. Saber nomear os vieses é saber explicar, com ciência, por que a coleta presencial no momento da experiência não é um detalhe operacional: é o tratamento da doença que arruína as outras pesquisas.
De volta à Aurora
Na Aurora, o mistério das duas médias se resolveu sem culpado. Diante do coordenador sorridente, prancheta na mão, os pacientes davam a nota-gentileza: desejabilidade social em estado puro, com o agravante clínico de que ninguém quer melindrar quem vai cuidar dele de novo na próxima consulta. Sozinhos diante do totem, contavam a outra história, a que servia para gerenciar.
O coordenador aposentou a prancheta sem aposentar o gesto: continuou circulando na recepção, agora para conversar, não para medir. A medição ficou com o anonimato. E a sobrancelha da Mari virou critério da casa: quando dois números discordarem, antes de perguntar qual está certo, perguntar como cada um foi colhido.
O resumo de uma frase (teste Feynman)
“Entre a experiência vivida e o dado no painel há uma pessoa: gentil, esquecida, com régua própria e vontade de agradar; desenhar pesquisa é proteger a verdade dela mesma.”
Fontes e leituras recomendadas
- PAULHUS, Delroy L. “Measurement and Control of Response Bias”. In: ROBINSON, J. et al. (org.). Measures of Personality and Social Psychological Attitudes. Academic Press, 1991. (O mapa dos vieses de resposta, incluindo desejabilidade social.)
- REDELMEIER, Donald A.; KAHNEMAN, Daniel. “Patients’ Memories of Painful Medical Treatments”. Pain, v. 66, 1996. (O experimento clássico da regra do pico-fim.)
- KROSNICK, Jon A. “Survey Research”. Annual Review of Psychology, v. 50, 1999. (Aquiescência, satisficing, efeitos de modo de coleta.)
- BAUMGARTNER, Hans; STEENKAMP, Jan-Benedict. “Response Styles in Marketing Research: A Cross-National Investigation”. Journal of Marketing Research, v. 38, 2001. (Estilos de resposta entre culturas.)
- PODSAKOFF, Philip M. et al. “Common Method Biases in Behavioral Research”. Journal of Applied Psychology, v. 88, 2003. (A revisão de referência sobre vieses de método.)
- TOURANGEAU, Roger; YAN, Ting. “Sensitive Questions in Surveys”. Psychological Bulletin, v. 133, 2007. (Desejabilidade social e o efeito do modo de coleta.)
