Um banco de perguntas de satisfação é um catálogo curado, não um questionário. Escolha poucas, escolha bem. Na Academia Ritmo Às 23h11, Fábio, dono da Academia Ritmo, rede de academias com três unidades, mandou para Mari, a consultora que atende a conta, o anexo de que estava visivelmente orgulhoso: "Pesquisa nova da unidade do bairro Alto. Fiz do zero, ficou enxuta!". Nove perguntas, criadas naquela noite, na inspiração. Mari leu na manhã seguinte com o café e o catálogo aberto do lado. Das nove, sete tropeçavam em defeitos já catalogados com nome e sobrenome: uma dupla ("estrutura e atendimento"), duas induzidas ("você concorda que…"), uma escala assimétrica, duas genéricas demais para gerar conserto, e uma pedindo CPF sem finalidade. As duas restantes eram boas… e já existiam, melhor redigidas e testadas por meses, no banco de perguntas. A resposta dela coube numa linha: "Você reinventou a roda, e ela saiu quadrada em sete lugares. Vem cá que eu te mostro a prateleira." Como usar este banco de perguntas de satisfação (leia antes de copiar) Este artigo é diferente dos demais da série: é um catálogo de consulta para apoiar quem está montando ou revisando um questionário de satisfação. Use as perguntas como referência, não como um manual imutável e inegociável. A ideia é cobrir a maioria dos casos, mas nenhuma listagem simples trata a totalidade deles. Três avisos inegociáveis: Formato sugerido entre colchetes: [E] escala de satisfação/concordância · [0-10] NPS · [S/N] binária · [M] múltipla escolha/caixas · [A] aberta. A. As três âncoras (métricas centrais) B. Confiabilidade: o prometido foi cumprido C. Presteza: agilidade e disposição D. Segurança: competência e confiança E. Empatia: atenção individual F. Tangíveis: ambiente e estrutura G. Produto (varejo e alimentação) H. Esforço: fluxos de resolução (CES) I. Contexto e segmentação (usar com parcimônia; atenção à LGPD) J. Intenção e relação K. Abertas: as que descobrem o que não sabemos perguntar Três montagens de exemplo (para roubar) Fluxo varejo, 20 segundos: 1 → 3 (condicional se nota baixa, em formato M com as dimensões B–F como opções) → 24 → 47 (opcional). Fluxo alimentação, 25 segundos: 1 → 32 → 9 → 3 (M condicional) → 49 (opcional). Fluxo pós-resolução de problema, 15 segundos: 34 → 36 → 47 (opcional). Repare no padrão: uma âncora, uma ou duas específicas da decisão do momento, um diagnóstico condicional, uma aberta opcional. É o funil de perguntas em ação: do geral ao específico, do barato ao caro. De volta à Ritmo Na Ritmo, a pesquisa do bairro Alto foi remontada em vinte minutos: não escrita, escolhida. Três âncoras do catálogo, duas perguntas da dimensão que a unidade precisava vigiar (limpeza do vestiário, a dor clássica de academia), uma aberta no fim. Cada pergunta com histórico, redação testada e, de brinde, comparabilidade com as outras unidades. Fábio, convertido, virou o maior fiscal da prateleira: "pergunta nova só quando o banco não tem, e aí ela entra no banco depois de testada". A energia das 23h dele continuou existindo; só mudou de alvo: em vez de redigir perguntas na inspiração, passou a caçar decisões que estavam sem pergunta para alimentá-las. O resumo de uma frase (teste Feynman) "Um banco de perguntas é como uma farmácia: o valor não está em tomar tudo, está em saber exatamente qual remédio o caso pede." Fontes e leituras recomendadas As perguntas foram formuladas segundo as diretrizes metodológicas já referenciadas na série: BRADBURN, Norman; SUDMAN, Seymour; WANSINK, Brian. Asking Questions: The Definitive Guide to Questionnaire Design. Jossey-Bass, 2004. PARASURAMAN, A.; ZEITHAML, Valarie A.; BERRY, Leonard L. "SERVQUAL". Journal of Retailing, v. 64, 1988. (Estrutura dimensional das seções B–F.) DIXON, Matthew; FREEMAN, Karen; TOMAN, Nicholas. "Stop Trying to Delight Your Customers". Harvard Business Review, jul.–ago. 2010. (Seção H.) REICHHELD, Frederick F. "The One Number You Need to Grow". Harvard Business Review, dez. 2003. (Pergunta 2.) ICC/ESOMAR. Código Internacional (voluntariedade e minimização de dados — seção I).
O cardápio de perguntas: os tipos que existem e quando usar cada um
Todo um dos tipos de pergunta de pesquisa cobra um preço em atenção: saiba o que você está comprando com ele. No Restaurante Farol O totem novo na saída do Restaurante Farol, rede com cinco lojas, estreou ambicioso: logo depois da nota, três perguntas abertas em sequência: "o que mais gostou?", "o que podemos melhorar?", "deixe sua sugestão". Caio, o gerente da loja principal, queria riqueza; o desenho prometia. O painel da primeira quinzena contou outra história: seis em cada dez clientes abandonavam na segunda pergunta aberta. Bolsa numa mão, filho na outra, fila atrás: as respostas que sobravam eram "tudo ótimo", "nada", "ok". Teclado de pressa, polegar cansado. Mari, consultora de pesquisa de satisfação, resumiu o diagnóstico diante do funil de abandono: — Cada pergunta custa segundos da atenção de quem responde, e o orçamento na saída de um mercado é de meio minuto, com sorte. Você montou um cardápio só de prato caro. Antes do cardápio, a conta Um bom questionário depende de saber redigir uma boa pergunta, mas depende tanto quanto de escolher o tipo certo, porque cada formato de pergunta é uma ferramenta com custo e benefício próprios. O custo se paga sempre do mesmo jeito: com a atenção do respondente. E no mundo do ponto de venda (cliente em pé, no caminho da saída, celular no bolso vibrando), o orçamento é de segundos. A regra que organiza tudo: quanto mais rica a resposta que o formato promete, mais atenção ele cobra. O ofício está em montar o cardápio que extrai o máximo de informação dentro do orçamento. Vale parar um parágrafo nesse custo, porque ele é fácil de subestimar. A atenção do respondente se parece com dinheiro em três pontos e difere em um quarto ponto. Como dinheiro, é finita: o que uma pergunta gasta falta para a seguinte. Como dinheiro, é cobrada na hora, use você a resposta ou não: a pergunta cujo relatório ninguém abre custa o mesmo que a pergunta que muda uma decisão, só que sem devolver nada. E, como dinheiro, tem dono: o orçamento é do cliente, que empresta por cortesia, sem dever nada e sem prometer a próxima parcela. A diferença é que esse orçamento não se repõe sozinho; ele encolhe com o mau uso. Quem abandonou um questionário comprido hoje aprende a não começar o de amanhã. A literatura chama isso de fadiga de pesquisa; na prática, é queima de base: o questionário ganancioso não encarece só a coleta desta semana, encarece todas as próximas. É com essa conta na cabeça que se lê o cardápio a seguir, do mais barato ao mais caro. Tipos de pergunta de pesquisa econômicos (1 toque, 1 segundo) 1. Escolha binária (sim/não)"Você encontrou o que procurava?" A pergunta mais barata que existe, e subestimada. Perfeita para fatos objetivos e triagem: um "não" pode disparar uma pergunta seguinte ("o que faltou?"). Limite óbvio: zero nuance. 2. Escala visual (carinhas, estrelas, corações)A avaliação de 3 ou 5 pontos em linguagem universal: atravessa idioma, idade e escolaridade, por isso é a rainha do ponto de venda. Pelo mesmo preço da binária (um toque), compra um degrau de nuance. Toda a ciência da escala Likert se aplica: simetria, ordem consistente, um item por tela. 3. Avaliação numérica (0–10, 1–5)A base do NPS e do CSAT. Barata, mas com pegadinha cultural: sem rótulos, cada pessoa inventa sua régua (para muita gente, "7 está ótimo"; para o NPS, 7 é neutro). Rotule as âncoras no mínimo. 4. Escala Likert (concordância)"O ambiente estava limpo: concordo/discordo." Mede atitudes e percepções específicas com custo baixo. Os intermediários (alguns segundos, mais riqueza) 5. Múltipla escolha (uma resposta)"Como você conheceu a loja?" Rápida e tabulável, mas repare onde está o preço: não no toque, e sim na lista. O cliente paga uma leitura por opção antes de escolher, então cada alternativa a mais é um item a mais na conta. Dois cuidados: opções mutuamente exclusivas e completas (com "outro" como válvula), e atenção ao viés de ordem: em telas, as pessoas tendem a favorecer as primeiras opções da lista (efeito de primazia, documentado por Krosnick). Quando a ordem não tem lógica natural, rotacione. 6. Caixas de seleção (múltiplas respostas)"O que motivou sua nota? (marque todos)" É o formato ideal para a pergunta-diagnóstico logo após uma avaliação negativa. Mais rica que a escolha única, um pouco mais cara em atenção. Limite prático no totem: até 6 opções visíveis sem rolagem. 7. Ranking (ordenar preferências)"Ordene do mais ao menos importante: preço, atendimento, variedade…" Informação valiosa (força trade-off, coisa que escala não faz: na escala, tudo pode ser "muito importante"). Mas é dos formatos mais caros cognitivamente: ordenar 6 itens exige 15 comparações mentais. Em autoatendimento rápido, use raramente e com poucos itens; em pesquisas mais profundas de mercado, é onde formatos avançados (como MaxDiff) entram. 8. Matriz (grade de itens × escala)Várias afirmações avaliadas na mesma escala, em tabela. É o formato que mais engana na etiqueta: parece uma pergunta só, mas cobra por linha. Eficiente no papel e no desktop; no celular e no totem é armadilha: favorece straightlining (marcar tudo igual para acabar) e abandono. Prática recomendada: desmembrar a matriz em telas de um item. Mesmo conteúdo, custo por gole. Os premium (custam caro, pagam diferente) 9. Pergunta aberta (texto livre)"O que podemos melhorar?" O formato mais rico que existe: captura o que você não sabia perguntar, a categoria de problema que nenhuma múltipla escolha previu. E o mais caro: digitar exige tempo e disposição, então a taxa de resposta despenca e quem responde é um recorte enviesado (os mais motivados). Uso profissional: sempre opcional, sempre depois das fechadas, e uma só. A dupla de ouro do diagnóstico é fechada + aberta: a nota diz quanto, o comentário diz por quê. 10. Campos de dado (e-mail, telefone, idade)Tecnicamente perguntas, na prática um contrato: o cliente entrega identificação. Custo altíssimo em confiança: cada campo desses reduz respostas e aciona deveres legais (LGPD: minimização e finalidade). Só peça o que tem uso definido, sempre
Escala Likert: a régua de 90 anos que quase todo mundo usa errado
"Concordo totalmente" que você já respondeu uma escala Likert, mas montar uma boa é outra história. Nas Lojas Andorinha O RH das Lojas Andorinha, rede de moda com trinta lojas, lançou sua primeira pesquisa de clima com orgulho e uma escala desenhada em casa: quatro pontos, "para forçar posição", com os rótulos "ruim", "bom", "muito bom" e "excepcional". O resultado saiu cor-de-rosa: 91% do time entre "bom" e "excepcional", slide comemorativo pronto. A analista de dados da rede leu a escala antes de ler o resultado, e pediu para segurarem o slide. Três opções positivas contra uma negativa; nenhum meio honesto para quem estava "nem bem, nem mal"; e o degrau entre "ruim" e "bom" engolindo, num salto só, todo mundo que estava apenas insatisfeito, sem estar revoltado. A pesquisa não tinha medido o clima da rede. Tinha medido o clima da régua, e a régua nascera sorridente. A escala Likert: o problema que um psicólogo resolveu em 1932 Como se mede uma opinião? Um termômetro mede temperatura, uma balança mede peso, mas não existe aparelho que se aponte para uma pessoa e leia "satisfação: 7,3". Em 1932, o psicólogo americano Rensis Likert propôs, em sua tese de doutorado, uma solução tão simples que parece óbvia hoje: apresentar uma afirmação e pedir que a pessoa marque seu grau de concordância numa régua simétrica: "O atendimento da loja resolve meus problemas rapidamente."( ) Discordo totalmente ( ) Discordo ( ) Neutro ( ) Concordo ( ) Concordo totalmente Noventa anos depois, a escala Likert é o instrumento mais usado da pesquisa de opinião mundial, e um dos mais maltratados. Este artigo ensina a montar uma corretamente e a ler os resultados sem se enganar. A anatomia de uma Likert bem-feita 1. É uma afirmação, não uma pergunta.A escala mede reação a uma frase. "Como você avalia o atendimento?" com opções de "péssimo" a "ótimo" é uma escala de avaliação (rating): legítima, mas não é Likert. A distinção importa menos pelo nome e mais pela disciplina: a afirmação precisa ser clara, única e afirmável, e todas as regras de uma boa pergunta valem em dobro aqui. Afirmação dupla ("o atendimento é rápido e cordial") quebra a escala inteira. 2. Simetria: o mesmo número de degraus para cada lado.Duas opções positivas e duas negativas, com o neutro no centro. A pesquisa metodológica (resumida por Jon Krosnick, de Stanford, um dos maiores estudiosos de questionários) mostra que escalas desequilibradas empurram a resposta, e produzem aquele resultado suspeito de "94% de aprovação". 3. Todos os pontos rotulados.Krosnick e Fabrigar também documentaram que escalas com rótulos verbais em todos os pontos (e não só nas pontas) são mais confiáveis: as pessoas interpretam os degraus de forma mais parecida entre si. Números soltos (1 a 5, sem palavras) deixam cada respondente inventar sua própria régua. 4. Cinco ou sete pontos, e pronto.Décadas de estudos convergem: abaixo de 5 pontos perde-se sensibilidade; acima de 7, as pessoas não distinguem os degraus ("concordo moderadamente" vs. "concordo consideravelmente"?) e a qualidade não melhora. No contexto de coleta no ponto de venda (respondente em pé, no totem, com segundos de atenção), 5 pontos é o padrão sensato. 5. O dilema do ponto neutro.Com neutro, quem não tem opinião tem saída honesta. Sem neutro (escala de 4 ou 6), força-se a escolha de um lado. Não há resposta única: escalas pares evitam a "preguiça do meio" (marcar neutro para não pensar), mas fabricam opiniões de quem realmente não tem uma; e fabricar dado é pior que perder dado. A recomendação mais segura é manter o neutro, e quando a taxa de neutros for alta, tratar isso como informação ("os clientes não notaram esse aspecto") em vez de estorvo. Os três pecados na hora de analisar Montar bem é metade; a outra metade é ler direito. Pecado 1: tirar média como se fossem números de verdade.Os degraus da Likert são ordenados, mas não necessariamente equidistantes: a distância psicológica entre "concordo" e "concordo totalmente" pode não ser igual à distância entre "neutro" e "concordo". Tecnicamente, é uma escala ordinal, e há um debate metodológico honesto, com décadas de idas e vindas, sobre quando é aceitável tratá-la como numérica. A regra prática mais segura: média de um único item Likert é atalho arriscado; distribuição é sempre verdade. Reportar "72% concordam ou concordam totalmente; 11% discordam" comunica mais e engana menos do que "média 3,9" (a média esconde os extremos). Pecado 2: ignorar o estilo de resposta.Escalas de concordância sofrem de um viés conhecido: a aquiescência: a tendência humana de concordar com afirmações, qualquer afirmação. Parte dos "concordo" é pura gentileza. Antídotos: afirmações formuladas com neutralidade e, em questionários mais longos, alternar afirmações positivas e negativas para detectar quem concorda com tudo em linha reta (straightlining). Pecado 3: comparar escalas diferentes como se fossem iguais.A nota 4 numa escala de 5 não equivale a 8 numa escala de 10, nem o "concordo" de uma escala rotulada equivale ao "4" de uma escala numérica. Conversões de escala existem, mas são aproximações com perda. Regra de ouro para quem muda de questionário: mudou a escala, quebrou a série histórica: anote a data da mudança e compare com cuidado dali em diante. Likert no ponto de venda No ponto de venda, a escala Likert costuma aparecer em forma de perguntas de múltipla escolha, ou traduzida em linguagem visual: carinhas, estrelas, botões coloridos. A ciência é a mesma; os cuidados também: E um lembrete de humildade metodológica: a carinha mede a reação global daquele momento com altíssima taxa de resposta — essa é sua força. Para diagnóstico fino ("o problema é limpeza ou espera?"), ela precisa das perguntas específicas que vêm depois. Instrumento certo para cada trabalho. De volta à Andorinha Na Andorinha, a pesquisa de clima voltou a campo com uma régua honesta: cinco pontos simétricos, dois negativos, um meio de verdade, dois positivos, todos com rótulo. O retrato mudou: os 91% de céu azul viraram 63% de satisfeitos, 23% em cima do muro e 14% de insatisfeitos
Anatomia de uma boa pergunta: Por que o jeito de perguntar muda a resposta
“Você gostou?” e “O que achou?” parecem iguais. Não são. Toda pergunta de pesquisa é um instrumento de medição, e instrumentos mal calibrados enganam. Na Clínica Aurora Wagner, administrador da Clínica Aurora, uma rede de clínicas médicas, tinha um rascunho pronto para o totem da recepção e a satisfação de quem enxugou tudo em uma linha: “Você ficou satisfeito com o atendimento da recepção e da equipe médica?”. Curta, educada, direta. Mari Ferreira, consultora da Solvis que acompanhava a implantação, leu a pergunta duas vezes e devolveu o notebook com outra pergunta no lugar de uma opinião: — Se o paciente responder 3… o que exatamente você vai consertar? Wagner abriu a boca para responder e percebeu a armadilha no meio do caminho. Um 3 podia ser uma hora de espera com uma consulta excelente, um médico atencioso atrás de uma recepção caótica, ou um paciente irritado com o convênio, sem culpa de ninguém dali. A pergunta era uma só; as respostas dentro dela eram três. A pergunta de pesquisa: o instrumento mais delicado “Um termômetro mal calibrado mede a febre errada. Uma balança desregulada mente o peso. E uma pergunta mal formulada coleta uma opinião que o cliente não tem.” A pergunta é o instrumento de medição da pesquisa, e é um instrumento delicado. Décadas de pesquisa em metodologia de questionários (a área tem até nome: survey methodology) mostram que mudanças aparentemente inocentes na redação, na ordem ou nas opções de resposta alteram os resultados de forma mensurável. Um exemplo clássico: em experimentos conduzidos pela psicóloga Elizabeth Loftus nos anos 1970, pessoas assistiam ao vídeo de um acidente de carro. Quando perguntadas “a que velocidade os carros iam quando se esmagaram?”, as estimativas eram significativamente maiores do que quando o verbo era “se bateram”. Uma palavra mudou a memória do que as pessoas viram. Se uma palavra faz isso com uma memória, imagine o que faz com uma opinião. Todo mundo na Solvis, de vendas a suporte, deveria saber reconhecer uma pergunta ruim. Este artigo é o manual de anatomia. As 7 fraturas mais comuns de uma pergunta 1. A pergunta induzida (leading question) Ela já carrega a resposta desejada dentro de si. “Você gostou?” pressupõe que houve gosto, e as pessoas tendem a concordar com pressuposições, um fenômeno documentado chamado aquiescência (a tendência de responder “sim” independentemente do conteúdo). “O que achou?” abre espaço para qualquer resposta. Parecem iguais; medem coisas diferentes. 2. A pergunta dupla (double-barreled) Duas perguntas vestidas de uma. Impossível responder com uma nota só. E se foi rápido e grosseiro? A nota 3 significa o quê? Regra simples: um assunto por pergunta. Se tem “e” no meio, desconfie. 3. A pergunta que exige memória demais Ninguém lembra. O respondente não deixa em branco: inventa um número plausível. Pergunte sobre períodos curtos e experiências recentes, tema tão importante para nós que tem artigo próprio nesta série (O momento da verdade). 4. O jargão e a ambiguidade Cada respondente entende uma coisa, e a média de interpretações diferentes não significa nada. Use a linguagem do respondente, não a da empresa. E troque termos vagos por quantidades. 5. A escala torta A escala é metade da pergunta. Fraturas comuns: A referência clássica aqui é a escala Likert (proposta pelo psicólogo Rensis Likert em 1932): afirmação + graus simétricos de concordância, com ponto neutro. Simples, testada há quase um século, e ainda assim frequentemente mal copiada. 6. A ordem que contamina Perguntas anteriores criam contexto para as seguintes. Perguntar “qual foi o problema do seu atendimento?” antes de “qual sua satisfação geral?” faz a nota geral cair: o respondente foi convidado a lembrar do problema primeiro. Regra prática: do geral para o específico, e perguntas delicadas (incluindo dados pessoais) por último. 7. O questionário-maratona Cada pergunta a mais custa atenção, e atenção é o que o respondente tem de mais escasso. Questionários longos sofrem de abandono e de respostas em linha reta (o respondente marca tudo 5 só para acabar logo, fenômeno conhecido como straightlining). No ponto de venda, onde o cliente responde em pé, no caminho da saída, a disciplina é ainda mais brutal: cada pergunta precisa pagar o próprio aluguel. Se a resposta não vai mudar nenhuma decisão, a pergunta não deveria existir. O teste de bancada: 5 perguntas antes de publicar Antes de qualquer questionário ir a campo, submeta cada pergunta a este checklist: E o teste final, herdado do método científico: teste-piloto. Peça para 5 pessoas responderem na sua frente, falando em voz alta o que entendem de cada pergunta (a técnica formal se chama entrevista cognitiva). É impressionante o que 20 minutos disso revelam. Por que isso importa para nós O cliente da Solvis não compra “um totem”: compra respostas confiáveis. E não existe resposta confiável saída de pergunta ruim: viés na entrada, lixo na saída. Saber reconhecer uma pergunta fraturada é, portanto, uma competência que atravessa toda a operação de quem coleta dados de satisfação: de quem atende o cliente no dia a dia a quem desenha os questionários e os fluxos de coleta. Cada pergunta bem formulada é um voto de confiança no dado que ela vai gerar — e cada uma malfeita é um ponto cego que ninguém percebe até doer. De volta à Aurora Na Aurora, a pergunta dupla virou duas perguntas inteiras, cada uma com um dono claro do outro lado: recepção para a escala e o fluxo de senhas, equipe médica para a coordenação clínica. Na primeira semana de coleta, o mistério se desfez: equipe médica 4,8, recepção 3,8. A nota que a pergunta emendada teria misturado num 4,3 sem endereço apontava agora para a espera do balcão, invisível até então. O teste da Mari entrou no ritual de bancada da clínica: antes de publicar qualquer pergunta, alguém responde mal a ela de propósito, e a equipe confere se saberia o que consertar. Pergunta que não passa, não entra. O resumo de uma frase (teste Feynman) “A pergunta é uma balança: se ela estiver torta, não
