← Todos os Insights
Research 6 min de leitura

Como Desenhar Pesquisas Que Geram Insight de Verdade

A maioria das pesquisas já nasce fadada ao fracasso antes da primeira pergunta, porque ninguém definiu qual decisão as respostas deveriam embasar.

Em resumo

  • As taxas de resposta despencaram em todos os canais, então o velho reflexo de perguntar mais para mais gente já não funciona. A vantagem agora é de quem faz menos perguntas, e mais afiadas, para as pessoas certas.
  • A maioria dos programas de mensuração pula a única etapa que protege a qualidade dos dados. Apenas 4% testam suas pesquisas com clientes antes de levá-las a campo, o que faz com que perguntas tendenciosas e de duplo sentido cheguem ao campo e corrompam os resultados em silêncio.
  • Uma pesquisa vale tanto quanto a decisão para a qual foi construída. Desenhar a análise antes de aplicar o questionário é o que separa um número que oscila de um achado capaz de mover um roadmap.

Uma pesquisa raramente fracassa no campo. Ela fracassa no quadro branco, na hora em que alguém escreve uma pergunta antes de o time ter combinado qual decisão a resposta deveria embasar. Tudo o que vem depois, o texto, a escala, a amostra, é refém de um briefing que nunca aconteceu.

O sintoma é conhecido. Um programa coleta feedback, lança um dashboard e reporta um score que se move um ponto por trimestre. A liderança balança a cabeça. Nada muda. O instinto é coletar mais dados, mas mais dados errados só compram uma resposta errada com mais confiança.

Acabou a era de perguntar mais para mais gente

A matéria-prima barata que sustentava os programas de pesquisa, a atenção das pessoas, acabou. No Pew Research Center, a taxa de resposta de uma pesquisa telefônica típica caiu de 36% em 1997 para 9% em 2012, e seguiu caindo até apenas 6% em 2018. O padrão se repete nos canais de e-mail e in-app: quem ainda responde já não é representativo, e empurrar volume para compensar piora o viés, em vez de corrigi-lo.

Quadro 1

A matéria-prima barata de que as pesquisas dependiam evaporou

Taxa de resposta em 199736%
Taxa de resposta em 20186%

Fonte: Pew Research Center, 2012 e 2019

Quando a resposta é escassa, cada pergunta que você faz carrega um custo de oportunidade. A disciplina deixa de ser cobertura e passa a ser precisão: faça o menor número de perguntas que resolve uma decisão real, para a menor amostra que sustenta os recortes que você pretende fazer.

Quando a resposta é escassa, cada pergunta que você faz carrega um custo de oportunidade. Conquiste o direito de fazê-la.

A maioria dos programas pula a única etapa que protege a qualidade dos dados

A forma mais rápida de arruinar uma pesquisa também é a mais comum, e evitá-la custa quase nada. O estudo da Forrester de 2023 sobre programas de voz do cliente revelou que 96% coletam e analisam pesquisas com regularidade, mas apenas 4% testam os questionários com clientes antes de levá-los a campo.

4% dos programas de mensuração de experiência do cliente testam suas pesquisas com clientes reais, de modo que as perguntas que confundem, induzem ou misturam dois temas chegam ao campo sem correção. Fonte: Forrester

É por essa brecha que o erro de mensuração se infiltra. Uma pergunta de duplo sentido, “O quanto você está satisfeito com a velocidade e a confiabilidade do nosso serviço”, obriga uma só resposta a dar conta de duas coisas distintas, e o resultado é um dado que você não consegue interpretar mesmo quando ele parece impecável na planilha. A Qualtrics é direta quanto à consequência: perguntas assim reduzem a precisão e a confiabilidade de uma pesquisa e levam as organizações a decidir com base em premissas equivocadas. Uma pergunta indutora faz o mesmo estrago no sentido inverso, confirmando em silêncio o viés de quem a redigiu.

Nada disso sobrevive a um pré-teste. Dez minutos com cinco respondentes reais revelam a confusão que mil respostas só fariam mascarar.

Desenhe a análise antes de escrever o questionário

O questionário é a última peça que você deveria montar, não a primeira. Antes de qualquer texto, defina a análise: quais segmentos vai comparar, quais drivers vai ranquear, qual ação cada recorte poderia desencadear. É esse plano que define as escalas, a amostra e as perguntas que você tem o direito de fazer.

  1. Nomeie a decisão. “Queremos saber como os clientes se sentem” não é um briefing. “Precisamos ranquear os drivers de churn por segmento para sequenciar o roadmap” é. A decisão fixa a análise, e a análise fixa o questionário.
  2. Desenhe os recortes primeiro. Se a resposta precisa se sustentar por segmento, dimensione cada segmento para uma leitura confiável antes de ir a campo, não depois.
  3. Uma ideia por pergunta. Texto neutro, escala consistente e nenhuma pergunta composta. Os itens críticos vêm cedo, antes que a fadiga e o abandono enxuguem os dados.
  4. Meça jornadas, não apenas momentos. Um score de ponto de contato isolado bajula ou pune o time errado. A McKinsey constata que o desempenho em jornadas completas tem correlação de 30 a 40% mais forte com a satisfação do que o desempenho em pontos de contato individuais.
  5. Faça o pré-teste, sempre. Cinco respondentes, dez minutos. É a etapa de maior retorno de todo o processo, e quase ninguém a faz.
  6. Feche o ciclo de retorno antes do lançamento. Defina quem age sobre cada achado e como o resultado chega de volta ao respondente. Uma pesquisa sem dono para a resposta é um imposto sobre a boa vontade.
5 de 100 interações com clientes são capturadas por uma pesquisa transacional típica, e é por isso que o desenho do questionário precisa se pagar e por que o sinal espontâneo tem de preencher o resto. Fonte: Forrester

Uma boa pesquisa é um instrumento de decisão, não um termômetro

O sentido de perguntar é agir. Uma pesquisa que gera insight de verdade funciona como a primeira metade de uma decisão: isola os poucos drivers que movem o resultado, os sustenta por segmento e entrega ao responsável um próximo passo claro. Uma pesquisa que só mede a temperatura reporta um número, e número nenhum muda nada.

É essa a fronteira entre um hábito de mensuração e um programa de mensuração. O primeiro pergunta “qual é o nosso score”. O segundo pergunta “o que vamos fazer de diferente quando a resposta chegar”, e constrói tudo de trás para frente a partir daí.

Para ver como construímos pesquisas que orientam decisões, conheça nosso trabalho em Experiência do Cliente e Voz do Cidadão, ou explore os casos de sucesso.

Fontes

  1. Pew Research Center, "Pollsters face challenges in getting survey respondents," pewresearch.org.
  2. Pew Research Center, "Response rates in telephone surveys have resumed their decline," pewresearch.org.
  3. Forrester, "Many Surveys, Small Impact: Forrester's 2023 State Of VoC And CX Measurement Practices Survey," forrester.com.
  4. Qualtrics, "The dreaded double-barreled question and how to avoid it," qualtrics.com.
  5. McKinsey & Company, "From touchpoints to journeys: Seeing the world as customers do," mckinsey.com.

Quer aplicar isso aos seus dados?

Agendar uma Consultoria