← Todos los Insights
Research 6 min de lectura

Diseñar encuestas que generen conocimiento real

La mayoría de las encuestas fracasan antes de escribir la primera pregunta, porque nadie decidió qué decisión debían fundamentar las respuestas.

En resumen

  • Las tasas de respuesta se han desplomado en todos los canales, así que el viejo reflejo de preguntar más cosas a más gente ya no sirve. Hoy la ventaja es de quien hace menos preguntas, pero más afiladas, a las personas adecuadas.
  • La mayoría de los programas de medición se saltan el único paso que protege la calidad del dato. Solo un 4% pretesta sus encuestas con clientes, lo que significa que las preguntas tendenciosas y de doble cañón llegan al campo y corrompen los resultados sin que nadie lo note.
  • Una encuesta vale lo que vale la decisión para la que se construyó. Diseñar el análisis antes de lanzar el cuestionario es lo que separa un número que oscila de un hallazgo que mueve una hoja de ruta.

Una encuesta rara vez fracasa en el campo. Fracasa en la pizarra, en el momento en que alguien escribe una pregunta antes de que nadie haya acordado qué decisión se supone que debe fundamentar la respuesta. Todo lo que viene después, la redacción, la escala, la muestra, es consecuencia de un brief que nunca existió.

El síntoma es conocido. Un programa recoge feedback, despliega un dashboard y reporta un score que sube un punto al trimestre. La dirección asiente. Nada cambia. El instinto es recoger más datos, pero más datos equivocados solo dan una respuesta equivocada más segura de sí misma.

La era de preguntar más cosas a más gente se ha acabado

La materia prima barata sobre la que se construyeron los programas de encuestas, la atención, se ha agotado. Según el Pew Research Center, la tasa de respuesta de una encuesta telefónica típica cayó del 36% en 1997 al 9% en 2012, y siguió bajando hasta apenas un 6% en 2018. El patrón se repite también en el correo y en los canales in-app: quienes todavía responden ya no son representativos, y forzar el volumen para compensarlo agrava el sesgo en lugar de corregirlo.

Gráfico 1

La materia prima barata de la que dependían las encuestas se ha evaporado

Tasa de respuesta en 199736%
Tasa de respuesta en 20186%

Fuente: Pew Research Center, 2012 y 2019

Cuando la respuesta escasea, cada pregunta que haces tiene un coste de oportunidad. La disciplina deja de ser cobertura para pasar a ser precisión: haz las menos preguntas posibles que resuelvan una decisión real, a la muestra más pequeña que sostenga los cortes que pretendes hacer.

Cuando la respuesta escasea, cada pregunta que haces tiene un coste de oportunidad. Gánate el derecho a hacerla.

La mayoría de los programas se saltan el único paso que protege la calidad del dato

La forma más rápida de arruinar una encuesta es también la más común, y prevenirla no cuesta casi nada. El estudio de 2023 de Forrester sobre programas de voz del cliente encontró que el 96% recoge y analiza encuestas con regularidad, pero solo el 4% pretesta sus cuestionarios con clientes antes de lanzarlos.

4% de los programas de medición de experiencia de cliente pretesta sus encuestas con clientes reales, de modo que las preguntas que confunden, condicionan o juntan dos ideas llegan al campo sin corregir. Fuente: Forrester

Es justo ahí por donde se cuela el error de medición. Una pregunta de doble cañón, “¿Qué nivel de satisfacción tienes con la rapidez y la fiabilidad de nuestro servicio?”, obliga a responder con un solo dato a dos cosas distintas, y el resultado son datos que no puedes interpretar aunque queden impecables en la hoja de cálculo. Qualtrics lo dice sin rodeos: este tipo de preguntas reducen la precisión y la fiabilidad de una encuesta y llevan a las organizaciones a decidir sobre supuestos incorrectos. Una pregunta tendenciosa hace el mismo daño en sentido contrario, confirmando sin ruido el sesgo de quien la redactó.

Nada de esto sobrevive a un pretest. Diez minutos con cinco personas reales detectan la confusión que mil respuestas se limitarán a blanquear.

Diseña el análisis antes de escribir el cuestionario

El cuestionario es el último artefacto que deberías construir, no el primero. Antes de cualquier redacción, cierra el análisis: qué segmentos vas a comparar, qué drivers vas a ordenar, qué acción podría desencadenar cada corte. Ese plan dicta las escalas, la muestra y las preguntas que tienes permitido hacer.

  1. Define la decisión. “Queremos saber cómo se sienten los clientes” no es un brief. “Necesitamos ordenar los drivers de la fuga por segmento para secuenciar la hoja de ruta” sí lo es. La decisión fija el análisis, y el análisis fija el cuestionario.
  2. Diseña los cortes primero. Si la respuesta tiene que sostenerse por segmento, dimensiona cada segmento para permitir una lectura fiable antes de salir al campo, no después.
  3. Una idea por pregunta. Redacción neutra, una escala consistente y nada de preguntas compuestas. Los ítems críticos van al principio, antes de que la fatiga y el abandono adelgacen los datos.
  4. Mide journeys, no solo momentos. El score de un único punto de contacto premia o castiga al equipo equivocado. McKinsey constata que el desempeño en el journey completo se correlaciona entre un 30 y un 40% más con la satisfacción que el desempeño en puntos de contacto aislados.
  5. Pretesta, siempre. Cinco personas, diez minutos. Es el paso de mayor retorno de todo el proceso y casi nadie lo hace.
  6. Cierra el círculo antes de lanzar. Decide quién actúa sobre cada hallazgo y cómo vuelve el resultado a quien respondió. Una encuesta sin nadie que responda por sus resultados es un impuesto sobre la buena voluntad.
5 de 100 interacciones con clientes recoge una encuesta transaccional típica, y por eso el diseño del cuestionario tiene que ganarse cada pregunta y la señal no solicitada tiene que cubrir el resto. Fuente: Forrester

Una buena encuesta es un instrumento de decisión, no un termómetro

El sentido de preguntar es actuar. Una encuesta que genera conocimiento real se lee como la primera mitad de una decisión: aísla los pocos drivers que mueven el resultado, los sostiene por segmento y pone en manos de su responsable un siguiente paso claro. Una encuesta que solo da una lectura de termómetro arroja un número, y el número no cambia nada.

Esa es la frontera entre un hábito de medición y un programa de medición. El primero se pregunta “cuál es nuestro score”. El segundo se pregunta “qué haremos distinto cuando llegue la respuesta”, y lo diseña todo hacia atrás a partir de ahí.

Para ver cómo construimos investigación que impulsa decisiones, descubre nuestro trabajo en Experiencia de Cliente y Voz del Ciudadano, o repasa los casos de estudio.

Fuentes

  1. Pew Research Center, "Pollsters face challenges in getting survey respondents," pewresearch.org.
  2. Pew Research Center, "Response rates in telephone surveys have resumed their decline," pewresearch.org.
  3. Forrester, "Many Surveys, Small Impact: Forrester's 2023 State Of VoC And CX Measurement Practices Survey," forrester.com.
  4. Qualtrics, "The dreaded double-barreled question and how to avoid it," qualtrics.com.
  5. McKinsey & Company, "From touchpoints to journeys: Seeing the world as customers do," mckinsey.com.

¿Quieres aplicar esto a tus datos?

Reservar una consulta