En resumen
- Las tasas de respuesta se han desplomado en todos los canales, así que el viejo reflejo de preguntar más cosas a más gente ya no sirve. Hoy la ventaja es de quien hace menos preguntas, pero más afiladas, a las personas adecuadas.
- La mayoría de los programas de medición se saltan el único paso que protege la calidad del dato. Solo un 4% pretesta sus encuestas con clientes, lo que significa que las preguntas tendenciosas y de doble cañón llegan al campo y corrompen los resultados sin que nadie lo note.
- Una encuesta vale lo que vale la decisión para la que se construyó. Diseñar el análisis antes de lanzar el cuestionario es lo que separa un número que oscila de un hallazgo que mueve una hoja de ruta.
Una encuesta rara vez fracasa en el campo. Fracasa en la pizarra, en el momento en que alguien escribe una pregunta antes de que nadie haya acordado qué decisión se supone que debe fundamentar la respuesta. Todo lo que viene después, la redacción, la escala, la muestra, es consecuencia de un brief que nunca existió.
El síntoma es conocido. Un programa recoge feedback, despliega un dashboard y reporta un score que sube un punto al trimestre. La dirección asiente. Nada cambia. El instinto es recoger más datos, pero más datos equivocados solo dan una respuesta equivocada más segura de sí misma.
La era de preguntar más cosas a más gente se ha acabado
La materia prima barata sobre la que se construyeron los programas de encuestas, la atención, se ha agotado. Según el Pew Research Center, la tasa de respuesta de una encuesta telefónica típica cayó del 36% en 1997 al 9% en 2012, y siguió bajando hasta apenas un 6% en 2018. El patrón se repite también en el correo y en los canales in-app: quienes todavía responden ya no son representativos, y forzar el volumen para compensarlo agrava el sesgo en lugar de corregirlo.
Gráfico 1
La materia prima barata de la que dependían las encuestas se ha evaporado
Cuando la respuesta escasea, cada pregunta que haces tiene un coste de oportunidad. La disciplina deja de ser cobertura para pasar a ser precisión: haz las menos preguntas posibles que resuelvan una decisión real, a la muestra más pequeña que sostenga los cortes que pretendes hacer.
Cuando la respuesta escasea, cada pregunta que haces tiene un coste de oportunidad. Gánate el derecho a hacerla.
La mayoría de los programas se saltan el único paso que protege la calidad del dato
La forma más rápida de arruinar una encuesta es también la más común, y prevenirla no cuesta casi nada. El estudio de 2023 de Forrester sobre programas de voz del cliente encontró que el 96% recoge y analiza encuestas con regularidad, pero solo el 4% pretesta sus cuestionarios con clientes antes de lanzarlos.
Es justo ahí por donde se cuela el error de medición. Una pregunta de doble cañón, “¿Qué nivel de satisfacción tienes con la rapidez y la fiabilidad de nuestro servicio?”, obliga a responder con un solo dato a dos cosas distintas, y el resultado son datos que no puedes interpretar aunque queden impecables en la hoja de cálculo. Qualtrics lo dice sin rodeos: este tipo de preguntas reducen la precisión y la fiabilidad de una encuesta y llevan a las organizaciones a decidir sobre supuestos incorrectos. Una pregunta tendenciosa hace el mismo daño en sentido contrario, confirmando sin ruido el sesgo de quien la redactó.
Nada de esto sobrevive a un pretest. Diez minutos con cinco personas reales detectan la confusión que mil respuestas se limitarán a blanquear.
Diseña el análisis antes de escribir el cuestionario
El cuestionario es el último artefacto que deberías construir, no el primero. Antes de cualquier redacción, cierra el análisis: qué segmentos vas a comparar, qué drivers vas a ordenar, qué acción podría desencadenar cada corte. Ese plan dicta las escalas, la muestra y las preguntas que tienes permitido hacer.
- Define la decisión. “Queremos saber cómo se sienten los clientes” no es un brief. “Necesitamos ordenar los drivers de la fuga por segmento para secuenciar la hoja de ruta” sí lo es. La decisión fija el análisis, y el análisis fija el cuestionario.
- Diseña los cortes primero. Si la respuesta tiene que sostenerse por segmento, dimensiona cada segmento para permitir una lectura fiable antes de salir al campo, no después.
- Una idea por pregunta. Redacción neutra, una escala consistente y nada de preguntas compuestas. Los ítems críticos van al principio, antes de que la fatiga y el abandono adelgacen los datos.
- Mide journeys, no solo momentos. El score de un único punto de contacto premia o castiga al equipo equivocado. McKinsey constata que el desempeño en el journey completo se correlaciona entre un 30 y un 40% más con la satisfacción que el desempeño en puntos de contacto aislados.
- Pretesta, siempre. Cinco personas, diez minutos. Es el paso de mayor retorno de todo el proceso y casi nadie lo hace.
- Cierra el círculo antes de lanzar. Decide quién actúa sobre cada hallazgo y cómo vuelve el resultado a quien respondió. Una encuesta sin nadie que responda por sus resultados es un impuesto sobre la buena voluntad.
Una buena encuesta es un instrumento de decisión, no un termómetro
El sentido de preguntar es actuar. Una encuesta que genera conocimiento real se lee como la primera mitad de una decisión: aísla los pocos drivers que mueven el resultado, los sostiene por segmento y pone en manos de su responsable un siguiente paso claro. Una encuesta que solo da una lectura de termómetro arroja un número, y el número no cambia nada.
Esa es la frontera entre un hábito de medición y un programa de medición. El primero se pregunta “cuál es nuestro score”. El segundo se pregunta “qué haremos distinto cuando llegue la respuesta”, y lo diseña todo hacia atrás a partir de ahí.
Para ver cómo construimos investigación que impulsa decisiones, descubre nuestro trabajo en Experiencia de Cliente y Voz del Ciudadano, o repasa los casos de estudio.
Fuentes
- Pew Research Center, "Pollsters face challenges in getting survey respondents," pewresearch.org.
- Pew Research Center, "Response rates in telephone surveys have resumed their decline," pewresearch.org.
- Forrester, "Many Surveys, Small Impact: Forrester's 2023 State Of VoC And CX Measurement Practices Survey," forrester.com.
- Qualtrics, "The dreaded double-barreled question and how to avoid it," qualtrics.com.
- McKinsey & Company, "From touchpoints to journeys: Seeing the world as customers do," mckinsey.com.