← Всички Insights
Research 5 мин четене

Как да проектираме анкети, които дават истински прозрения

Повечето анкети се провалят още преди да е написан първият въпрос, защото никой не е решил кое решение трябва да подкрепят отговорите.

Накратко

  • Процентът на отговорилите се срина по всеки канал, така че старият рефлекс да питаме повече хора повече въпроси вече не работи. Предимството днес е на страната на онзи, който задава по-малко, но по-точни въпроси на правилните хора.
  • Повечето програми за измерване прескачат единствената стъпка, която пази качеството на данните. Едва 4% тестват анкетите си с клиенти предварително, което означава, че подвеждащите и двусмислените въпроси стигат до терен и тихомълком изкривяват резултатите.
  • Една анкета струва точно толкова, колкото решението, заради което е създадена. Да обмислите анализа, преди да съставите въпросника, е разликата между число, което просто се полюшва нагоре-надолу, и извод, който задвижва пътната карта.

Една анкета рядко се проваля на терен. Тя се проваля на дъската за планиране, в мига, в който някой запише въпрос, преди да е постигнато съгласие кое решение трябва да подкрепи отговорът. Всичко след това, формулировката, скалата, извадката, е следствие от липсващото задание.

Симптомът е познат. Една програма събира обратна връзка, пуска табло и отчита резултат, който мърда с по една точка на тримесечие. Ръководството кима одобрително. Нищо не се променя. Първият инстинкт е да се съберат още данни, но повече грешни данни ви носят единствено по-самоуверен грешен отговор.

Ерата на това да питаме повече хора повече въпроси приключи

Евтиният ресурс, върху който бяха изградени анкетните програми, вниманието, се изчерпа. Според Pew Research Center делът на отговорилите при типична телефонна анкета спада от 36% през 1997 г. до 9% през 2012 г. и продължава надолу до едва 6% през 2018 г. Същата картина важи и за имейл и in-app каналите: хората, които все още отговарят, отдавна не са представителни, а увеличаването на обема в опит да компенсирате задълбочава изкривяването, вместо да го намали.

Илюстрация 1

Евтиният ресурс, на който разчитаха анкетите, се изпари

Дял на отговорилите през 1997 г.36%
Дял на отговорилите през 2018 г.6%

Източник: Pew Research Center, 2012 и 2019

Когато отговорите са оскъдни, всеки зададен въпрос носи цена на пропуснатата възможност. Фокусът се измества от обхват към прецизност: задавайте възможно най-малко въпроси, които ще решат реален проблем, на възможно най-малката извадка, която издържа разрезите, които смятате да правите.

Когато отговорите са оскъдни, всеки зададен въпрос носи цена. Заслужете си правото да го зададете.

Повечето програми прескачат единствената стъпка, която пази качеството на данните

Най-бързият начин да провалите една анкета е и най-разпространеният, а да го избегнете, не струва почти нищо. Проучването на Forrester от 2023 г. за програмите за глас на клиента установява, че 96% редовно събират и анализират анкети, но едва 4% тестват въпросниците си с клиенти, преди да ги пуснат на терен.

4% от програмите за измерване на клиентското изживяване тестват анкетите си с реални клиенти, така че въпросите, които объркват, подвеждат или събират по две неща в едно, стигат до терен непоправени. Източник: Forrester

Точно тук се прокрадва грешката в измерването. Двусмисленият въпрос „Колко сте доволни от скоростта и надеждността на нашата услуга“ принуждава един отговор да обхване две различни неща и резултатът са данни, които не можете да разтълкувате дори когато изглеждат изрядни в таблицата. Qualtrics е пределно ясен за последствието: такива въпроси понижават точността и надеждността на анкетата и карат организациите да вземат решения, стъпили на грешни допускания. Подвеждащият въпрос нанася същата вреда в обратната посока, като тихомълком потвърждава предубеждението на този, който го е написал.

Нищо от това не устоява на предварителен тест. Десет минути с петима реални респонденти улавят объркването, което хиляда отговора само ще размият.

Проектирайте анализа, преди да напишете въпросника

Въпросникът е последното, което трябва да изградите, а не първото. Преди каквато и да е формулировка изяснете анализа: кои сегменти ще сравнявате, кои фактори ще подреждате по тежест, какво действие може да задейства всеки разрез. Този план диктува скалите, извадката и въпросите, които изобщо имате право да задавате.

  1. Назовете решението. „Искаме да знаем как се чувстват клиентите“ не е задание. „Трябва да подредим факторите за отлив по сегменти, за да приоритизираме пътната карта“ е. Решението определя анализа, а анализът определя въпросника.
  2. Проектирайте разрезите още в началото. Ако отговорът трябва да е валиден по сегменти, оразмерете всеки сегмент така, че да издържа уверен прочит преди терена, а не след него.
  3. Една идея на въпрос. Неутрална формулировка, последователна скала и никакви съставни въпроси. Най-важните въпроси задайте рано, преди умората и отпадането да изтънят данните.
  4. Измервайте пътя на клиента, не само отделни моменти. Резултатът от една-единствена точка на контакт ласкае или наказва грешния екип. McKinsey установява, че представянето по цялостни клиентски пътувания корелира с удовлетвореността с 30 до 40% по-силно от представянето по отделни точки на контакт.
  5. Тествайте предварително, всеки път. Петима респонденти, десет минути. Това е стъпката с най-висока възвръщаемост в целия процес и почти никой не я прави.
  6. Затворете цикъла още преди старта. Решете кой ще действа по всеки извод и как резултатът се връща обратно при респондента. Анкета без отговорник за резултата е само данък върху добронамереността.
5 от 100 взаимодействия с клиенти улавя типичната транзакционна анкета, заради което дизайнът на въпросника трябва да оправдае съществуването си, а неизказаният сигнал трябва да покрие останалото. Източник: Forrester

Добрата анкета е инструмент за решение, а не термометър

Смисълът да питаме е да действаме. Анкета, която дава истинско прозрение, се чете като първата половина на едно решение: тя откроява малкото фактори, които движат резултата, разглежда ги по сегменти и подава на отговорника ясна следваща стъпка. Анкета, която дава отчитане като от термометър, съобщава число, а числото не променя нищо.

Това е границата между навик да измерваш и програма за измерване. Първото пита „какъв е резултатът ни“. Второто пита „какво ще направим различно, когато отговорът се върне“ и проектира всичко в обратен ред, започвайки оттам.

За да видите как изграждаме изследвания, които движат решения, разгледайте работата ни в Customer Experience и Voice of the Citizen или прегледайте казусите.

Източници

  1. Pew Research Center, "Pollsters face challenges in getting survey respondents," pewresearch.org.
  2. Pew Research Center, "Response rates in telephone surveys have resumed their decline," pewresearch.org.
  3. Forrester, "Many Surveys, Small Impact: Forrester's 2023 State Of VoC And CX Measurement Practices Survey," forrester.com.
  4. Qualtrics, "The dreaded double-barreled question and how to avoid it," qualtrics.com.
  5. McKinsey & Company, "From touchpoints to journeys: Seeing the world as customers do," mckinsey.com.

Искате ли да приложите това към вашите данни?

Запазете консултация