Опрос у кассы: почему исследования показывают, что всё хорошо

Розничной сети нужно было понять, почему покупатели берут меньше, чем могли бы. Заказали исследование маркетинговому агентству. Агентство согласовало анкету, наняло студентов, студенты вышли в залы.

Опрашивали у кассы: логично — там человек стоит в очереди, у него есть свободная минута. Работали студенты после занятий, примерно с трёх до семи.

Результат исследования: ассортиментом довольны почти все.

Разберём, что здесь произошло. В очереди на кассе стоят те, кто нашёл то, что искал — иначе они бы там не стояли. Люди, которые прошли по залу и ушли с пустыми руками, в выборку не попадали в принципе. А в интервале с трёх до семи в магазине преобладают пенсионеры, отпускники и мамы с детьми — не та аудитория, чей выбор определяет выручку.

Анкета была составлена грамотно. Провалились место, время и точка входа в выборку — то, что заказчик обычно не проверяет.

Это восьмая лекция процессного управления в программе MBA CIO, и посвящена она одной теме: как выяснить, что людям на самом деле нужно, — прежде чем строить под это процесс.

Единственный способ узнать — спросить

Начинается всё с фразы, которая звучит банально ровно до тех пор, пока не посмотришь на практику: единственный способ узнать, чего хотят люди, — спросить их об этом.

Не спрашивают почти никогда. Подавляющее большинство руководителей уверено, что знает лучше потребителя, что потребителю нужно. Иногда так и есть. Но проверить эту уверенность стоит дешевле, чем построить процесс, которым потом никто не пользуется.

Дальше — техника, и она устроена как последовательность, а не как набор.

flowchart LR
    A["Мозговой штурм<br/>рождает гипотезы:<br/>о чём вообще спрашивать"] --> B["Интервью<br/>проверяет и уточняет<br/>гипотезы"]
    B --> C["Опрос<br/>даёт массив<br/>для статистики"]
    C --> D["20% требований,<br/>закрывающих<br/>80% потребностей"]

Порядок здесь не рекомендация, а условие работоспособности. Причина сформулирована ещё в фантастическом рассказе, где герой встречает машину, отвечающую на любой вопрос, и не может ничего у неё спросить: чтобы правильно задать вопрос, нужно знать бо́льшую половину ответа.

Мозговой штурм и нужен для того, чтобы получить эту половину — понять, о чём вообще имеет смысл говорить с людьми. Интервью проверяет гипотезы на живых представителях аудитории. Опрос переводит проверенные гипотезы в цифры.

И финальный шаг, о котором забывают: собранное нужно урезать. Реализовать все пожелания всех заинтересованных сторон невозможно — денег уйдёт много, а риски останутся прежними. Работает закон Парето: выбрать те 20% требований, которые закрывают 80% потребностей.

Как именно отбирают эти 20% и что делают с ними дальше — в разборе паспорта процесса: там же о том, почему цель начинается с формулы, а не с формулировки.

Три типа вопросов — и здесь порядок тоже важен

Внутри любого из методов всё упирается в умение задавать вопросы. Их три типа, и они идут строго друг за другом.

Тип	О чём спрашивает	Пример
Мета-вопрос	о надсистеме, о ситуации целиком	«Как для вас выглядит идеальное утро на работе?»
Открытый	о системе и её характеристиках	«Что именно вас тормозит при согласовании?»
Закрытый	об уточнении конкретных значений	«Согласование идёт через почту или через портал?»

Мета-вопрос подключает фантазию. Разница видна на примере. Спросите человека, каким требованиям должна отвечать идеальная информационная система, — и он никогда не скажет, что она должна варить кофе и чесать спину. Он опишет ту систему или те системы, которые когда-либо видел: вы сами зашили в вопрос рамку.

А «варит кофе» — это характеристика не системы, а рабочей ситуации. Спросите про неё — и получите то, чего человек действительно хочет, безотносительно того, что умеют существующие продукты. Дальше работа аналитика: вытащить из фантазий то, что реализуемо.

Открытый вопрос сужает область. Человек уже назвал общую картину — вы просите прокомментировать конкретный факт из того, что он сказал.

Закрытый вопрос уточняет значение — и у него два подвоха.

Первый: привычка отвечать одинаково. Цепочка вопросов с ответом «да» вырабатывает автоматизм — тот самый, который менеджеры используют для убеждения, выстраивая последовательность из очевидных согласий перед главным вопросом. Для убеждения приём рабочий, для сбора информации — вредный.

Второй серьёзнее: закрытым вопросом вы никогда не узнаете ничего нового. Вы спросили, красный или зелёный, — и не услышали, что справа вообще темно и там все спотыкаются.

Отсюда правило: мета → открытый → закрытый, и никак иначе.

Проективный вопрос: как узнать то, о чём не говорят

Отдельная проблема — социально ожидаемые ответы. Человек отвечает не то, что думает, а то, чего от него ждут.

Классика жанра — собеседование. «Почему вы хотите работать в нашей компании?» — «С детства мечтал, впитал любовь к вашему бренду». Реальные причины: вы единственные позвали за два месяца, вы рядом с домом, и друзья говорят, что у вас много платят.

Пока вопрос направлен на самого респондента, вы получаете социально приемлемую версию. Спросите менеджера по закупкам, как часто он берёт откат, — услышите «никогда».

Обход называется проективным вопросом: он задаётся в третьем лице.

Как вы считаете, какая доля менеджеров по закупкам берёт откаты?

Статистики у человека нет. Мозг подставит вместо статистики обобщение собственного опыта — и выдаст его за цифру по рынку. Он может ошибиться в процентах, но сам факт назовёт.

Приём универсален: спрашивайте «про всех вообще», когда прямой вопрос упирается в самолюбие, страх или выгоду. И обратный ход тоже полезен — сначала спросить у каждого лично, потом задать проективную версию того же вопроса и сравнить два числа. Разрыв между ними и есть размер социальной желательности в вашей выборке.

Где сегодня помогает AI. Составление вопросов — та часть работы, где модель экономит больше всего: она перебирает формулировки одного и того же вопроса в мета-, открытом, закрытом и проективном виде, и сразу видно, какая рамка зашита в каждую. Заодно вылавливает подсказки, которые вы вложили в вопрос не заметив.

Мозговой штурм: правила, без которых это обычное совещание

Метод описан в тысяче книг, и почти везде его проводят неправильно. Правил немного, но каждое существенно.

Кого звать. Если нужно мнение о потребностях потребителя, самый очевидный ответ — пригласить потребителя. Это редко возможно, но обычно и не пробовали. Дальше по убыванию: продавцы, сотрудники колл-центра и поддержки — все, кто контактирует с клиентом волей-неволей. Отдельный ход: если у вас нет собственного опыта в этом направлении, зовите своих сотрудников, которые пытались получить такую услугу у конкурентов. Не самих конкурентов — те либо не придут, либо не нужны.

Правило ±1 уровень. Для оценки корпоративной культуры есть параметр — длина дистанции власти; в грубом виде она измеряется дрожью в коленях сотрудника, которого вызвал начальник. В компаниях с длинной дистанцией собирать на штурм нужно людей, находящихся не дальше одного иерархического уровня друг от друга: тех, кто может общаться на «ты», не нарушая неписаных правил.

Что делать, если на штурм просится генеральный. Отказать сложно, а присутствие первого лица убивает генерацию идей. Два выхода: заменить его участие отдельным интервью — или договориться, что он не высказывается голосом, а диктует помощнику. Это работает по тому же принципу, что и правило совещаний в авторитарных компаниях: чем старше по должности, тем позже высказывается.

Двойная запись. Всё, что прозвучало, пишет модератор на доске и секретарь на бумаге — дословно и независимо от кажущейся очевидности или нереализуемости. Доска нужна для темпа, бумага — потому что доска кончается.

Не стирайте доску полностью. У большого числа людей есть синдром чистого листа — невозможность начать писать на пустом. Оставьте вверху одну-две фразы: барьер снимается.

Критика запрещена жёстко. Не «нежелательна», а запрещена: предупреждаете заранее, делаете одно замечание, после второго удаляете нарушителя из комнаты. Обычно после первого удаления критика прекращается совсем. Повторение своими словами и дополнение чужой идеи, наоборот, разрешены.

Длительность — около часа. Идеи идут четырьмя волнами: небольшая, побольше, самая большая, маленькая. После четвёртой можно расходиться.

И два приёма на выход. Первый: пойдите с курящими на улицу и послушайте, о чём они говорят, — хорошая мысль часто приходит после. Второй: пока люди идут к рабочим местам, отправьте им письмо с благодарностью за участие и просьбой прислать идею, если она придёт по дороге. Не гарантия, но заметная прибавка к урожаю.

Как разбирать результат. Все высказывания группируются по синонимии (об одном и том же разными словами) и по комплементарности (две идеи — две части целого), а затем ранжируются по индексу цитируемости: сколько человек независимо пришли к одной и той же мысли. На выходе — не список, а приоритизированный перечень.

Интервью: аналитик — не менеджер

Интервью бывает свободным и стандартизированным, и одно вырастает из другого.

Свободное — разговор с целью, но без сценария: чашка кофе и беседа «за жизнь» на нужную тему. Требует высокой квалификации. После нескольких таких разговоров проступает алгоритм: если задать вот этот вопрос, ответ будет одним из трёх, и каждый ведёт к своему следующему вопросу. Так рождается стандартизированное интервью — фактически карта с развилками, по которой уже может работать аналитик средней руки.

Главное ограничение — давить нельзя. Это трудно, потому что рефлекс противоположный: сформулировать вопрос так, чтобы получить подтверждение своей гипотезы. Для менеджера, которому нужно кого-то убедить, это полезный навык. Для аналитика, которому нужна объективная картина, — прямой вред. Худший образец жанра — репортёр, который успевает произнести весь ответ раньше собеседника.

И последнее отличие от журналистики: журналист согласовывает запись — правильно ли записаны слова. Аналитик согласовывает выводы — правильно ли он понял сказанное. Человек мог выразиться неточно, аналитик мог услышать своё; проверяется именно стык.

Анкета: правила, оплаченные чужими ошибками

Восемь правил, каждое из которых нарушают регулярно.

1. Один вопрос — одна мысль. «Нравятся ли вам высокие стройные блондинки?» — это четыре вопроса в одном. Признак совмещённого вопроса — союз «и» или запятая. Отвечают обычно только на первую часть.

2. Никаких редких слов и терминов. Формулировка должна проходить «бабушкин тест». Образец нарушения — бюллетени, где в одном пункте соединяют юридическую формулу со ссылкой на исторические границы: понять, за что именно человек голосует, нельзя даже при желании.

3. Без оценочных слов. «Считаете ли вы, что мерзавцев надо наказывать» — это уже не вопрос.

4. Вопрос — в одну строку, ответы могут быть длиннее. И если варианты ответов различаются одной частицей «не», её надо выделить жирным: при длинном ответе разницу просто не замечают.

5. «Выберите один вариант» — в каждом вопросе. Написанное один раз в начале анкеты игнорирует примерно треть респондентов. Повторяйте у каждого вопроса, не надейтесь на память.

6. Никаких подсказок в формулировке. Это самое дорогое правило. Одну и ту же военную операцию два опроса оценили противоположно — 99% за и 99% против, — и оба честно опубликовали цифры. Разница была в предшествующей цепочке вопросов: одна вела через «имеет ли государство право на суверенитет», вторая — через «должны ли соседи вмешаться, если возникла угроза». Как выстроили серию, такой и получили результат. В маркетинговом исследовании это заканчивается тем, что вы построите процесс под ответ, который сами и продиктовали.

7. Всегда оставляйте вариант «иное». Даже когда кажется, что альтернативы исчерпаны. И следите за долей: если «иное» набрало 30%, значит альтернативы составлены неверно — либо не полны, либо непонятны. Обратный случай — принуждение к неприемлемому ответу: анкета, где на вопрос предлагают только варианты «один-три раза в неделю», «три-пять», «более пяти», а варианта «этого не происходит» нет вообще.

8. Проверяйте место, время и точку входа. То, с чего начался этот пост. Согласовывая исследование с подрядчиком, фиксируйте в задании не только анкету, но и где, когда и кого будут спрашивать: у выхода, а не у кассы; с интервалом в два часа на протяжении всего дня работы, а не после занятий; включая тех, кто уходит без покупки.

И наблюдение, которое стоит помнить всем, кто собирает обратную связь. Оценки, которые пассажиры ставят проводнику, зависят от того, сколько времени им ехать. Честные ответы начинаются примерно за полчаса до выхода. До этого человек взвешивает, не придётся ли ему потом ещё просить чай.

Что обсуждают в вашей нише прямо сейчас, бот соберёт за минуту: темы, углы и то, на чём люди сходятся.

📡 Посмотреть тренды моей нишиБесплатно, в Telegram-боте @uspeshnyybot

Вывод

Исследование, которое показывает, что всё хорошо, — почти всегда неправильно поставленное исследование.

Три вещи стоит унести. Порядок методов не декоративный: штурм даёт гипотезы, интервью их проверяет, опрос переводит в цифры; начав с анкеты, вы спросите не о том. Порядок вопросов тоже: мета-вопрос открывает картину, открытый сужает, закрытый уточняет — и только в этой последовательности вы услышите то, чего не знали. И место, время и точка входа в выборку определяют результат сильнее, чем формулировки — их и надо проверять в первую очередь, когда исследование приносит удобные цифры.

Следующий шаг: возьмите последнее исследование или опрос, который вы заказывали или проводили, и ответьте на три вопроса — где именно спрашивали, в какое время и кто физически не мог попасть в выборку. Если ответ на третий вопрос — «те, кто ушёл недовольным», результаты можно не перечитывать.