Кому подойдёт: новичкам, которые выбирают первое предложение, и фрилансерам, меняющим упаковку, состав или условия услуги. Категории Start и System.

В понедельник вы предложили знакомым консультацию за 3 000 ₽, а через неделю опубликовали в новом сообществе пакет за 12 000 ₽. Первый вариант купили два человека, второй — один. Можно ли сказать, что консультация продаётся лучше? Пока нельзя: различаются аудитория, цена, объём, доверие и число людей, которые увидели предложение.

Сравнивать варианты на старте всё равно полезно. Просто нужно отличать исследование, которое помогает выбрать следующий шаг, от контролируемого эксперимента, позволяющего оценивать причинную разницу. Для малого проекта часто важнее понять, что человек понял и почему отказался, чем присвоить двум маленьким числам статус победителя и проигравшего.

Выберите различие для исследования

Если сомневаетесь в формулировке результата, сравнивайте формулировки при сходных остальных условиях. Если в составе услуги — объясните оба состава так, чтобы человек видел разницу. Если в цене — помните, что она меняет не только привлекательность, но и ожидания, состав аудитории и экономику выполнения.

В учебном примере специалист выбирает между предложениями «разбор воронки продаж» и «найдём, на каком этапе вы теряете обращения, и составим список первых исправлений». Содержание работы и цена одинаковы. Сначала можно проверить, как потенциальные клиенты понимают каждое описание. Это вопрос понятности, для него не требуется обещать точный прирост продаж.

Если же вы сравниваете консультацию и проект под ключ, различий много по определению. Такую проверку тоже можно провести, но вопрос будет другим: какая модель лучше подходит выбранной ситуации клиента и вашим ресурсам. Не пытайтесь объяснить результат одним словом в заголовке.

Выберите подходящий метод проверки

Для понятности подходят разговоры с заданиями: попросить объяснить предложение своими словами, назвать ожидаемый результат и непонятные условия. Для выполнения — ограниченные пилоты. Для покупки — реальные предложения подходящим людям с фиксацией условий и действий.

Если показываете одному участнику оба варианта, учитывайте порядок. Второй может быть понятнее потому, что человек уже обсудил первый. Можно менять порядок между встречами и фиксировать его. Это не устраняет все ограничения небольшой выборки, но помогает не забыть очевидное альтернативное объяснение.

GOV.UK рекомендует выбирать исследовательскую работу исходя из вопросов, на которые нужно ответить. Для старта это полезная последовательность: сначала вопрос, затем метод, и только потом инструмент или красивый отчёт.

Записывайте сопоставимые факты

Сделайте таблицу, где одна строка соответствует одному контакту или одной согласованной возможности покупки. Укажите аудиторию, источник, вариант предложения, дату, конкретное действие и известную причину отказа. Не заменяйте отсутствие ответа догадкой о цене.

В отдельной колонке отмечайте существенные отличия: скидку, личное знакомство, другой объём, сезонную срочность. Если условия изменились посреди проверки, не объединяйте все наблюдения так, будто предложение оставалось одинаковым. Даже простая пометка о версии помогает восстановить картину через месяц.

Сравнивайте не только число согласий. Один вариант может чаще приводить к покупке, но требовать вдвое больше неоплаченного обсуждения и втрое больше вашего труда. Для выбора модели нужны также время продажи, расходы на исполнение, ограничения и качество результата для клиента.

Не объявляйте победу по двум продажам

Предположим, в учебной проверке предложение А получили десять подходящих человек, предложение Б — ещё десять. В первом случае купили двое, во втором — трое. Эти наблюдения полезны, но сами по себе не позволяют уверенно утверждать, что Б устойчиво продаётся лучше. Разница может быть связана с составом людей, обстоятельствами или случайностью.

Полноценный АБ-тест предусматривает случайное распределение и заранее продуманный анализ. В руководстве GOV.UK отдельно отмечается, что для статистических выводов часто требуется много пользователей. Универсального числа, подходящего любой услуге и любой ожидаемой разнице, нет.

При небольшом потоке можно принять временное управленческое решение. Например, оставить Б, потому что его понятнее объяснять и дешевле выполнять, а не потому, что «конверсия доказанно выше на 50%». Запишите основание и условие пересмотра. Такое решение честно отражает имеющиеся данные.

Сохраняйте разумные условия для покупателей

Сравнение предложений не требует скрывать существенную информацию, выдумывать ограничение мест или давать обещания, которые вы не собираетесь выполнять. Если вариант включает другую цену или состав, клиент должен видеть собственные условия до согласия.

Особенно осторожно экспериментируйте там, где покупатели общаются друг с другом или зависят от единого корпоративного решения. Разные сотрудники одной компании могут обсуждать оба варианта и влиять на ответ. Их нельзя автоматически считать независимыми наблюдениями. Иногда удобнее исследовать предложение на уровне компании или отказаться от численного сравнения в пользу качественного разбора.

Для ближайшей проверки выберите одно различие, одну аудиторию и один основной вопрос. Заранее запишите, что будете считать наблюдением, какие условия сохраните и по какой причине временно выберете вариант. После проверки оставьте рядом две строки: «что увидели» и «что пока неизвестно». Они помогут продолжать работу без необходимости выдавать ранний выбор за окончательную истину.