Что такое гипотеза тест
Три маркетолога о том, как проверять гипотезы
5 правил тестирования в маркетинге.
Правильный цвет кнопки на лендинге может повысить конверсию в несколько раз. А если добавить в шапку сайта email и телефон, вырастет количество целевых обращений. Раньше это были гипотезы. Но после A/B тестирования они стали рабочим инструментом.
Попросили 3-х экспертов рассказать, как они строят и проверяют гипотезы в маркетинге.
В беседе принимали участие:
Элина Медынская, Senior Marketing Consultant в GlobalLogic Ukraine
Артем Товстенко, digital-маркетолог в LABA
Маргарита Кашуба, Chief marketing officer в OWOX BI
Что такое гипотеза в маркетинге
Элина: Тестирование гипотез напоминает подбор отмычки к закрытой двери — нужно постоянно менять вопросы (отмычки) и измерять данные (проверять, насколько они влияют на замок). Так получается прийти к обоснованным доказательствам и максимальному результату (открытой двери).
Артем: Гипотеза — это всегда предположение. Чаще всего она формируется благодаря фразе «А что, если…», и на основе анализа данных.
Маркетолог может интуитивно почувствовать, что можно заменить определенную деталь на сайте. Чем больше опыт, тем реже подводит интуиция. Бывает, все работает и так хорошо, но интуиция подсказывает, что можно сделать еще лучше.
Элина: Если у вас меняются аудитории, инструменты, продукты или вы запускаете новые проекты — не забывайте об интуиции (вы же маркетолог). Но важно научиться задавать правильные вопросы, формулировать гипотезы, разрабатывать к ним тесты, делать выводы и корректировать свои коммуникации.
#1. Правильно сформулируйте гипотезу
Элина:
Есть четыре критерия для выбора гипотезы:
Татьяна Лукинюк,
B2C-директор в Kyivstar
Катерина Левченко,
Маркетинг директор Danone Nutricia
Вопрос «Привлечет ли картинка в лендинге вакансии больше кандидатов?» — еще не гипотеза. Нужно добавить конкретики и понять, какие данные могут это доказать.
«Увеличит ли добавление картинок на лендинг с вакансией отклик кандидатов на 10%?» — это уже гипотеза.
Артем: Тестировать можно все, но всегда логически оценивайте гипотезу и придерживайтесь tone of voice. Не стоит тестировать абсурдные идеи, которые могут навредить бренду.
Например, у вас есть сайт для образованной бизнес-аудитории. И возникла идея добавить что-то некорректное на лендинг. Например, существует мнение, что в рекламе хорошо работают изображения женского тела. Но добавлять такое фото на бизнес-сайт — неуместно.
#2. Определите время на тестирование
Артем: На тестирование в среднем уходит одна-две недели. Этого достаточно, чтобы понять, насколько хорошо сработала гипотеза. Но бывают исключения.
Недавно мы тестировали один элемент на лендинге и закончили тест раньше. Мы ежедневно отслеживали конверсию и увидели, что новый лендинг был в 1,5 раза лучше. Он побеждал каждый день. На третий день мы решили отключить тест и поставили этот лендинг основным.
Бывает, тестирование длится дольше. Однажды мы проводили A/B тест лендинга с целью повысить конверсию в лид (заполнение формы регистрации). Конверсия не улучшилась, но во время теста мы заметили, что у нового лендинга намного выше конверсия в продажу. Это более существенный для нас показатель.
Мы решили продлить тест еще на две недели, чтобы собрать больше данных. В итоге, конверсия в лид снизилась, а конверсия в продажу и ROI — повысились.
Элина: Время на тестирование зависит от самой гипотезы. Но не стоит растягивать тест на несколько месяцев, потому что на него начнет влиять сезонность.
Оптимально измерять результат в недельных циклах. Маркетологи знают, что рассылки на рабочие почты в пятницу вечером открывают меньше, чем в понедельник утром или в обед. Поэтому недельный цикл позволяет собрать данные, обработать их и подготовиться к следующему циклу проверки гипотезы. При анализе данных важно использовать цифры за одинаковый промежуток времени.
#3. Выберите оптимальный метод тестирования
Популярные методы — A/B тест и мультивариантное тестирование (MVT).
Маргарита: A/B тестирование креативов в рекламе, разного оформления сайта, рассылок — это процесс, поставленный на поток.
Иногда простые гипотезы могут приносить много пользы. Например, недавно у нас была гипотеза: если поменять email отправителя новостной рассылки на новый, то больше писем попадет в Inbox. Она подтвердилась.
Или гипотеза, что если добавить в шапку сайта email и телефон, количество целевых обращений вырастет. К нам действительно стало приходить больше заявок.
Элина: «Отклик на вакансии увеличится на 100500%, если добавить картинки, изменить заголовок и увеличить текст» — это многоуровневая гипотеза.
Можно разделить ее на три отдельные гипотезы для А/В тестирования или использовать мультивариантные тесты.
#4. Проанализируйте результаты
Маргарита: Наша компания занимается маркетинг-аналитикой, поэтому мы считаем все. У нас за гипотезу отвечает один человек, который на время проверки считается руководителем проекта. Он следит за метриками и результатом. После проверки делаем выводы на основе таких вопросов:
Артем: Мы используем Google Optimize для тестирования. Запускаем эксперименты и следим за результатами каждый день.
Однажды мы хотели узнать, как изменится конверсия лендинга, если поменять цвет кнопки регистрации с красного на зеленый. Выбрали продукты для разных сегментов: финансистов, эйчаров и управленцев. Для последних зеленая кнопка сработала лучше — конверсия повысилась на 65%.
Мы пришли к выводу, что управленцы — это бизнес-аудитория. После этого решили протестировать новый цвет еще на трех лендингах для бизнес-аудитории — и везде он срабатывал лучше. Инсайт: разная аудитория по-разному реагирует на цвета.
Весь бизнес-контент в удобном формате. Интервью, кейсы, лайфхаки корп. мира — в нашем телеграм-канале. Присоединяйтесь!
#5. Проведите работу над ошибками и тестируйте новые гипотезы
Артем: Ошибки чаще всего возникают, когда:
Чем больше гипотез тестирует компания, тем больше будет успешных результатов. Не стоит бояться тестов — это процесс роста.
Чаще всего гипотеза проваливается, но это нормально. Если 4 из 10 гипотез будут удачными, мы в 4-х случаях продвинемся дальше — и точно узнаем, что работает, а что — нет.
Проверка гипотез: что это такое и как сделать тест для вашей маркетинговой кампании?
При попытке оптимизировать свою стратегию, вы можете столкнуться с таким понятием, как проверка гипотез. Этот термин звучит научно и может показаться сложным, но действительно может помочь в улучшении маркетингакомпании и получения большого количества конверсий. Наиболее хорошо проверка гипотез работает с B2B-компаниями.
Что такое проверка гипотез?
Если говорить проще, то это процесс наблюдения и формирования вопросов на основе собранной информации, и попытки ответить на него с помощью научных методик.
Прелесть этого тестированияв том, что оно проводится постепенно, есть время на обдумывание, а еще каждый этап фиксируется в записи. И хотя проверка гипотез — не новое явление, сейчас о нем немного забыли. Поэтому, если вы будете использовать методику в своей стратегии, можете рассчитывать на хорошее конкурентное преимущество. Итак, как же проводить тестирование? Разберемся, но сначала рассмотрим методологию.
Что такое гипотеза?
Это вопрос, основанный на конкретном наблюдении, которое вам нужно доказать. Чтобы вопрос стал гипотезой, он должен быть непременно доказуем — это основное условие. Например, вы можете доказать, что изменение заголовка в рекламном объявлении увеличит конверсию на 20%, но не сможете проверить вопрос «Поможет ли изменение заголовка увеличить конверсию?». Другими словами, гипотеза должна быть конкретной, а не расплывчатой.
Вот отличный пример.
Допустим, у вас есть десять постов в блоге. Два очень успешны. Они получают массу просмотров и шеров в социальных сетях. Вы заметили, что в успешных статьях больше изображений и более короткие абзацы, чем в других, менее успешных публикациях.
Тогда ваша гипотеза может быть следующей: «Будут ли другие статьи с большими изображениями и лучшим форматированием получать такое же внимание?»
Затем вы можете запустить тесты, чтобы оценить точность вашей гипотезы. Это и есть проверка гипотезы.
Почему A / B-тестирование и многовариантное тестирование тоже классифицируется как проверка гипотез
Такие популярные методы, как A / B-тестыи многовариантное тестирование, считаются проверкой гипотез.
Например, если вы запускаете рекламу для ретаргетинга, можете спросить, подходит ли ваше изображение, а также демографические настройки. Затем запустить A / B и многовариантные тесты, чтобы увидеть, есть ли увеличение трафика и продаж.
Нулевая гипотеза и альтернативная гипотеза
Это термин из логической статистики, из которой также вытекает проверка гипотез. Нулевая гипотеза — утверждение, которое относится к гипотезе, которую вы пытаетесь доказать.
Например, если вы увеличиваете количество изображений в статьях блога с целью повышения количества просмотров, нулевая гипотеза — то, что не произойдет никаких изменений.
Это не тот результат, на который вы надеетесь, но он дает вам представление о том, что вы пытаетесь опровергнуть.
Как использовать проверку гипотез правильно
Шаг 1: Решите, что тестировать
Выберете элементы, которые хотите улучшить. Как только у вас появится «испытуемый», считайте, что эксперимент начался.
Шаг 2: Определите свою гипотезу
В этом суть проверки гипотез. Вопрос, который вы зададите, чтобы затем попытаться его доказать.
Если реклама не конвертируется, вы можете спросить, достаточно ли убедителен креатив. Если ваши электронные письма не открываются, вы можете задаться вопросом, есть ли проблема в шаблоне или, наоборот, в его отсутствии.
Вопросы, которые вы зададите, станут основой для экспериментов.
Шаг 3: Определите ваши переменные
Используете ли вы A / B или многовариантное тестирование, или какой-либо другой способ тестирования гипотез, не важно. Выясните, какие изменения вы хотите внести, а затем начните тесты.
Шаг 4: Проверьте свои гипотезы
С вашей первоначальной гипотезой, нулевой гипотезой и альтернативной гипотезой, которую вы только что получили, начните процесс тестирования.
Шаг 5: Рассчитайте свои результаты, проанализируйте и действуйте
Дайте каждому тесту время, чтобы сгенерировать адекватные данные. Не спешите. Вносить изменения в зависимости от прихотей или эмоций — совсем не лучшее решение.
Вместо этого следуйте фактам. Если ваши гипотезы действительно подтвердятся, вы получите доказательство того, что ваши изменения работают
Если нулевые или альтернативные гипотезы доказаны, найдите другие переменные.
После того, как вы получили результаты тестов по рекламе, вашей посадочной странице и готовы к запуску рекламной кампании, запускайте ее. Например, через программатик платформу. Зарегистрируйтесь прямо сейчас.
Проверка гипотез спроса и ценности продукта без разработки
Эту статью вместе с GoPractice подготовил Денис Мартынцев. У Дениса за плечами более десяти лет практического опыта в цифровом бизнесе в роли маркетолога, менеджера продуктов. Сейчас Денис в роли эдвайзера помогает компаниям организовывать команды роста, ведет курсы и телеграм-канал про рост продуктов.
Далее повествование ведется от лица Дениса.
Существует множество причин, по которым новый продукт может не взлететь. Самая популярная — он будет попросту не нужен рынку. Такие выводы сделали в исследовательской компании CB Insights, проанализировав 101 провальный стартап.
Я лично был свидетелем и даже соучастником историй, когда влюбленные в свою идею основатели тратили месяцы и сотни тысяч долларов на разработку продукта, который в результате оказывался никому не нужен.
Чтобы не тратить сотни тысяч долларов впустую, некоторые команды стали проверять востребованность будущего продукта прежде, чем приступать к написанию кода. Такой подход известен как Riskiest Assumption Test (RAT). Он предполагает проверку наиболее рискованных гипотез и сбор обратной связи от пользователей до непосредственной реализации продукта.
В этой статье мы обсудим два типа наиболее рискованных гипотез (спроса и ценности) и рассмотрим примеры разных способов их проверки из мировой и российской практики.
Если вы хотите глубже разобраться в том, как создаются, развиваются и масштабируются продукты, пройдите обучение в симуляторах GoPractice.
Не знаете с чего начать? Пройдите бесплатный тест для оценки навыков управления продуктом. Вы определите свои сильные стороны и слепые зоны, получите план профессионального развития.
Еще больше ценных материалов и инсайтов — в телеграм-каналах GoPractice и GoPractice Insights. Добавляйтесь в чат Ask Kevin!, чтобы участвовать в обсуждениях с другими участниками нашего коммьюнити.
Распространенные ошибки при проверке ключевых гипотез в основе продукта
Самая распространенная ошибка – стартовать разработку, не проверяя ключевых гипотез, лежащих в основе нового продукта. В этом случае команды полностью уверены в своей идее и не видят смысла ее проверять. Поэтому сразу начинают делать.
Вторая по популярности ошибка – искать подтверждение гипотезе, вместо того, чтобы ее проверять. Зачастую тестирование спроса или ценности становится формальным шагом. Решение принимается не на основе фактически полученных данных, а исходя из первоначальных установок. Происходит это обычно по двум причинам:
Третья ошибка – тестируются неважные вещи. Вместо тестирования ключевых рисков (спроса и ценности) проверяются вторичные элементы, связанные с субъективным восприятием (внешний вид, неосновные функции и тд). Как результат – потеря времени и обесценивание самого процесса проверки гипотез.
Теперь, когда ошибки нам известны, можно приступить к изучению работающих подходов на реальных примерах.
Проверка гипотезы спроса нового продукта
Гипотеза спроса – одно из самых рискованных предположений в основе нового продукта. Она заключается в том, что потенциальная аудитория заинтересована в решении определенной проблемы. Гипотезу спроса также называют гипотезой потребности или гипотезой проблемы.
Чтобы протестировать спрос, нужно изучить целевую аудиторию и возникающие у них задачи. А иногда заинтересовать и даже продать аудитории продукт, который еще не создан.
Проверка спроса через посадочную страницу с описанием
Наиболее распространенный способ проверки спроса – сделать посадочную страницу с подробным описанием и иллюстрациями продукта и продемонстрировать ее потенциальным покупателям.
Рокетбанк и скриншот вместо рекламы
Прежде, чем написать хоть строчку кода, основатели «Рокетбанка» сделали посадочную страницу с ярким описанием возможностей продукта. Чтобы получить трафик, они использовали в оформлении скриншот прототипа приложения с переводом денег Славе Кутееву – арт-директору студии Артемия Лебедева. Дизайнер заметил новый российский сервис и запостил его разбор в «ЖЖ» Лебедева в популярной рубрике «Бизнес-линч».
Как вспоминает один из основателей Виктор Лысенко: «К нам на страничку хлынул поток посетителей, хотя как такового продукта еще не было. Если можно «лайфхакнуть» и с помощью креатива решить проблему – это круче, чем потратить деньги при том же уровне результатов».
В итоге на страницу с описанием нового продукта пришло более 10 тыс. человек, из которых больше 10% оставили заявки. Это доказало команде востребованность мобильного банка и стало отправной точкой для разработки приложения.
Беспроводная зарядка Plum
Создатели девайса для беспроводной зарядки Plum проверяли интерес покупателей с помощью продающего лендинга, собранного на конструкторе Tilda, и трафика из Facebook Ads.
Полученные в ходе эксперимента метрики (CTR, CR, Cost Per Lead) соответствовали ожиданиям команды и подтвердили жизнеспособность unit-экономики.
Следующим этапом команда Plum планирует запустить краудфандинг-кампанию на Kickstarter и в случае успеха приступить к непосредственному производству продукта. Это отличный способ без риска проверить спрос. Если он не подтвердится, деньги, полученные на предзаказах, можно вернуть покупателям.
Проверка спроса через продажи на сторонней площадке
В некоторых случаях не требуется создавать собственный сайт – достаточно разместить объявление на площадке, где уже собрана аудитория потенциальных клиентов продукта.
Ранний успех Pebble на Kickstarter
Наиболее популярная площадка для тестирования спроса на инновационные продукты – Kickstarter. Формат краудфандинговой платформы позволяет собирать предзаказы до начала производства или разработки.
В 2012 году создатели умных часов Pebble за несколько недель собрали на Kickstarter более 10 млн долларов вместо запланированных 100 тыс. Запуск показал очень высокий спрос на умные часы с дисплеем e-paper для iPhone и Android.
В 2015 году Pebble использовали Kickstarter снова, чтобы подтвердить спрос на часы с цветным дисплеем Pebble Time. Результат кампании оказался еще более впечатляющим – более 15 млн долларов собрано на предзаказах.
Когда спрос доказан, можно приступать к производству продукта с уверенностью, что он будет хорошо продаваться. В то же время, если бы создатели Pebble не подтвердили наличие спроса, то часы с цветным дисплеем Pebble Time так и остались концептом и не получили бы физического воплощения.
Фабрика Alibaba для экспериментов с новыми товарами
В Китае почти у каждого блогера есть свой магазин на одной из популярных eCommerce платформ. Особенность в том, что рекламируя товар или устраивая распродажу, блогеры могут продавать то, что еще не существует. Такой подход позволяет определить наиболее востребованный дизайн и размер тиража в зависимости от реальных предпочтений аудитории.
Чтобы поддерживать продавцов, Alibaba построили целую фабрику, ускоряющую процесс производства в несколько раз. Теперь на создание новой партии товара вместо обычных 90 дней уходит не более двух недель.
Зная, что уже через 14 дней первые покупатели получат товар, продавцы могут больше и смелее экспериментировать с новыми идеями.
Китайские продавцы используют похожий подход с загрузкой фотографий и описаний несуществующих товаров на многих площадках (например, Aliexpress). Если продажи идут хорошо, то на производстве заказывается партия для реализации. Если плохо, то немногочисленные заказы отменяются, а товар снимается с продажи.
Проверка спроса через рекламу и прямые продажи
Спрос на некоторые продукты сложно проверить лендингом или объявлением. Особенно если процесс продажи включает длительное общение, звонок, а иногда и встречу с покупателем. В таких ситуациях можно использовать возможности таргетированной рекламы в комбинации с личным общением. Опять же без реально созданного продукта.
Простые креативы для сложного продукта
Для проверки востребованности идеи основатели магазина инвестиций «Винвестор» размещали рекламные объявления в Facebook. Реагируя на рекламу, клиенты оставляли свои контактные данные, не выходя из социальной сети.
Полученные лиды обзванивались, целевым клиентам предлагались брокерские продукты.
Объявления были намеренно сделаны в простом стиле и с яркими призывами к действию. Это позволяло собирать много заявок и исследовать их качество. Проанализировав конверсии, стоимость привлечения и процент целевых клиентов, команда «Винвестора» приняла решения о создании полноценного продукта.
Проверка спроса через создание и продвижение продукта-пустышки
Когда для принятия решения о покупке продукта важен минимальный опыт взаимодействия с ним, можно предложить клиентам оболочку без начинки.
Приложение с онбордингом и платежным экраном
Для проверки гипотезы спроса на дейтинг-ассистент, Wowmaking Team сделали Android-приложение без контента и функционала, содержащее только экраны онбординга и платежный экран с предложением купить подписку.
Реклама в Facebook Ads позволила привлечь первых пользователей и получить данные по ключевым метрикам: охват кампании, конверсия в установку, конверсия в покупку, стоимость привлечения. Пользователям, совершившим покупку, деньги возвращали, вручную отменяя подписку.
Спрос на приложение дейтинг-ассистент не подтвердился – конверсия из установки в покупку была недостаточной для сходимости экономики, а охват слишком маленьким. Проект решили не развивать. Весь процесс проверки гипотезы, включая создание дизайна приложения, минимальную разработку, запуск рекламы и анализ результатов уложился в три недели.
Следующим шагом Wowmaking Team планируют похожим образом протестировать спрос на приложение-ассистент по построению отношений. С учетом имеющихся наработок это должно занять не больше полутора недель.
Проверка спроса на новую функциональность с помощью fake buttons
Необходимость проверить спрос возникает не только для отдельных продуктов, но и для новых функций внутри существующих продуктов. Стоимость разработки может быть существенной и не имея подтверждения востребованности, компания рискует потратить ресурсы впустую. Для таких ситуаций можно применять метод поддельных кнопок.
Видео-консультант на сайте МТС
Для проверки гипотезы о том, что онлайн-звонок с сайта будет востребован пользователями, компания МТС провела эксперимент с поддельными кнопками. С помощью уже существующего функционала в интерфейс добавили pop-up окно, предлагающее позвонить видео-консультанту прямо с сайта. Окно показывали не всем посетителям, а небольшой тестовой группе в несколько тысяч человек. Содержание окна зависело от исходной страницы показа (товар, корзина, витрина, карта).
Если пользователь нажимал на кнопку, он переадресовывался на опрос, в ходе которого выяснилась, какую задачу он хочет решить, готов ли сделать заказ, какие сложности возникли в процессе. Средняя конверсия в прохождение опроса составила около 5%.
Полученные цифры и ответы респондентов позволили команде подтвердить востребованность функционала и уверенно перейти к следующему шагу – разработке MVP.
Проверка спроса с помощью видео с демонстрацией работы продукта
Один из самых простых и действенных способов проверить спрос без разработки, показать пользователям видео, имитирующие работу продукта. Так вы сможете наглядно продемонстрировать его возможности, интерфейс, дизайн и ситуации, где продукт будет полезен.
Проверка спроса на продукт для синхронизации файлов на разных устройствах
Известный пример проверки спроса с помощью видео – Dropbox. Сложный в разработке продукт, позволяющий синхронизировать файлы не нескольких устройствах, был создан после того, как основатели и инвесторы получили весомые доказательства, что продукт действительно востребован широкой аудиторией.
Видео, созданное на основе прототипа и наглядно демонстрирующее, как работает продукт, позволило привлечь в waiting list около 75000 потенциальных пользователей уже спустя одну ночь после публикации. Основатели получили уверенность, что нашли отличное решение проблемы, с которой многие сталкивались, но никто не пытался решать. Теперь оставалось дело за малым – создать это решение.
Виртуальная примерка кроссовок
Белорусский стартап Wannaby использовал видео для проверки востребованности технологии виртуальной примерки кроссовок Wanna Kicks. В простой форме они сумели продемонстрировать возможности технологии, которой еще нет.
Описание проекта и ролик были опубликованы на Product Hunt, что позволило получить множество откликов. Сейчас Wanna Kicks — это основной продукт компании. Благодаря демонстрационным роликам и полученной реакции рынка и фидбеку на них, компания сэкономила много времени и денег.
Примером поделился Герман Полещук. Компания SLON Media, снявшая ролик для Wannaby, поставила процесс создания промо-роликов несуществующих продуктов на поток и сейчас помогает многим стартапам с проверкой гипотез спроса.
Отчасти с помощью видео можно протестировать и наличие у будущего продукта ценности. Но чтобы доказать гипотезу ценности в полной мере, надо понять, как люди будут использовать продукт в реальности.
Проверка гипотезы ценности нового продукта
Когда гипотеза спроса подтверждена, и вам точно известно, что продукт решает востребованную задачу среди потенциальных покупателей, следующим ключевым риском становится гипотеза ценности. Это предположение о том, что задуманная реализация продукта будет приносить реальную ценность клиентам.
Обычно это значит, что продукт будет решать задачу пользователей эффективнее, чем доступные на рынке альтернативы. В противном случае у пользователей не будет мотивации переключаться с одного решения на другое.
Проверка ценности через имитацию работы за счет сторонних сервисов
Дать пользователям возможность попробовать что-то максимально похожее на будущий продукт в деле – наиболее валидный способ проверить гипотезу ценности.
Сделать это можно с помощью сторонних сервисов, которые позволяют воспроизводить сложные функции и автоматизировать их работу без написания собственного кода.
Фреймворк для управления гипотезами в продуктовых командах на Airtable
Пару лет назад меня (Дениса Мартынцева) посетила идея сделать сервис для удобного управления гипотезами в продуктовых и маркетинговых командах. Идея была продиктована собственной болью из-за неприспособленности существующих таск-трекеров для работы с гипотезами.
Наученный горьким опытом запуска продуктов без проверки рискованных предположений, я сделал функциональный MVP, чтобы протестировать ценность своего решения. С помощью сервиса Airtable я настроил шаблон, который включал основные возможности будущего продукта: создание гипотез, командный скоринг, сортировка по приоритетам, управление статусами, фиксация полученных знаний.
Шаблон пользовался популярностью, его подключили более 1000 человек, что подтвердило гипотезу спроса. Однако, проведенные с пользователями интервью показали, что шаблон очень редко приживался в командах и не становился полноценным инструментом. Ценность продукта не подтвердилась, я принял решение отказаться от планов по разработке.
Имитация работы продукта через iFrame с залепленным логотипом другого сервиса
Создатели конструктора голосовых приложений Voiceflow (на момент запуска назывался Storyline) проверили ценность продукта, не разрабатывая собственный движок.
За два дня они через iframe вставили на сайт сторонний mindmap сервис, залепив их логотип своим, и начали привлекать пользователей. Удачный запуск на Product Hunt принес первую 1000 регистраций и около 50 активных пользователей, которые заходили в продукт регулярно.
Полученные в ходе эксперимента данные, позволили подтвердить ценность для пользователей и показали, что разработка собственного продукта имеет смысл. Команда попала в Y Combinator, где в срочном порядке основатели писали код, чтобы успеть к демо-дню сделать полноценный продукт. Задача оказалась не из легких, но результат оправдал ожидания.
Проверка ценности через ручное воспроизведение опыта использования продукта
Чтобы без разработки проверить, принесет ли реальную ценность пользователям продукт, предполагающий сложную автоматизацию, можно воспроизвести процесс работы системы в ручном режиме.
Чат-бот для поиска в Яндексе
В компании Яндекс с помощью простейшего чат-бота и команды асессоров проверяли гипотезу, что люди будут пользоваться виртуальным ассистентом. Бот был анонсирован внутри компании, как новейшая разработка, оснащенная искусственным интеллектом. Фактически каждый запрос получал живой человек, который и отвечал на него пользователю.
Такой подход к проверке исходной гипотезы позволил команде обнаружить важный повторяющийся паттерн: впервые используя виртуального ассистента, многие пользователи стремились «сломать» его, задавая каверзные вопросы. После того, как они понимали, что бот достаточно устойчивый, начинали использовать регулярно.
За три недели эксперимента команде удалось подтвердить, что формат взаимодействия с поисковой системой через бота достаточно ценный для пользователей и выявить основные типы запросов.
Результатом эксперимента, проведенного внутри компании, стало решение разработать и выпустить виртуального ассистента в публичный доступ. Полученные в ходе эксперимента данные и знания впоследствии были применены при разработке умного голосового ассистента Алисы.
Совместные тренировки через WhatsApp
Разработчики приложения для совместных тренировок WorkoutMe проверяли ценность продукта с помощью WhatsApp и excel-таблиц. В рамках эксперимента собрали 25 заинтересованных пользователей и вручную организовывали для них совместные занятия в течение полутора недель.
Тестирование и последующий опрос показали, что людям интересен такой формат, и они продолжают возвращаться для повторных занятий. На основе этих данных команда разработала первую версию приложения. В ноябре продукт достиг 4 места в рейтинге Product of the Day и получил поддержку основателя Product Hunt.
Проверка ценности продуктов-маркетплейсов через группы в социальных сетях
Ценность продуктов, предполагающих самостоятельное взаимодействие между пользователями, удобно и быстро проверяется с помощью групп в социальных сетях.
Ride-hailing сервис из группы в VK
Зимой 2012 года в Якутске были сильные морозы и таксисты, пользуясь ситуацией, подняли тарифы. В ответ на это местный студент создал ВКонтакте сообщество «Независимые водители», в котором участники оставляли заявки на поездки, предлагая цены, а водители брали заказы. За пол года группа набрала более 60 тыс. участников.
Заметив готовую модель продукта с подтвержденной ценностью, якутский предприниматель Арсен Томский, выкупил группу у создателя и на ее основе запустил приложение inDriver. Сейчас inDriver – международный продукт, которым пользуются более 50 млн пассажиров и водителей во всем мире.
Группы для продажи вещей в Facebook
Facebook Marketplace на сегодняшний день – одна из крупнейших площадок для продажи подержанных вещей в США. В Facebook было огромное количество групп, в которых люди объединялись для перепродажи вещей друг другу. Facebook Groups не были для этого приспособлены, поэтому команда быстро идентифицировала пути, как создать более эффективное решение для пользователей этих групп. В итоге получился Facebook Marketplace.
Проверка ценности через прототип
Юзабилити тестирование прототипов позволяет наглядно увидеть процесс использования продукта, а последующие интервью дают достаточно точное понимание наличия или отсутствия ценности у исследуемого решения.
Помощник для геймеров
Перед тем как приступить к разработке голосового помощника для геймеров GOSU.AI, создатели написали примерный сценарий работы и провели тестирование прототипа.
Новичок играл в League of Legends, параллельно ему включались фразы, имитирующие виртуального ассистента.
Имитация подсказок в Навигаторе с помощью подсказок на бумаге
Для тестирования прототипов интерфейса подсказок, команда Яндекс.Навигатора обошлась без единой строчки кода.
Испытатель вел машину и на экране смартфона видел подсказки, которые с помощью нехитрой телескопической палки и прикрепленных к ней кусочков бумаги с текстом, выводил сидящий рядом пассажир.
Заключение
Создавать новые продукты – длительный и дорогостоящий процесс. Начинать разработку без наличия подтверждения спроса и ценности – неэффективно. Продолжать разработку с доказательством, что продукт не востребован или не создает добавочной ценности – нет смысла.
С развитием все большего количества no-code решений, позволяющих автоматизировать процессы, делать прототипы, а иногда и полноценные продукты с простой логикой, проверка наиболее рискованных гипотез становится все более простой и быстрой задачей. Главное быть готовым действовать и менять планы в соответствии с новой информацией.
Вы прочитали статью, которую подготовили GoPractice и Денис Мартынцев.
Если вы хотите глубже разобраться в том, как создаются, развиваются и масштабируются продукты, пройдите обучение в симуляторах GoPractice.
Не знаете с чего начать? Пройдите бесплатный тест для оценки навыков управления продуктом. Вы определите свои сильные стороны и слепые зоны, получите план профессионального развития.
Еще больше ценных материалов и инсайтов — в телеграм-каналах GoPractice и GoPractice Insights. Добавляйтесь в чат Ask Kevin!, чтобы участвовать в обсуждениях с другими участниками нашего коммьюнити.
Эссе и образовательные симуляторы про продакт-менеджмент, продуктовую аналитику, маркетинг и рост