Слушал REWORK podcast от 37signals - эпизод «Built on Intuition». И прямо в тот же день попросили дать фидбэк на A/B тест. Совпадение идеальное.
Захожу - 4 варианта лендинга. Трафик - пара тысяч пользователей в неделю. Напрягся.
Казалось бы, сам аналитик, должен такое поддерживать. Но смотрю на эти 4 варианта и думаю: ребят, вам бы не тесты запускать, вам бы с клиентами поговорить.
Смотрите. 2000 пользователей, 4 варианта - это 500 на каждый. При конверсии 1% - это 5 конверсий на вариант. Пять. Какая тут статистическая значимость? Вы три недели ждете цифры, которые покажут (и то не факт) микроскопический аплифт. А могли бы поговорить с двадцатью клиентами и узнать, почему они на самом деле не покупают.
Вынужден признать: data-driven стал чем-то вроде религии. На него молятся все - от стартапа с тремя клиентами до корпорации с миллионным трафиком. Как будто если решение не подкреплено дашбордом, оно несерьезное. Или ненастоящее.
А AI эту историю только усиливает. Кажется, что можно кинуть пару промптов, получить инсайты и сэкономить кучу времени. Но это иллюзия шортката - ты просто быстрее приходишь к тем же бессмысленным выводам на тех же жиденьких данных.
Ну вот 37signals. Они запустили HEY - email-сервис - вообще без исследования рынка. Просто потому что сами ненавидели email.
Или Basecamp - одна цена для всех. Любой SaaS-консультант скажет, что это безумие. Ни за одним из этих решений не стояло данных. И каждое сработало.
Сработают ли остальные? Не факт.
Но в любом случае: данные - это инструмент оптимизации, а не создания чего-то нового. Они покажут, какая кнопка лучше конвертит. Но не скажут, нужна ли эта кнопка вообще.
На масштабе метрики незаменимы, вижу такое каждый день. Но на ранней стадии 5 глубинных интервью дадут больше, чем месяц A/B тестов.
Так может, бог все-таки слышит - просто не через дашборд?
Больше о работе с данными в продукте и маркетинге есть в Телеграм-канале «Модель атрибуции».
