Продуктовая аналитика

https://youtu.be/YL--dvVwVNo?si=RK2w-aDLCyfdb9fH

Способы проверки продуктовых гипотез 🔹 A/B-тест — показываем разным группам разные версии, сравниваем метрики 🔹 Fake door — «кнопка-обманка», меряем интерес по клику до реализации фичи 🔹 Customer Dev / интервью — качественные инсайты напрямую от пользователей 🔹 Опросы (survey) — быстрая проверка гипотез на широкой аудитории 🔹 Прототип / Wizard of Oz — имитируем фичу вручную, смотрим на реакцию 🔹 Анализ данных (ретро) — ищем подтверждение в уже накопленной статистике Как выбрать метод: чем дороже реализация и выше риск — тем дешевле и быстрее должен быть первый тест (сначала fake door, потом уже полноценный A/B).

Продуктовая гипотеза — предположение, которое можно проверить экспериментом и получить измеримый результат. Структура (формула CJE или похожая): 📌 Если [делаем X] 📌 То [получим метрику Y] 📌 Потому что [причина/инсайт] 📌 Мы поймём, что правы, если [конкретное число/порог] Пример: Если добавим прогресс-бар в онбординг, То CR в завершение вырастет на 15%, Потому что пользователи бросают на середине из-за неясности, сколько шагов осталось, Поймём, что правы, если CR ≥ 40% за 2 недели теста.

🤔 Раньше я думал, что понимаю бизнеc Многие идут в продуктовую аналитику, чтобы быть ближе к бизнесу. Растить продукт, драйвить метрики и выручку, влиять на решения. Девять лет назад я выбрал это направление ровно по такой причине. Но что значит «приносить пользу бизнесу», я понял не тогда, когда набрался опыта в найме и стал хедом. По-настоящему это пришло только со своими продуктами. В частности, онлайн-школой. И вот почему: 🔸 В найме ты ничем не рискуешь Если твоя гипотеза не выстрелила, то бизнес потерял месяц бюджета команды. Ты же потерял ноль. Зарплата все равно придет на карту. А в худшем случае сменишь работу. И обычно с повышением. Провал, за который не платишь, ничему не учит. Я почти не помню своих неудачных гипотез из найма. А из своего дела помню каждую, потому что каждая стоила денег. И выигрыш ты тоже не забираешь. Поэтому рационально искать не то, что сработает, а то, что можно защитить на ревью. Ведь именно так устроены стимулы. 🔸 Ты не видел, как деньги появляются с нуля Ты приходишь в готовый денежный поток и оптимизируешь его на проценты. Сделать так, чтобы поток вообще возник, это принципиально другая задача. Юнит-экономика в найме остается упражнением в табличке. В своем деле от нее зависит, доживешь ли ты до следующего месяца. 🔸 Доступ к разговорам о бизнесе не равен пониманию бизнеса Ты сидишь на встречах с C-level и уверен, что находишься внутри. Но «быть ближе к бизнесу» на практике означает всего лишь быть ближе к людям, которые принимают решения. Но не к последствиям этих решений. Настоящая метрика твоего успеха измеряется не деньгами компании, а восприятием тебя: сложность задач, видимость, отношения со стейкхолдерами. Можно построить отличную карьеру, ни разу не заработав компании ни рубля. 🔸 В своем деле обратная связь другая Ты на своей шкуре ощущаешь, как действие превращается в результат. И как бездействие превращается в его отсутствие. Никому нельзя предъявить красиво оформленный отчет вместо выручки. Если бы я вернулся в найм, я бы совсем иначе смотрел на выручку компании. Видел бы, что реально двигает деньги, а что остается корпоративным булшитом: двигание задачек на доске, встречи, на которых ничего не решается, отчеты, которые никто не открывает, но все исправно просят. — Что в вашей компании создает больше всего видимости работы при наименьшем влиянии на деньги? У меня безусловный чемпион это регулярные отчеты, которые открывает один важный человек раз в квартал.

https://www.youtube.com/live/LOI52roG_g4?si=kwXWSPyflEVi8XQB

📋 LEAN CANVAS — БИЗНЕС-МОДЕЛЬ НА ОДНОМ ЛИСТЕ Пока классический бизнес-план пишется неделями, Lean Canvas можно набросать за час — и это не упрощение ради упрощения, а осознанный фокус именно на рисках, а не на красивом оформлении. — Разбирается на 9 блоков, вот они по порядку заполнения: 1. Problem (проблема) Какие 1-3 главные проблемы есть у твоего пользователя? Без чётко названной проблемы дальше двигаться бессмысленно. 2. Customer Segments (сегменты клиентов) Кто именно испытывает эту проблему? Важно: не «все люди», а конкретный сегмент. 3. Unique Value Proposition (уникальное ценностное предложение) Одно понятное предложение — почему выбрать именно тебя, а не альтернативу (включая «ничего не делать»). 4. Solution (решение) Как именно ты решаешь названную проблему — самый минимальный набор функций, а не весь продукт мечты. 5. Channels (каналы) Как ты достучишься до клиента — реклама, соцсети, партнёрства, сарафанное радио. 6. Revenue Streams (потоки дохода) Как именно бизнес зарабатывает — подписка, разовая продажа, комиссия, реклама. 7. Cost Structure (структура расходов) На что уходят деньги — разработка, маркетинг, зарплаты, инфраструктура. 8. Key Metrics (ключевые метрики) Какие цифры покажут, что бизнес реально работает (а не просто «нравится основателю»). 9. Unfair Advantage (нечестное преимущество) Что у тебя есть такого, что конкурент не может просто скопировать — уникальная экспертиза, эксклюзивные данные, сеть контактов. — 📌 Простая аналогия Представь, что классический бизнес-план — это подробная многостраничная кулинарная книга, а Lean Canvas — это листочек с рецептом, который висит на холодильнике: минимум текста, но всё нужное, чтобы понять — стоит ли вообще готовить это блюдо, прежде чем закупать продукты на месяц вперёд. — ⚠️ Почему это удобнее классического бизнес-плана для стартапа Классический бизнес-план хорош, когда бизнес-модель уже понятна и стабильна (например, для банка при выдаче кредита). А Lean Canvas создан именно для ситуации неопределённости — когда ты ещё не знаешь, сработает ли идея, и тебе важно быстро увидеть все риски на одном листе, а не потратить месяц на документ, который придётся полностью переписывать после первой обратной связи от клиентов.

A/A-ТЕСТ vs A/B-ТЕСТ Звучит почти одинаково, но задачи у них разные — и A/A-тест часто недооценивают. — A/B-тест Показываем двум группам разные версии (кнопка синяя vs зелёная, старый алгоритм vs новый) и смотрим, какая версия работает лучше. Цель — найти реальный эффект от изменения. A/A-тест Показываем двум группам абсолютно ОДИНАКОВУЮ версию — без всяких изменений. Обе группы видят одно и то же. — 🤔 Если версии одинаковые, зачем вообще это тестировать? Затем, что A/A-тест проверяет не продукт, а саму систему тестирования. Если ты разделил пользователей на две группы случайным образом и не менял им ничего — по-хорошему, метрики в этих группах должны быть статистически неотличимы друг от друга. Если же A/A-тест внезапно показывает «значимую» разницу между двумя одинаковыми группами — это тревожный звоночек: • Система разбиения на группы работает некорректно (нет честной рандомизации) • Трекинг событий/метрик настроен с ошибкой • Порог статистической значимости выбран слишком мягко, и тест регулярно ловит случайный шум за «эффект» — 📌 Простая аналогия Представь, что ты проверяешь, точны ли твои весы. Ты кладёшь одну и ту же гирю на весы дважды (это A/A-тест весов) — если оба раза весы показывают разный вес, доверять им в реальном взвешивании нельзя. Только убедившись, что весы честные, ты можешь взвешивать разные предметы и сравнивать результат (это уже A/B). — ⚠️ Когда стоит гонять A/A-тест Перед запуском нового инструмента A/B-тестирования (новая платформа, новый способ разбиения аудитории) — чтобы убедиться, что система «врёт» не чаще, чем допустимо по теории вероятности (обычно ложное срабатывание ожидается примерно в 5% случаев при стандартном уровне значимости). Если A/A-тест ловит «эффект» значительно чаще — сначала чини инфраструктуру тестирования, а потом уже гоняй A/B и делай выводы на его основе.

КАКИЕ МЕТРИКИ СМОТРЕТЬ В ЗАВИСИМОСТИ ОТ ТИПА БИЗНЕСА Универсальных метрик не существует — то, что критично для одного бизнеса, может быть вообще неважно для другого. Разбираем по типам. — 🛒 E-commerce (интернет-магазин) Ключевое — цикл «зашёл → купил → вернулся снова». • Conversion Rate (доля посетителей, оформивших заказ) • Average Order Value (AOV) — средний чек • Cart Abandonment Rate — доля брошенных корзин • Repeat Purchase Rate — доля повторных покупок — 📱 SaaS / подписочные сервисы Ключевое — не разовая покупка, а долгая жизнь клиента. • MRR/ARR (Monthly/Annual Recurring Revenue) — регулярный доход • Churn Rate — отток подписчиков • LTV/CAC — окупаемость привлечения клиента • Expansion Revenue — доход от допродаж существующим клиентам (апгрейд тарифа) — 🏪 Маркетплейсы (двусторонние платформы) Ключевое — баланс между двумя сторонами: продавцами и покупателями. • GMV (Gross Merchandise Value) — общий объём сделок на платформе • Take Rate — какой процент от GMV забирает платформа себе • Liquidity — как быстро находится совпадение спроса и предложения (например, доля объявлений, получивших отклик за 24 часа) • Retention продавцов отдельно от retention покупателей — это разные аудитории с разной мотивацией — 💳 Финтех / платёжные сервисы Ключевое — деньги должны доходить быстро и без потерь. • Conversion Rate оплаты — доля успешных платежей от попыток • Authorization Rate — доля успешно прошедших авторизаций • Chargeback Rate — доля оспоренных платежей • Time to Settlement — скорость зачисления денег мерчанту — 🎮 Мобильные игры / контентные приложения Ключевое — вовлечённость и монетизация внимания. • DAU/MAU (Sticky Factor) — «липкость» продукта • ARPDAU (доход на одного активного пользователя в день) • Retention D1/D7/D30 — удержание в первые дни, неделю, месяц • Session Length и Frequency — сколько и как часто играют — 📰 Медиа / контентные платформы Ключевое — внимание аудитории, а не разовый клик. • Time on Page / Watch Time — время, проведённое с контентом • Return Visit Rate — доля вернувшихся читателей/зрителей • Scroll Depth — как глубоко долистывают материал • Subscription Conversion — переход в платную подписку (если есть paywall) — ⚠️ Главное правило: не копируй чужой набор метрик бездумно. Сначала пойми бизнес-модель — как компания зарабатывает и что для неё «успех» — и уже под это подбирай метрики, а не наоборот.

VANITY METRICS vs ACTIONABLE (CLARITY) METRICS Метрика метрике рознь — одна тешит самолюбие, вторая реально помогает принимать решения. Разбираемся, как их отличать. — Vanity metrics («метрики тщеславия») Числа, которые красиво выглядят в презентации, но не подсказывают, что делать дальше. Растут почти всегда сами по себе — просто потому что продукт существует и время идёт. Примеры: общее число регистраций за всё время, число скачиваний приложения, число подписчиков в соцсети, суммарный трафик на сайт. Проблема: эти цифры почти никогда не падают (люди не «отписываются» из общего счётчика скачиваний), поэтому они плохо показывают, ухудшается продукт или улучшается прямо сейчас. — Actionable metrics («метрики действия») Показывают причинно-следственную связь и подсказывают конкретное решение. Их можно разбить на сегменты, сравнить в динамике и понять — расти или нет, и почему. Примеры: конверсия из регистрации в первый платёж, retention на 7-й день, доля пользователей, дошедших до ключевого действия за первую неделю. — 📌 Простой пример разницы «У нас миллион скачиваний приложения!» — это vanity. Красиво звучит, но не понятно, работает ли продукт. «Из тех, кто скачал приложение на прошлой неделе, только 12% открыли его больше одного раза» — это actionable. Сразу видно проблему (низкая активация) и направление, куда копать. — ⚠️ Как проверить метрику на «vanity» Задай вопрос: «если эта цифра завтра вырастет на 20%, что конкретно мы сделаем по-другому?» Если ответа нет — вероятно, это vanity metric. Это не значит, что vanity-метрики вообще не нужны — иногда они важны для инвесторов или маркетинга (масштаб красиво продаёт). Но при принятии продуктовых решений всегда искать actionable-метрику под капотом.

https://youtu.be/_rHIjWU-Row?is=nAOVF58yWL8ktPAB

https://youtu.be/w5MaVDjEvfQ?is=SFXnTHV4DwUlIbpW

https://youtu.be/6acMa49FGbk?is=p29iWtGlCv3fT1dc

🧪 ТЕСТОВАЯ ГРУППА vs КОНТРОЛЬНАЯ ГРУППА Основа любого A/B-теста, а путают до сих пор часто — разбираю на пальцах. — Контрольная группа (control group) Живёт как жила раньше, без изменений. Это твоя точка отсчёта — «как есть». Тестовая группа (test/treatment group) Получает изменение, которое ты хочешь проверить — новую кнопку, другой текст, новый алгоритм рекомендаций. — Простой пример: хочешь проверить, увеличит ли зелёная кнопка «Купить» конверсию по сравнению с синей. • Контрольная группа видит старую синюю кнопку • Тестовая группа видит новую зелёную кнопку Обе группы существуют одновременно, а не «сначала показали синюю всем, потом зелёную всем» — иначе непонятно, повлияла ли кнопка или просто изменился сезон/погода/настроение аудитории. — ⚠️ Зачем вообще нужна контрольная группа, если можно просто выкатить новую фичу всем и посмотреть на метрики до/после? Потому что метрики и без изменений колеблются сами по себе — сезонность, реклама, внешние события. Без контрольной группы ты не отличишь эффект своей фичи от обычного шума. Контрольная группа — это то, с чем ты сравниваешь результат, при прочих равных условиях. — Ключевое правило: группы должны быть случайно и одинаково по составу разделены (рандомизация), иначе сравнение будет нечестным — например, если в тестовую группу случайно попали более активные пользователи, рост метрики может быть просто из-за этого, а не из-за твоего изменения.

https://youtu.be/MV2LWi4ZrHo?is=2CnInj2Qx13dL_Tv

https://youtu.be/5NfbUTlTs7w?is=QFaGmjooigpc2jab

Описание бизнес-процессов по шагам на примерах В этом ролике автор поговорит про цель и модели бизнес-процессов, а после перейдет к описанию бизнес-процессов по шагам. 00:00 Вступление 00:22 Когда нужно описывать бизнес-процессы 02:37 Цель описания бизнес-процесса 04:10 Модель as is и to be 06:19 Пошаговая технология описания бизнес-процесса 12:48 Проверка бизнес-процесса на отсутствие разрывов Смотреть это видео на youtube: youtu.be/Jfb8V2V79ro Системный и Бизнес-анализ

Бизнес-аналитик vs Системный аналитик: В чем разница? В этом ролике автор подробно разбирает разделение зон ответственности между бизнес и системным анализом для оптимизации рабочего процесса аналитики. Смотреть это видео на youtube: youtu.be/JIvcS8KT01g Системный и Бизнес-анализ

Что на самом деле проверяют на техничке БА? На консультациях вы часто говорите, что по тем или иным причинам не знаете, что спрашивают на техническом собеседовании БА Давайте разбираться 🥇 На самом деле, структура технического интервью BA почти всегда одна и та же: • 5 минут на самопрезентацию • 10 рассказа о компании и вакансии со стороны интервьюера • 30–45 минут вопросов по существу • 10 минут на ваши собственные вопросы в конце. Самая частая ошибка кандидатов — готовиться к блоку технических вопросов как к экзамену, где нужно знать "правильные ответы" на каждый вопрос из учебника. На самом деле интервьюер ищет совсем другое, и понимание этого меняет весь подход к подготовке. Что реально проверяют на этом этапе? • Не факт, а ход мышления. Когда вас спрашивают "как вы собираете требования", интервьюера не интересует идеальное определение из BABOK. Его интересует, видно ли в вашем ответе систему: с чего вы начинаете работу, как выбираете технику сбора информации под конкретную ситуацию, как проверяете полноту и качество результата перед тем, как двигаться дальше. Старайтесь озвучивать все мысли, чтобы показать свой ход мышления • Не широту знаний, а глубину применения. Лучше рассказать один реальный кейс подробно, с конкретными деталями и цифрами, чем перечислить пять методологий поверхностно, без привязки к собственному опыту. Конкретика почти всегда убеждает интервьюера сильнее, чем демонстрация общей эрудиции. • Не идеальность, а честность. Если вы не знаете конкретную тему — лучше прямо сказать "с этим знаком поверхностно, но вот как бы я подошёл к решению этой задачи" — чем выдумывать уверенный, но по сути пустой ответ. Опытные интервьюеры часто считывают блеф по характеру ответа, а честный, но структурированный ответ работает в вашу пользу даже при пробеле в знаниях. Формула, которая закрывает большинство вопросов о вашем реальном опыте — это 🔡🔡🔡🔡: ситуация, задача, действия, результат. Не пытайтесь её зазубрить дословно как готовый текст — выучите саму структуру и рассказывайте каждый раз своими словами, адаптируя под конкретную формулировку вопроса интервьюера. В этом посте я уже приводила пример, как применять этот метод на практике И ещё один момент, о котором редко говорят вслух: последние 10–15 минут интервью, отведённые на ваши вопросы — это не просто формальность. Подготовленные заранее содержательные вопросы о команде, продукте и реальных процессах работают на ваше впечатление не меньше, чем хорошие ответы в основной части разговора, потому что показывают реальную заинтересованность в проекте Удачи на собеседованиях!