Это считается

В этом году Т-Банк отмечает 20-летие. 14 августа - День Т, внутренний праздник про людей, которые создают продукты, развивают и поддерживают продукты для миллионов клиентов. Добрая традиция. В этот день в Т-офисах раздают Т-мороженое. В этом году я взял шоколадное 🍫 Т-Команда, поделитесь фотками в треде 📷

Важнее технологий сейчас только люди (эссе про аналитику, философское) Я пришел в аналитику 5 лет назад. Профессия и рынок кардинально изменились за это время. 5 лет назад достаточно было знать SQL и Python. Сегодня нейронки пишут запросы и код в разы лучше и быстрее, чем средний аналитик. Что по-прежнему важно - это умение удерживать фокус. Контекст в чате постоянно уплывает от изначальной цели, когда память заполняется. Так же смещается фокус команд и целых продуктов. Метрики чаще всего денежные, но за ними стоят реальный клиенты. Набор транзакций и клиентских событий - это только сэмпл, за которым стоит живой человек, в жизни которого происходит много всего, что выпадает из внимания и сферы рабочего интереса. Анализировать - это то же, что познавать. Желание дойти до правды должно быть сильнее желания прийти к ожидаемому и/или красивому результату. Видеть за цифрами и графиками смысл можно в напечатанном отчете, Excel-ячейке, в хитроумной seaborn-диаграмме и html-документе, который создала LLM. Меняются инструменты, остаются амбиции и неподдельный интерес к тому, как устроен мир на самом деле. С нетерпением жду момента, когда агенты и автоматизация освободят аналитиков от выгрузок и типовых оценок. Работы от этого не станет меньше. Фокус сместится с того, чтобы делать данные доступными, к тому, чтобы большее число людей могли эти данные правильно интерпретировать.

Пока Олег выкладывал фотографии из отпуска, я летала... в командировку в Казань 😄 Вместе с командой «Сезона Кода», про который рассказывала выше. Прошел ровно месяц, настало время рефлексии) В этом году мы впервые провели отдельный трек «Продуктовая кухня» — про продукт, аналитику, дизайн и AI. Честно говоря, переживали, будет ли он интересен на конференции, где исторически главными были технические доклады. А в итоге в некоторые моменты по посещаемости мы даже обгоняли бэкенд — традиционно самый популярный трек. После каждого доклада зал буквально взрывался вопросами. Иногда приходилось забирать микрофон у человека, который задавал уже третий вопрос подряд, потому что еще несколько человек продолжали тянуть руки. Поэтому открытая дискуссия со всеми спикерами стала отличным завершением дня — мы поговорили про качество продукта, решения, которые нельзя свести только к метрикам, и то, как находить баланс между скоростью и здравым смыслом. Именно эти впечатления я увезла с собой из Казани. Когда в одном зале собираются люди, которым правда не все равно — спикеры, зрители, дизайнеры, разработчики, аналитики, продакты, — получаются обсуждения, вдохновляющие делать свои продукты круче и круче ❤️ P. S. И идеальная иллюстрация атмосферы фестиваля: суровые разработчики с азартом прыгают на одной ножке в классики)

🎵 8 августа в Коломенском пройдет ИТ-Пикник от Т-Банка. В программе — выступления проекта LAB Антона Беляева, IOWA, Cream Soda, Pompeya, мартина и Совы. А днем — научпоп-лекции, дискуссии об ИИ и больших языковых моделях, мастер-классы и интерактивы. Полезные знакомства и развлечения тоже будут. Отдельно зовем на лекции в аналитический шатер, где мы, авторы канала, будем ведущими — Даня Недбаев и Юля Гурова) 🎟 Зарегистрироваться и узнать подробности можно на сайте мероприятия. В билет входит +1 — можно позвать близких и друзей. До встречи в месте притяжения ИТ 💛 Регистрация на сайте ➡️ https://it-picnic.ru/#registration

Летом в 🤞Это считается меньше постов. Такая особенность сезона. И мы сами были немного заняты другими делами: 1️⃣Провели Weekend Offer! Аналитиков в Т-Банке стало чуть больше. 2️⃣ Искали бензин на заправках. Наши коллеги сделали для этого специальную карту. 3️⃣ Провели Сезон кода в Казани и Питере. Ждем рассказ Юли о том, как это было. Оставайтесь на связи. Мы не в обиде, если вы предпочтете лето нашим постам. Для вас два поста про отдых из "золотой коллекции" 🤞Это считается: 🔗 Как провести отпуск, чтобы отдохнуть 🔗 Как настроиться на работу после отпуска Хорошей недели, аналитики! PS: Фото Олега из отпуска для привлечения внимания. В качестве развлечения можно отгадать, где он провел свой отпуск.

❗️В сеть утекла запись дейлика продуктовых аналитиков❗️ Хотите лучше понимать продукты, пользователей и то, как принимаются продуктовые решения? Тогда увидимся на Продукты 24 × ffdd2d 🤞

Аналитики, привет! 4–5 июля пройдет Weekend Offer - это когда все этапы найма проходят за одни выходные. Не нужно искать удобные слоты для интервью, специально оставаться дома или бронировать переговорки. Вакансий много. В том числе можно попасть в команды ведущих подкаста и постоянных авторов канала 🤞Это считается: Данила, Олег и Юля расширяют свои команды. Представьте, что обсуждать рабочие вопросы, карьеру и продуктовые гипотезы можно с людьми, чьи статьи вы сохраняли в закладки 😉 Как это будет: 📅 До 30 июня нужно откликнуться и пройти тестовое (мы постарались, чтобы проходить его было не скучно). 📅 4 июля - тех. секция. 📅 5 июля - знакомство с командами. 📅 6–7 июля - получаете свой оффер. И никаких долгих ожиданий. 👉 Тут ссылка на отклик: ссылка P.S. Если ваш друг-аналитик сейчас в поиске - перешлите ему этот пост.

Сегодня хотим пригласить вас на «Сезон Кода» — это наша IT-конференция, или даже целый фестиваль от Т-Банка. В этом году Сезоны пройдут в двух городах: 🌁 уже в эту субботу в Санкт-Петербурге, регистрация 🕌 и 4 июля в Казани, регистрация Особенно приятно, что в программе много продуктовой аналитики. Но не только: будут доклады про дизайн, разработку, продукт и другие темы, которые будут интересны любому аналитику. А в Казани мы увидимся лично: я, Юля Гурова, буду ведущей трека «Продуктовая кухня». Будем говорить про измерение качества, поиск проблемных сценариев, внедрение AI и вау-эффекты в интерфейсах. И самое главное — всё это на реальных кейсах и метриках, которые мы используем в Т-Банке. Так что приходите знакомиться 👋 В Сезоны мы правда вкладываем много сил, внимания и любви. Нам хочется собрать в одном месте людей, которым интересно разбираться, как работают продукты, как принимать решения на данных и как создавать вещи, которыми потом пользуются миллионы. И помимо выступлений будет много пространства для нетворка и вдохновения: можно будет пообщаться с коллегами из разных компаний, и провести день среди людей, которые любят свое дело так же, как вы 💛

Вчера рассказывали, как наши ребята выступили на конференции. А сегодня — небольшой спойлер на будущее. 5 сентября, Москва, Парк Горького — Продукты 24 × ffdd2d , наша конференция про продукты, аналитику и дизайн.  Доклады про то, как мы реально устроены изнутри, интерактивные разборы метрик, нетворкинг, афтепати с диджей-сетом над Москвой-рекой. Регистрация откроется в июле, мест мало — поэтому уже открыли предрегистрацию : оставляем заявку → первыми узнаем о старте. Кстати, в прошлом году было много сильных докладов — напишите в комментах, какие зашли больше всего. https://producty24-ffdd2d.ru/

Наши коллеги выступали на Aha! в этом году. Делимся рассказом Аркадия Лысякова из Платформы обслуживания о том, как честно измерять эффект от внедрения LLM в процессы. 💬 Стрим поддержки в Т-Банке очень большой: десятки продуктов, миллионы обращений в месяц. Раньше всё держалось на сценарных ботах: жёсткие деревья, около тысячи интентов, предсказуемая логика. С приходом LLM мы добавили к этому генеративные и RAG-сценарии, агентские системы и копилоты для операторов. Вместе с преимуществами в виде скорости и гибкости пришли и новые типы ошибок: 1. доменные - модель не знает бизнес-правил; 2. модельные - галлюцинации, противоречия. Отлавливать такие ошибки тяжело, потому что они в явном виде не влияют на финальные метрики. Мы не стали использовать CSAT (Customer Satisfaction Score), потому что он зависит от контекста и настроения клиента. И отказались от FCR (First Call Resolution), потому что быстрый ответ не равен правильному решению. Построили композитную метрику качества из: 💬 логов диалога (длина, эскалация, повторные обращения); 🔥 клиентских сигналов (жалобы, благодарности, оценки); ✅ разметки ошибок через экспертов и краудсорс. Разметка сильно помогла повысить надежность метрики. 1 LLM как оценщик качества не работает “из коробки”  - малые изменения промпта дают разные оценки  - модель путает правдоподобие с корректностью  - не знает бизнес-логики  💡 LLM может помогать, но не заменяет оценку качества.  2 Ручная разметка сложнее, чем кажется  Экспертиза обычно живёт в головах людей, а не в инструкциях.  Пришлось:  - превращать критерии в деревья решений  - спорить и уточнять правила  - итеративно менять инструкцию  Первые циклы были неудачными. Но затем дело пошло! Теперь наша система оценки дает возможность: ✅ сравнивать LLM-base архитектуры; ✅ контролировать качество на новой шкале; ✅ запускать агентные сценарии (~5% прода); ✅ получить ~1.5x экономической эффективности против старых подходов. И главное - теперь мы лучше понимаем свои собственные системы! Если работаете с качеством обслуживания в своих продуктах, расскажите о своем опыте. Как используете AI, где не обходитесь без ручной оценки, как относитесь к гибридным системам?

После нахождения NSM самое время построить дерево метрик. Дерево или иерархия метрик – это фреймворк для иерархии и классификации метрик, которые выстраиваются от ключевой метрики продукта (NSM). Цель фреймворка: 🔹держать фокус на значимых метриках; 🔹определить слабые места; 🔹внедрять фичи, развивающие продукт в желаемом направлении; 🔹понять, за счет каких конкретных действий растет бизнес. Алгоритм построения: 1️⃣ Начинаем «с головы», то есть с нахождения NSM. Я рассказал об одном из способов выше, а также поделился полезной книгой. Следующий шаг: мы берем готовую основу и декомпозируем ее глубже. 2️⃣ KPI, найденные при поиске NSM, образуют I уровень иерархии дерева. 3️⃣ Чтобы подобрать «дочерние» метрики II уровня, к каждому KPI задаем вопрос: Какие показатели влияют на значение метрики? 4️⃣ Этот же вопрос мы задаем к метрикам на уровне II и определяем метрики уровня III. В зависимости от сложности продукта продолжайте раскопки до уровня IV-V. В итоге мы получаем перевернутое дерево, в котором вышележащие метрики ветвятся на определяющие их дочерние. Дерево строится сверху вниз: каждая метрика порождает дочерние, логически из нее вытекающие. Советы: ✔️Хорошее дерево – это то, где вышележащая метрика зависит только от своих дочерних метрик. Важно учесть все дочерние показатели. ✔️Не стоит напрямую связывать дочерние метрики с несколькими родительскими – так вам будет сложно принимать решения. Лучше выделить одну значимую связь, а остальные обозначить пунктиром. ✔️Помним про характеристики хорошей метрики. Она всегда сравнима, понятна, измеряема, управляема и мотивирует улучшить себя. ✔️Не забываем про разницу между опережающими и запаздывающими метриками. NSM и KPI часто меняются медленно - они запаздывающие. Дочерние метрики на нижних уровнях реагируют быстрее - они опережающие. Если нижние метрики растут, а NSM пока нет - это нормально, просто нужно время. Попробуйте прямо сейчас Если дерево метрик уже есть – откройте бэклог и соотнесите каждую идею с метрикой, на которую она влияет. Это поможет расставить приоритеты для разработки. Вы просто смотрите, какая фича двигает метрики ближе к вершине дерева, и беретесь за нее в первую очередь. Если дерева еще нет – самое время его построить. Начните с NSM, определите KPI и последовательно раскройте дочерние метрики по алгоритму выше. #ликбез #метрики

Сегодня в Москве обещают +29. Жители и гости столицы, берегите себя и запасайтесь водой. Т-Капибара намекает, что пришло лето 🙂🦋 Всем хорошей недели, аналитики! ☀️

День аналитика 2026. Как это было