Секрет лапшичного супа

Я не большой любитель прикладного fit/predict ML-инжиниринга и кодинга алгоритмов для решения оптимизационных задач. Мне это скучно. Мне кажется, самое сложное, что в жизни, что в бизнесе — правильно оптимизационную задачу сформулировать. Это интересно и всегда ново. А конкретный алгоритм — это инженерное "сведение задачи к уже решенной". Ну кто вот, например, мог подумать, что искусственный интелект появится как результат предсказания следующего слова в тескте? Вот это, я понимаю, — классная постановка! Это вызывает максимум моего восхищения. И вы наверняка знаете, что сейчас машины учатся супер-неэффективно, поэтому человечество в развитых странах переживает, хватит ли у них электричества для AI. Но вообще-то обучение тоже можно пытаться правильно формализовать, поставить правильную задачу. Почти 10 лет назад группа исследователей из Беркли написала прикольную статью про то, как заставить нейросеть исследовать мир и учиться... <парам-пам> без цели. Подсматривали за тем, как учатся дети. Для простоты взяли мир Mario Brothers и 6 кнопок от Nintendo на вход. Исследователи предположили, что главная задача, которую решает мозг человека с рождения — это предсказание состояния мира вокруг него в следующую секунду (в зависимости от собственных и чужих действий). Но, вообще-то если сидеть в левом углу экрана, и ничего не делать, то будущее будет крайне предсказуемым — и неинтересным! Надо придумать, как заставить алгоритм интересоваться, что за краем карты. Длинная история коротко. Любознательность — это желание столкнуться с ситуацией, когда предсказательная сила текущих представлений о модели мира ломается. Исследователи заложили именно такую функцию для оптимизации (объём ситуаций, когда предсказание ошибалось) — и оказалось, что в средах с редким подкреплением это позволяет модели быстрее и эффективнее учиться проходить уровни и собирать очки. А в супер разреженом подкреплении только такой подход и работал. Держите классный подкаст про это на русском: https://music.yandex.ru/album/10330389/track/81437187 И исходную статью на английском: https://pathak22.github.io/noreward-rl/ Статья и подкаст на самом деле про разное, так что черпать вдохновение и идеи стоит по обеим ссылкам. А в комментах поделитесь неочевидными постановками задач, с которыми вы сталкивались!

Почему промокают ноги, а болит горло? Когда промокают ноги, они очень быстро остывают. Это физика: тёплая нога передаёт свою энергию холодной воде (с высокой теплоёмкостью), остывая в процессе. В ступнях много холодовых рецепторов. Переохлаждение — серьёзный риск для организма. Самый надёжный способ заметить переохлаждение — «измерять» его в конечностях, потому что они максимально удалены от сердца. Эволюционно лучше выживали те наши предки, чей организм раньше замечал потерю тепла и начинал действовать на опережение. Гипоталамус замечает, что конечности мёрзнут, и начинает реагировать: в том числе снижает кровообращение поверхностных тканей. И вот тут я не разобрался — баг это или фича, — но слизистые тоже попадают в этот контур "внешних радиаторов". Меньше кровообращение слизистых носа и горла → хуже питание клеток слизистой → местный иммунитет хуже справляется с инфекцией. Бактерии и вирусы почти всегда присутствуют в носоглотке — это нормальная микробиота и постоянный фон контакта с инфекциями. Поэтому в момент переохлаждения «ждать инфекции» не приходится — она уже рядом. Просто баланс смещается не в вашу пользу. К сожалению, это работает не только для слизистых носа и горла. Молочницы и циститы у женщин имеют ту же физиологическую связь с переохлаждением. Почему «простуда» — не такая уж безобидная болезнь Когда-то считали, что инфаркты и инсульты случаются просто из-за высокого уровня холестерина. Позже учёные выяснили, что ключевую роль в тромбозах играет воспаление. Когда иммунная система борется с инфекцией, в тканях и крови накапливаются остатки погибших клеток — условные «трупики» с иммунного поля боя. В норме их убирают фагоциты — большие клетки-пылесосы. Но если воспаление выраженное или длительное, они могут не успевать. Холестерин облепляет этот мусор — со временем накапливаются бляшки. После 45 лет риск тромбоза начинает расти, после 65 становится особенно заметным. В США (где есть хорошая статистика) сердечно-сосудистые заболевания — причина смерти №1: около 27 % всех смертей, больше, чем от онкологических заболеваний и несчастных случаев вместе взятых. Если вам хочется жить долго, то делать прививки и избегать воспаления — хорошая идея. Берегите себя — и не переохлаждайтесь! ✌️

Новогодняя традиция 🎄 Вот уже лет 7… да, думаю, это началось с рождением сына… как у нас появилась новогодняя традиция. Из путешествий мы привозим в качестве сувениров… украшения на новогоднюю ёлку! Под Новый год мы наряжаем ёлку всей семьей и вспоминаем классные моменты. Кстати, со временем, из памяти улетучивается, откуда некоторые игрушки — но тем интереснее вспоминать! Украшение ёлки превращается в квиз) В сувенирных лавках почти не продают ёлочные украшения, поэтому мы покупаем что-то подходящее: брелок или магнитик на холодильник — и переделываем его в игрушку. В этом году у нас уже процентов 80 ёлки заполнилось именно такими памятными украшениями! Эта традиция мне настолько нравится, что я решил ей поделиться. Буду рад, если вы украдете идею полностью или придумаете похожую традицию для вашей семьи! С Новым годом! Желаю вам счастья и тепла от классных моментов, разделённых с дорогими вам людьми. ❤️

Data Driven Top100 возвращается Я придумал этот формат, чтобы решить собственную проблему. До того, как окунуться в стартапы, я был большим менеджером аналитики с парой сотен подчиненных. Дело было в Яндекс.Такси, где я отвечал не только за аналитику Такси, но и за супер-функцию (сервисы зарождавшегося тогда Yandex.Go). Мы быстро росли, было не с кем поговорить о проблемах на стыке менеджмента и DS. И я придумал конференцию для таких же ребят, как я. Мы собираем 60-70 руководителей в данных и DS подальше от офиса, всех знакомим, обсуждаем самое горячее и наболевшее. У нас нет разделения на спикеров и слушателей, потому что все участники высокого уровня. Темы обсуждаются с релевантными участниками в формате интервью, и весь зал активно вовлекается в дискуссию. Наша главная задача — раскрыть, к кому за каким советом можно пойти (даже за пределами конференции), потому что с нашими менеджерскими проблемами точно уже кто-то сталкивался до нас и может поделиться своим опытом. Нужно просто знать, кому позвонить. В этом году собираемся в Тивате (Черногория) с 11 по 14 октября. Мы собираем программу под запрос участников. И в этом году, конечно, все хотят говорить про практическое применение AI: LLM / агентов / GenNN в широком смысле. У всех FOMO, всем кажется, что они опаздывают. Так что будем разбираться, в каких случаях AI — только хайп, а где уже сейчас реальная оптимизация продукта и бизнеса. Чтобы эти дискуссии случились, мы расширяем состав участников людьми, которые активно применяют AI в реальных задачах — и готовы делиться hands-on опытом. Если вы рисёчер, билдер приложений поверх AI, стартапер, который заменяет людей роботами, — мы рады вас видеть на ивенте этого года. Оставьте свой контакт на сайте — там также есть отзывы с конференций прошлых лет, которыми мы очень гордимся. Ещё мы будем рады спонсорам, которые помогут приехать на ивент крутейшим ребятам из академии и стартаперам, оганизации которых не могут позволить себе оплату билета. Вы — контрибьютите в качество нетворка и уровень дискуссии, мы — окутываем ваш бренд всесторонней уважухой data driven сообщества и ещё кое-что (спрашивайте в личке: @eugenekozlov).

Аналитическая загадка — отпускная про 5 раз за ночь)) Машина простояла на парковке ночь. Версии кладём в комменты под спойлер. У меня ушел день, чтобы понять, как так вышло. Через несколько дней выложу в комментариях подсказку-наблюдение, благодаря которой я сам раскрыл это дело) UPD: Оказывается, автомобилистам регулярно гадят на машины, омг) куча людей опытны в этом вопросе) для тех, кто как я, без машины, подсказки выложил в комментариях))) P. S. Треть лета уже прошла! ✌️

QuantumLight, венчурный фонд Николая Сторонского, инвестирующий в стартапы на стадии скейлинга, выложил плейбук Hiring Top Talent. Я знаю, вы все пользуетесь моими грейдами дата-аналитиков. Можете представить, насколько я люблю такую системность =) Это методичка для компании на этапе роста из 1 в 100. Это когда все ключевые гипотезы проверены, маркет-фит найден и есть пространство для захвата ёмкого рынка. Описанные принципы дают точку с оптимальной энергоэффективностью роста. При кратном росте проблем слишком много (и они сложные). Как руководитель ты не можешь рассказывать подчинённым, что им нужно делать. Просто не хватит часов в сутках. Найм "самонаводящихся ракет" становится витальным. В Revolut построили настоящий завод по найму таких людей — и теперь делятся его чертежами. Среди моих читателей, наверное, немного тех, кому актуально строить такой завод (в отличие от портфельных компаний QuantumLight). Но подумайте вот о чем. Вам дали приципы найма и оценки топ-талантов. /* Там прям баллы и редфлаги для скринингов упомянуты. */ Выходит, с обратной стороны — это ещё и плейбук "как решать рабочие задачи" или даже "как построить карьеру своей жизни". Просто дважды в день следуйте простым принципам из этой методички! Btw. Только лишь следовать правильным подходам может быть маловато. Надо ещё немного удачи оказаться в правильном месте в правильное время. Если ваши крылья уже отросли, но скорости текущей компании не хватает, чтобы полететь, не пропустите мою вакансию старшего аналитика в будущем британском декакорне.

Ничего необычного, просто агент ChatGPT актуализирует сертификаты энергоэффективности квартир под управлением Dwelly. Если что-то пойдет не так: потребуется авторизация, вывалется ошибка или будут какие-то неоднозначности в задании — агент сам спросит в чате, как ему поступить. Раньше эту работу делала пара филипинцев. P.S. Если вас так же, как и нас, вдохновляет возможность применения cutting edge AI для оптимизации индустрии, которая не менялась с прошлого века, дайте знать, — давайте придумаем, как посотрудничать.

Аналитическая загадка Ответы проверяем — в личке @eugenekozlov Не лишаем других удовольствия — спойлерим в комментах со спойлерами.

Начал новую жизнь без тоста за старую... Что ж. Исправляюсь — рассказываю! Год назад я с семьёй приземлился в Лиссабоне, чтобы попробовать построить жизнь иммигранта человека мира. Больших планов не было, действовали в режиме «попробуем — не понравится — переобуемся на ходу». Понравилось =) В апреле я ушел из Яндекса — проработал без двух недель 12 лет. Яндекс — всё ещё лучшая технологическая компания в России. Но, к сожалению, компания находится в очень сложном контексте. С теми вызовами, которые стоят перед Яндексом сегодня, я могу помочь весьма ограничено — и меня они не слишком вдохновляют. Так что расстались мы с доброй грустью, но это было закономерно. Чем я занимаюсь сейчас? В роли руководителя аналитики помогаю двум стартапам стать единорогами: — это Rhino — мы строим сервис бронированных такси в Бразилии (как ответ на жуткую уличную преступность) — и Dwelly — готовим революцию на рынке аренды недвижимости в UK, стараясь не привлекать внимания санитаров. У меня, возможно, странное представление о правильной карьере и веселье. Но 3 единорога в CV сложно отнести к «повезло рядом постоять». Хочу такую валидацию своих навыков. А ещё у меня есть незакрытый гештальт со времён неслучившегося IPO Такси — хочу на фотку со старта торгов на бирже =) Образ результата — это уже немало, не так ли? =) У стартапов на seed стадии плотность принимаемых решений ограничена небольшим количеством инженеров, которые реализуют эти решения. Это (пока что) позволяет мне совмещать две компании, и даже немного консультировать. Если вдруг вам кажется, что я могу быть вам полезен — приходите: людям помогаю бесплатно, компаниям — за очень дорого. Я время от времени нанимаю, поэтому если вам интересно, — подмигните мне в личке. Если вдруг вы настоящий VC или только экспериментируете с ангельскими инвестициями, — подскажу пару перспективных компаний в ваш портфель! P. S. Я живу в Кашкайше — это деревня на берегу Атлантического океана недалеко от Лиссабона. Будете в моих краях — давайте знакомиться за кофе или завтраком. @eugenekozlov ✌️

Это случилось! Мы снова в деле❤️‍🔥 Новый выпуск подкаста с Женей уже на платформах!! Как отдыхать, как возвращаться из отдыха, читать ли рабочие чаты, тюлень или хайкинг - все обсудили и вам принесли) Делитесь фидбеками - мы всем рады) ✌🏻

Летел сегодня в самолете, наполовину заполненном финалистами всеросса по математике. Получил большое удовольствие) Я решил эту задачу за 10 минут, два олимпиадника уложились в две минуты :) Ответ можно проверить у меня в личке — @eugenekozlov, а в комментах похвастаться временем на решение. // не пишите, пожалуйста, решение в комментариях — дайте другим получить удовольствие)

Мама, меня показывают на ютубе! https://www.youtube.com/watch?v=cj6Cghd1BKI Разговор получился длинным, но легко можно смотреть на 1.5х

Яндекс выложил YT в opensource Это очень большая новость для мира обработки данных. И огромный шаг для команды YT — ребята, поздравляю! Многие слышали про ClickHouse, который уже успел сформировать свой клуб фанатов и даже форкнуться в отдельную компанию с приличной капитализацией. Но ClickHouse (CH) — это слой потребления данных. Чтобы получилась красивая витрина, которую удобно крутить в CH, нужно обработать несколько тонн данных — и сам CH для ETL-преобразований не годится совсем. И вот тут вы встанете перед выбором технологий хранилища. Если вы маленький или средний стартап, вы пойдете в облака — и правильно сделаете. Но если вам по какой-то причине нужно иметь чуткий контроль за своей инфраструктурой данных, вы уже управляете Hadoop-кластером, и тем более, если вам при этом жмёт — присмотритесь к YT. В 2017 мы в Такси решили строить DWH на GreenPlum, потому что YT и YQL были ещё незрелыми — нам было больно по утрам видеть нерассчитанные витрины, потому что "ой, мы тут логику join'ов немного поменяли". В добавок join’ы были очень медленные и неэффективные, что очень критично для DWH. Теперь же таблицы-справочники до 80GB клеятся "на лету" (на нашем кластере). Когда стал вопрос о том, что DWH Маркета нуждается в нормальной архитектуре, технологиях и менеджерских подходах, я очень топил за сведение задачи к решённой — давайте возьмём всё у Такси. Но команде Маркета удалось убедить меня, и я с приятным удивлением обнаружил, что YT и инструментарий вокруг него доросли до той степени зрелости, когда ничего дополнительного и не нужно. Короче, мой рекомендасьон — 10 хадупов из 10! Кстати, над любой таблицой, хранящейся в YT, можно выполнить SQL запрос, используя ClickHouse на ресурсах YT, просто добавив перед запросом строчку USE chyt.<clustername>; Небольшой повод для гордости — в составе этого релиза есть Spark over YT. Эта штука сделана в Такси моей командой. Федя Лаврентьев увидел дырку в линейке технологий Яндекса по обработке данных и решил, что надо попробовать запустить Spark на YT. Федя нанял феноменальную Сашу Белоусову на эту задачу — и Саша за пару месяцев сделала работающий прототип, который решили развивать дальше. PS. В opensource технологию назвали YTsaurus. Все эти годы в Яндексе она ласково называлась "Ыть" =) https://habr.com/ru/company/yandex/blog/721526/

Список участников Data Driven Top100 ’22 — конференции для руководителей аналитики и продуктов, построенных на данных. Список и статусы участия актуальны на 27.08.2022

В прошлом году мы провели первый экспериментальный Data Driven Top100 — конференцию для топов аналитики и руководителей продуктов, которые построены на данных (поиск, диспатч, риски и прочее). Нашим главным вызовом было придумать формат, который будет полезен опытным руководителям аналитики. И, судя по отзывам участников прошлого года, у нас получилось! В этом году мы повторяем мероприятие. Оно пройдет в начале октября в Турции. Приходится выбираться за пределы страны, чтобы могли приехать ребята, которые живут и работают не в России. Без них русскоязычный топ не выйдет. Состав участников #ddtop100 — это моя персональная гордость. Ребята невероятно крутые как в профессиональном плане, так и в личностном. Пока это в основном люди, до которых я смог дотянуться через одно-два рукопожатия своего круга знакомств. Мне очень хотелось бы расширить этот круг, тем более что сейчас он перекошен в айтишную сферу. Я уверен, что есть множество крутых ребят в традиционно оффлайновых отраслях: образовании, здравоохранении, призводстве, фармацевтике, логистике, авиаперевозках, госуправлении и т. д. А менеджерские проблемы, которые мы обсуждаем на конференции, как показывает опыт, очень близки вне зависимости от индустрии. Я буду благодарен, если вы расскажете своим знакомым топам аналитики о нашей конференции. Или просто дайте мне о них знать — а я сам с ними свяжусь) @eugenekozlov Ниже я прикладываю список участников этого года и их статусы на сегодня. В этом году наша площадка сможет вместить максимум 60 участников, так что мест осталось немного. Думаю, с учетом того, что часть ребят из списка может не доехать, есть 10-15 билетов для новых лиц. Gotta catch them all! =)

https://telegra.ph/Plohoj-silnee-horoshego-07-09-2

Вакансии в Финтех Озона Приятно, что кто-то продолжает найм в России. Сегодня вакансии от Саши Толмачева. Саша руководит аналитикой озоновского финтеха. Саша — крутой. Жалею, что не получилось нанять его в Яндекс, ну, может, ещё получится вместе поработать) С большим удовольствием рекомендую Сашу — как рукастого и головастого аналитика, — как руководителя, у которого есть, чему поучиться, — и как отличного человека. Теперь к вакансиям. Саша ищет ребят и девчат на роли: — продуктовый аналитик (аналитик I уровня) — маркетинговый аналитик (аналитик I уровня) — дата-инженер (джун+) — умеет в airflow, хорошо пишет на python, понимает как оптимизировать запрос sql, понимает отличия колоночных и строковых БД — стажеры аналитики и стажеры дата-инженеры. Требования к уровням аналитиков. Резюме и вопросы шлите Саше в телеграм: @aa_tolmachev

Смотрите, какие интересные опросы дистрибутируются через myTarget от Mail.ru https://newsurveyrus.typeform.com/to/EIQdBQtT — про отношение к оттоку it-специалистов https://newsurveyrus.typeform.com/to/OB6SlZvJ — опрос работников it А если нажать после прохождения опроса на кнопку "Участвовать регулярно" — система подсунет следующий опрос. У меня было несколько опросов про внешнюю и внутреннюю политику России. По utm-меткам не удалось понять, кто платит за рекламу опросов. utm_campaign=52486080 P. S. Вы тоже можете перейти по ссылке и высказаться.

Miro За время пандемии и удалёнки, кажется, не осталось людей в индустрии, которые не пользовались Miro, поэтому представлять компанию и продукт не буду. Miro нанимает и релоцирует. Сегодня несколько вакансий для руководителей. 1 роль уровня «Руководитель аналитики 2» (см. статью про грейды). Head of Marketing Analytics — Амстердам или Остин (США, Техас) 3 тимлидские позиции Head of Growth Monetization Analytics — Амстердам Head of Product Analytics (Workflows) — Амстердам Head of Product Analytics (Core) — Берлин По деньгам — для тимлида можно посмотреть вилку G-level Booking.com в Амстердаме (отдельно для города статистики нет) или статистику по DS в Берлине. Miro таргетируют офферы новым сотрудникам заметно выше медианы рыночных вилок. Не забывайте про налоги, которые на этих уровнях дохода составят 40-50% от зарплаты. Отдельно замечу, что Miro ещё не стала публичной компанией, а значит, может быть потенциал роста стоковой части компенсации к IPO. Процесс от интервью до оффера для этих (синьорных) ролей займет не меньше 4 недель, так что если вы думаете о смене работы лишь через пару месяцев, начинать общаться можно уже сейчас. Общение в компании происходит исключительно на английском языке. На этих ролях вы должны не чувствовать ограничений по формулированию своих мыслей и идей. В терминах уровня это минимум upper intermediate. Резюме или ссылки на актуальный профиль в linkedin отправляйте Мише Адвена @misha_advena. Миша — Head of Global Analytics в Miro. Миша живёт в Нью Йорке, так что ответа ждите по соответствующему часовому поясу.

Вася Сабиров, которого вы можете знать по книге «Игра в цифры» и конференциям, ищет аналитика к себе в Easybrain. Это игровая компания, которая развивает портфель мобильных игр-головоломок. EasyBrain релоцирует на Кипр. На фото 👆 — офис ребят в Лимассоле. Удалёнка тоже возможна. Работа в основном ведётся на русском. Английский нужен редко. Хватит среднего уровня или даже, как сказал Вася, «средненького» =) Каким будет вклад аналитика в Easybrain? Если вы немного сталкивались с мобильным геймдевом — в нём адская конкуренция на рынке размером с весь мир. Без аналитической зрелости игровая компания просто не может быть успешной на этом рынке. Так что ценность работы аналитика очень высока. Вася — опытнейший аналитик и руководитель, а значит с профессиональным развитием тоже всё будет в порядке. Рекомендую вакансию с большим удовольствием. Вася ищет кандидата middle или senior уровня. Примерное понимание грейдов смотрите в моей статье. Ребята платят очень достойно по вилкам Кипра + действует вовлекающая бонусная система, детали которой расскажут успешным кандидатам. Ребята быстрые: от первого интервью до оффера могут пройти считанные дни. Оформление документов для релокации занимает месяц-полтора. В течение этого времени вы можете работать удалённо. Резюме или ссылки на актуальный linkedin отправляйте Васе в телегу @iamvasabi.