tgindex

Data Brew

описание

Пресса для френч пресса. Пишу, чтобы почитать под кофеек. Мое приложение: https://apps.apple.com/ru/app/video-text/id6777499327 Бот для скачивания видео: @data_brew_download_bot Ютуб:https://www.youtube.com/@echemenev Сотрудничество:@echemenev

← к каналу@data_brew
1 033
подписчиков
Охват к подписчикам
55,0%
ERR
Реакции к просмотрам
1,45%
472 на 33 постов
Пересылки к просмотрам
0,74%
240
Постов в день
0,0
всего 34

Где отзываются чаще

доля реакций к просмотрам
  • 7 июн.Сегодня очень необычный гость, девушка DE. Из интервью вы узнаете: -Страхи и боли инженера данных. - Сексизм в DE - Деньги vs Интерес О госте: Ведущий канала «дата инженеретта» Ты бы наняла себя в начале карьеры? В начале де карьеры я вообще не знала теоретических основ. А за моими плечами касаемо биг даты была лишь магистерская работа, где я немножко потыкалась в Hadoop, Airflow и узнала, что такое Data Lake, Parquet и партицирование. В то же время проходила de-zoomcamp. А ради тестового выучила синтаксис Spark за пару дней. Я бы сказала, что вообще норм🙂 Первый инцидент: когда стало реально страшно? Я помню этот вечер — 20:00, я дежурю, вдруг прилетает алерт по стримингу и я вижу, что данные уже несколько часов не приходят. Я смотрю в Kafka UI и понимаю, что пропущенных данных уже нет, а сообщения продолжают исчезать десятками каждую секунду Iceberg база будущего или пункт для вакансий? Мне раньше казалось, что компании только-только переходят на Lakehouse. Но если посмотреть — уже практически все сидят на нем. А значит, они начали его строить уже год-два назад AI для DE ускоритель или угроза зарплате? И то, и то. Для тех, кто работает — ускоритель, но на вас будут навешивать еще больше задач. Для тех, кто будет менять работу — угроза зарплате, потому что дорогой сеньор будет компенсироваться мидлом с иишкой. Как думаете, мы дойдем до найма исключительно джунов?🙂 Какой карьерный выбор дался больнее всего? Больше всего я раздумывала над менее интересной вакансией DA, но с удаленкой и x2 в зп и сильно желаемой позицией DE с классными перспективами дальнейшего роста, но спонтанным переездом в Москву, где я никогда не была Много ли коллег DE девушек? Мне как-то в бэклог подбросили тему написать про сексизм в DE) Но писать было не о чем, лично я с таким не сталкивалась. А вот девушек встречала, но я бы сказала, что они больше в продуктовой истории — построить витринку, написать даг, отрефакторить код аналитиков. А вот в задачах, близких к разработке/датаопс/девопс, больше парней — написать с нуля фреймворк, протестировать новый инструмент, интегрировать несколько сервисов. В моих командах я всегда была единственной и неповторимой🥰 Кому в айти жить хорошо? Кто вступил на этот путь раньше, набрался опыта и сейчас сидит на менеджерских ролях, параллельно делая side-проекты И финальное в чем деньги, брат? В чужой зарплате4,05%
  • 5 июн.Интервью С DE из Пятерочки (Х5) Мне очень понравилось быть айти журналистом, и вашему вниманию представляю первое интервью. Коротко о госте: Шустиков Владимир, инженер данных X5Tech, а также автор канала «Инженерообязанный». Почему я задал эти вопросы: DBT в проде все про него говорят.Хотел реальных шишек, а не рекламного буклета. ClickHouse если ты работаешь в РФ, рано или поздно с ним столкнёшься, а клик местами очень контр интуитивен. AI-генератор задач звучит хайпово, но пахнет прогревом на покупку токенов. Фокус на задачах - я все еще борюсь с коротким форматом который стал почему то для меня синонимом отдыха. DBT в проде: какая грабля была самой дорогой? В последнее время DBT стал обширно использоваться в большинстве компаний, в особенности тех, которые используют одно из последних новшеств современного дата‑стека — Trino + IcebergS3. В целом я работаю с небольшим объёмом данных, и в своей работе мне приходилось внедрять DBT в Postgres, чтобы отказаться от материализованных представлений (МП). Связана эта работа была с тем, что при необходимости изменения структуры МП зависимые МП и обычные представления нужно было каскадно удалять, а потом всё заново собирать. Мне хватило один раз так помучиться, чтобы понять, что это не дело, — и тут реально подходил DBT как никогда. Каких‑то явных проблем у меня с ним не было, так как я в своей работе использую его исключительно для построения моделей, ну иногда могу написать парочку макросов — и всё. А в стеке с Trino его начали использовать потому, что из коробки сам DBT не может использоваться как полноценный ETL‑инструмент, так как он работает в рамках одной БД. А Trino — это, по своей сути, единая SQL‑оболочка над различными базами данных, и вот через неё DBT спокойно может перекачивать данные из одной БД в другую. Можно сказать, тут я немного архитектурную лекцию прочитал. 😁 ClickHouse: почему он ломает мозг? Ой‑ой‑ой… С одной стороны, это прям боль Клика, но с другой стороны, люди, которые шарят за его тонкости, получают неплохие деньги. Наверное, это связано с тем, что он реально по своей архитектуре не похож на другие БД. Очень много кустарных решений, которые либо ты знаешь, либо нет. AI‑генератор задач: польза или казино? Я буду относить его больше к казино. В целом ИИ может составить очень неплохой пет‑проект, но он его также может очень тяжело заувалировать, из‑за чего человек просто‑напросто откажется его делать. Вот даже если взять обычное приложение для изучения языков Duolingo. Совсем недавно прогремела новость, что компания отказалась использовать ИИ в заданиях, так как нет нормальной креативности, которая есть у людей, — и вот языковые курсы не чувствовались живыми. Как ты защищаешь фокус от шортсов и хаоса? Я отключил шортсы, но могу сказать честно — это мой бич. К сожалению, я не могу оторваться от телефона: уже много чего пробовал, но если не телефон, то компьютер стал полноценным продолжением меня самого. Для себя я вижу только один радикальный выход — это просто уехать в глушь и просто отдохнуть от всего этого -=PS=- ну как вам?)4,03%
  • 23 июн.С гордостью представляю вам удобный инструмент @data_brew_download_bot Я провел полевые испытания и теперь могу со спокойной душой презентовать. Что умеет: Скачивать видео/аудио по ссылке Текстовые описания и даже субтитры с ютуба. Откуда: Запретограм, ютуб, тик ток. Есть режим с выбором качества видео, а есть авто режим в котором вы кидаете ссылку получаете видео/аудио/субтитры. + можно скачивать плейлисты Работает даже в групповых чатах. 🆓 БЕСПЛАТНО 🆓 Пробуйте и делитесь впечатлением. Я уже делал пост о запуске этого бота, но сейчас он доведен до ума после обратной связи P.S. скинь другу3,60%
  • 8 июн.я тут сделал универсальный бот https://t.me/data_brew_download_bot все популярные видеохостинги качает аудио / видео/ субтитры если есть Можно выбрать качество аудио и видео. буду рад фидбеку3,58%
  • 10 мар. 2025 г.Внеочередной пост. Спустя гору собесов и две горы откликов я принял офер в компанию 🟣 на позицию Продуктовый Аналитик Вб.Кошелька. Сегодня пришел рабочий ноутбук, начинаю полноценное погружение в задачи. Одну задачу уже скинули. На прошлой неделе, получал доступны и сделал пару пробных запросов в клик хауз. Так что следите дальше, буду рассказывать про свой опыт работы. P.S такие прямые включения буду делать с тегом #шитпост особо полезности не будет. Чисто поток мысли 🧙 #принято3,36%
  • 4 июн.Анонс Завтра начнется серия постов в которых я раскрою жизнь ИНЖЕНЕРОВ ДАННЫХ. Я очень уважаю эту профеесию, как почти все другие професии в айти, даже древнейшую из оных Менеджера. Я до этого уже брал интевью, но в этот раз надеюсь будет ближе к вашим тчаиням. Так вот я взял интервью у трех DE: @data_engineerette @halltape_data @Shust_DE Спросил о работе, проектах и технологиях. Вам это будет полезно в первую очередь для понимая актуальной повестки татнов держащих на своих плечах облака и тружеников которые разгружают контейнеры пока мы "крутим" цифры и оптимизируем запросы) Я сам чуть чуть учился на DE в нетологии, и мне ппц не зашло. Я уже об этом говорил, но сейчас я понмаю, что мне пока ближе другой вектор, DE придержу в желтой зоне на изучние. Вы также можете задать свои вопросы в коментах к этому посту может они спустятся к нам и ответят на них или вдохновятся вашими вопросами для своих постов. -=Смысловая отсечка=- еще не забываем про моих менти, хотя мы постепенно становися просто приятелями, про их дела расскажу в начале след недели.3,14%
  • 11 июн.Я купил себе подписку для Claude и GPT. Сейчас у меня две подписки за 20$, в которых я пробую реализовывать свои пет-проекты, лежащие на полке с 2021, и меняю подход к работе с информацией в целом. Я стал сильно меньше гуглить, практически на нет сошло чтение каналов (сайты новостные или для обучения сто лет не открывал). Для быстрых вопросов я использую временные чаты, чтобы не засорять пространство. Начал активно использовать агентный режим в приложении ChatGPT, как пример использования, он нашёл мне магазин, где было выгоднее всего купить детское питание и памперсы) Но самое важное, что я начал делать свои микропроекты, как пример мой бот @data_brew_download_bot. Его я сделал в Claude Code за пару вечеров, и мне очень понравился итоговый результат. Я вообще не читал, что там в файле bot.py, только проверил, как он работает. Ещё из околотелеграмного я начал делать «Выжимки» из телеграм-каналов, которые кажутся мне толковыми. Я написал скриптик, который выгружает посты канала в csv, затем этот файл уже LLM саммаризирует под мои задачи. Осталась проблема с поиском годных каналов. И с чтением этой выжимки: три канала, которые я вытащил, ждут, пока я впитаю кристаллизированную мудрость. Ну и как уважающий себя вайбкодер я решил сделать приложение для iOS и опубликовать его в App Store. Буду делиться прогрессом реализации этого прикола (я вообще ничего не знаю в разработке для iOS). Купил подписку на ChatGPT через Playreok, вышло ровно 20. Claude купил себе с баланса Apple ID, пополнил её через Сбер) Сейчас критически важно для вашей карьеры не упустить всё, что происходит в сфере AI adoption. Практикуйтесь в упрощении и ускорении реализации идей, делайте продукты для себя. У вас есть потребность → формализуйте целевое состояние решения → реализуйте → итерируйтесь. Начните с самых простых вещей: в каком магазине дешевле? Генератор простых рецептов из тех ингредиентов, что у вас есть. Даже просто составить потребительскую корзину под ваши задачи, а затем оформить заказ без захода в приложения. Помните, когда появился интернет? Когда появилась крипта? А что стало потом? Я уверен, что сейчас самая приятная пора, дальше все эти ИИ-тулы превратятся в говно за кучу денег. У каждой технологии есть окно, когда она в прайме, И ЭТО ДЛЯ ИИ СЕЙЧАС. В Америке и у нас уже начинают вводить госрегулирование и госконтроль, это значит, что всё будет как минимум дороже. Я ещё не тестил Open Claw, хочу ради интереса установить его на Mac, чтобы ощутить себя Железным человеком с его Джарвисом. Самое крутое чувство, которое у меня было за прошлую неделю, чувство, что я всё могу, что мне не нужен чужой продукт мини-размера. Везде, где нет необходимости в общении или контрагенте, делайте себе продукт с нуля. Я ещё расскажу свои мысли про OPEX и CAPEX, про кривые обоснованности селф-мейда, но если кратко: цифровые продукты, за которые вы платите или в которых показывают рекламу и которые выполняют простую функцию, заменяйте. Даже обучение. Кидайте текст книги по А/Б-тестам в Claude и просите проверить вас по ней, чтобы узнать, какие главы в первую очередь читать конкретно вам. В общем, я от каждого продукта в бóльшем восторге, что Claude, что ChatGPT, стоят каждого цента.3,02%
  • 7 июн.Прибрался в канале. Поскольку сейчас ощущаю приливы летней энергии, решил вдохнуть свежести в мою авторскую колонку. Новая аватарка, старое название и прежнее желание приносить вам пользу совмещая с тем что мне интересно. В коментах накидаю фоток, которые были на пути к новой аватарке. Из анонсов: 1. Я решил сделать IOS приложение, расскажу что получилось. 2. Сделаю телеграм бота, чтобы можно было скачивать видео из разных ресурсов. 3. Истории из жизни по типу #подслушено все интересное из чатов и лс, но без указания имен и названий компаний. Если есть что рассказать можете писать в сообщения канала. 4. Еженедельный обзор новостей из айти по воскресеньям. НАКИДАЙТЕ В КОМЕНТЫ ЧТО ЧИТАЕТЕ. 5. Ещё готовлю Roadmap для аналитков с бесплатными ресурсами.2,98%
  • 10 июн.ДОРОЖНАЯ КАРТА ВКАТА Сами дорожные карты: Мой вариант на лето 2026 буду обновлять раз в квартал https://roadmap.sh/data-analyst - американсикий сайт чуть перегруженный, но в нем есть все что нужно. гугл дока - может не сильно удобно для восприятия, но без лишнего https://zasqlpython.ru - ну это вышка! Чаты: https://t.me/karpovcourseschat https://t.me/hihikvadrat Каналы: [nan] - все каналы плюс минус бесполезны если вкатываетесь, лишняя инфа будет мешать. Когда станете смешариком они сами у вас появятся. Менторы: Сейчас менторы действуют так: 0. ДАЙ денег 1. Накрути опыт 2. Запомни что спрашивают на собесах. 3. Подгони резюме под вакансию 4. Оставь отзыв. Вот бесплатный гайд вместо тысячи менторов: Учись навыкам >Откликайся всеми способами > Записывай собесы > Пересматривай и корректируй ответы >После офера попробуй увеличить сумму на 15% Инструменты: Claude ChatGPT купите подписку на LLM для базовых и уже не очень базовых моментов НЕЗАМЕНИМО!!!!2,66%
  • 28 июн.CAPEX vs OPEX Думаю, каждому доводилось думать об объёме ресурсов, которые целесообразно потратить на действие или предмет, и обычно в этом рассуждении фигурировало время использования предмета или время влияния этого решения. Весь дальнейший текст можно связать с фразой: «не корову же покупаем», а как понять, что сейчас это потенциальная «корова» или минимум «телёнок»? Когда стоит уже купить себе свою корову вместо покупки молока в магазине. Я не буду развивать эту аналогию, но идея, надеюсь, понятна. Моё первое знакомство с OPEX/CAPEX Такие аббревиатуры впервые я встретил, когда работал в «Магните». И встретил их довольно в неожиданном месте — в том, как правильно заполнять карточки JIRA. В конце спринта нужно было соблюсти баланс объёма работы, который тратился на OPEX (вроде 40%) и на CAPEX (60%). Моему лиду, видимо, зашили это в KPI, и он следил за тем, кто как списывает время, чтобы в итоге мы попали в таргет. Я делал, как мне просили, но глубоко в природу этого не погружался. Интуитивно я понимал задумку: лучше, пусть работники «наращивают» мясо компании, чем просто делают одноразовую работу. Но относительно недавно я начал применять корпоративные «термины» в личной жизни, и вам это советую! Приземляем OPEX/CAPEX Самый бытовой пример: у меня есть машина, которую нужно мыть. Вот и встаёт вопрос: дешевле купить керхер или загонять на мойку, или на мойку самообслуживания? Если моешь редко, то самый оптимальный вариант — это мойка, но как часто нужно мыть машину, чтобы уже купить себе керхер? Вот тут и начинается практика финансовой призмы. Но денежный эквивалент — не единственное, куда мы можем приземлить этот подход. Уборка, выбор кино на вечер, готовка и подготовка образов из имеющейся одежды. Если мы «капитально» замарачиваемся и придумываем схему, как нам эффективно делать работу, то дальше «операционные» траты будут существенно меньше! А что насчёт меня? В постах выше вы уже поняли, что я д'Артаньян и всё делаю как надо (нет). Я довольно редко задумываюсь в таком ключе, но уже начал делать это чаще и чаще. Сейчас я стараюсь выделить повторяющиеся действия/траты, которые можно «схлопнуть». К такому относится потребление ИИ — я прикидываю, сколько будет стоить собрать комп для небольших локальных моделей (примерно 150 тыс.). Что в итоге? OPEX/CAPEX — это старые песни о главном: важно всеми силами наращивать капитал. Объём свободного времени, глубина компетенций — это нематериальные проявления вашего капитала, так что начните оценивать свои действия на предмет созидания «неотчуждаемого» богатства. Варианты транзита OPEX в CAPEX: читаете новости и потом в чатах их обсуждаете — начните вести авторский ТГ-канал с аналитикой новостей. Какой тут CAPEX: 1) ТГ-канал 2) навык написания текстов 3) навык анализа трендов. Я очень надеюсь, что вы сможете по-новому посмотреть на то, чем вы занимаетесь, и начнёте наращивать капитал в любом его проявлении (социальный, денежный, временной).2,57%
  • 26 июн.👀 псс, не спишь? тут выложил бесплатный курс по Pandas с нуля с возможностью практиковаться прямо в браузере. В дальнейшем покрою весь функционал аналитика, нужно чуть побольше времени :) также он есть и на Stepik... уже 1500 подписчиков, го сделаем 5к а, еще забыл, здесь добавил курс по ML с учителем для начинающих аналитиков, позже буду расширять линейку курсов на Stepik тоже! ну, а практиковаться перед собесами (да и в целом в аналитике) можно тут @zasql_python2,51%
  • 2 июл.ВЫКАТИЛИ FABLE Вот гайд как создать новый Apple ID,скачать себе клод и оплатить🔑 Недавно протестировал этот способ — всё получилось. Делюсь пошаговой инструкцией. Что понадобится SMS-активация — https://smsfast.io/activations Генератор американского адреса — https://mockaddress.com/ru/usa-address/ Google — чтобы найти штат США без налога (например, запрос: «штаты США без налогов»). IP локация США Шаг 1. Получаем номер Регистрируемся на SMSFast. За регистрацию мне начислили 25 ₽. Из них 12,75 ₽ ушло на аренду номера для Apple (USA). ⚠️ Сразу сохраните или запишите: имя; фамилию; номер телефона. Они пригодятся позже при заполнении данных. Шаг 2. Получаем адрес Переходим на MockAddress и генерируем американский адрес. При выборе адреса желательно использовать штат без налога (его можно быстро найти через Google по запросу «штаты США без налогов»). Эти данные понадобятся при заполнении платежной информации Apple ID. Шаг 3. Меняем регион Apple ID Перед пополнением необходимо изменить регион Apple ID на США. 💡 Если не хотите менять регион основного аккаунта, лучше создать отдельный Apple ID только для App Store. У меня, например: основной аккаунт — Россия; второй — США, только для установки и оплаты зарубежных приложений. Шаг 4. Пополняем баланс Apple ID На примере Сбера: ➡️ Открываем Сбер. ➡️ Заходим в Платежи. ➡️ В поиске вводим Apple. ➡️ Выбираем нужный регион. ➡️ Вводим сумму пополнения и почту Apple ID. ➡️ Подтверждаем платеж. После этого деньги появятся на балансе Apple ID, и ими можно оплачивать приложения и подписки.2,30%