Я – Дата Инженер | Евгений Виндюков
Статистика💵 Как стать Data Engineer 🗄 Смотри Roadmap в закрепе! _____________________________ Автор @halltape Все вопросы по рекламе @k_shredinger
- Последний пост
- 14 авг.
- Последнее чтение
- 15:23
- Постов за неделю
- 6
- Всего постов
- 21
- Тип
- открытый
- Язык
- русский
- Категория
- Карьера (по похожим)
- В каталоге с
- 12 авг.
- 1/24сутки в ленте
- 1 481
- 1/48двое суток
- 1 697
- 1/72трое суток
- 1 830
Оценка по просмотрам недавних постов: пост набирает почти всё за первые сутки.
Посты
Легенда для Дата Инженера за 1 промпт! Составляем Резюме Буквально 1 промпт, который из любой твоей истории сделает готовую легенду для Дата Инженера. Это не кликбейт. Я реально на вайбкодил готовый сервис для сборки вашего рассказа на собесе и резюме. А также показал, как его составить, чтобы вас не скипали. Смотрите на Youtube ▶️ https://youtu.be/okvu18S7h2U Кстати, мы уже набираем поток на BootCamp. Старт 1 сентбяря @bootcampych_bot
видео или голосовое, без подписи
видео или голосовое, без подписи
видео или голосовое, без подписи
Ты не достоин Валютной Удаленки! Короче это не так. Конечно, сложнее точно, но не ставьте на себе крест. Я потихоньку начинаю разбираться в этом вопросе. Мне на ютубе попался видос (да сто процентов и вам тоже) от айти красавчика, который на GO пишет. Весь видос я не смотрел, потому что я скинул видос в ChatGPT и попросил вывести суммаризацию. Из ключевых моментов, которые мне откликнулись: - Надо точно отрепетировать свою само-презентацию на английском вплоть до мелочей - Язык должен быть уровня B1 - B2 - Акцент не важен - Если есть вариант субтитров на созвонах, надо использовать их - Набрать 300-500 контактов в Линкедин (желательно не индусов) - Не всегда есть work life balance (будьте готовы к любой ерунде) - Забудьте про свои ДМС - Постоянно общаться на English сильно утомляет Что я сам думаю? Я проходил год назад собесы на английском языке, но правда в русскоязычные команды. Т.е. там, где люди умеют ПО РУССКИ говорить. В целом идея в том, чтобы застолбить свою самопрезентацию — это прям БАЗА точно. А кстати еще чуваки в видосе сказали, что если будете учить Английский с репетитором, не надо брать с уклоном в IT, так как мы с вами уже знаем айтишный английский. Нам нужно больше описательных и разговорных оборотов. Вот этого может как раз не хватать в работе. А если вам тоже интересно двигаться в эту сторону, то пройдите опрос https://forms.gle/KWcWJFwtiZbosugR7 У нас много ребят, кто живет в разных странах и есть те, кто уже работает в таких компаниях. Поэтому предлагаю понять, какой у нас у всех уровень, потом созвонимся и обсудим: ЧТО НАМ С ЭТИМ ВСЕМ ДЕЛАТЬ! Ну английский это ладно. На самом деле меня больше всего интересует стек, а именно AWS, GCP, Azure, Databricks и дальше по списку. Это мне более непонятно пока. Но разве у нас есть преграды? Пффф.. хорошо, что чат гпт есть)) ахахах P.S. В комменты закину TXT файлик с более подробным описанием
Валютная удаленка СЮДА! Есть идея прочекать этот рынок и понять, какие есть трудности и боли, а самое главное требования на рынке для ДЕ. Например знаете ли вы, как оформить линкедин, а ИП в какой-то стране? Или может не знаете, что учить из облачных технологий. А английский нужен? А он у вас точно нормальный или на уровне, когда вы все еще путаете has и have? Что я хочу? Пройдите плиз мой опрос. Я соберу ваши ответы и начну собирать инфу. Актуальную и объективную. https://forms.gle/KWcWJFwtiZbosugR7 Потом сделаем с вами, кому интересно, общий созвон и поговорим на эту тему. Анонс сделаю в этом канале! Сразу скажу, идея в голове в том, чтобы стать условным HR у компаний, чтобы сразу поднатаскать под позицию и устроить. Именно под западный стек.
Старт 8 потока BootCamp! Для тех, кто пропустил стрим, я сделал специально отдельный ролик про наш мощнейший BootCamp для Дата Инженера. Кто не знает, что такое BootCamp DE. Мы сделали супер интенсив за 2 месяца в DE. Это буквально копия вашей будущей работы. Смотрите на Youtube! ▶️ https://youtu.be/O4GD-zSkgcE ▶️ https://youtu.be/O4GD-zSkgcE ▶️ https://youtu.be/O4GD-zSkgcE Ближайший старт потока — 1 сентября Переходите в наш бот @bootcampych_bot и жми Хочу на BootCamp Кол-во мест ограничено!
Топовые темки-связки для ДЕшника! Знаете, в альтернативной реальности существуют люди-темщики со своими криптой, P2P и арбитражем. Кто не в курсе — это граждане, которые мутят околонелегальные схемы заработка в интернете. Мутные типы, короче. А при чём тут дата-инженеры? Ну теперь это и они тоже.. Ладно шучу. Да ни при чём. Просто нужно было привлечь ваше внимание, пока вы бездумно листаете рилсы и шортсы, сидя на белом троне. В общем, я сделал завайбкодил сайт-приложение для дата-инженеров, где можно собрать топовую схему собственного пайплайна. Мне надоело постоянно рисовать архитектуру в Miro вручную, когда можно просто выбрать нужные инструменты и собрать красивую анимированную схему со всеми связями. ➡️ https://databuilder.roadmappers.ru Сейчас там уже есть Kafka, Spark, Airflow, S3, ClickHouse, Trino и другие инструменты. В планах добавить AWS, Google АБЛАКА, МИКРОСОФТ АЖУР, Snowflake, DataБРИКС и вообще всё, что нужно для создания практически любой data-схемы. Кстати уже можно делать выгрузку готовых картинок-схем. Если не знаете, как работает какой-то инструмент, можно дважды кликнуть по нему и получить ссылку на соответствующий раздел нашего Roadmap. Там внутри на самом деле есть готовые схемки + также можно импортировать свою или эскпортировать текущую - я думаю разберетесь. Короче, всё в одном месте для дорогих дата-инженеров! Кстати, если вы ещё не смотрели мой видос про инструменты дата-инженера — обязательно гляньте: ▶️ Смотреть на YouTube
Lakehouse для аналитиков и инженеров данных Приглашаем изучить популярный подход построения хранилищ данных Data Lakehouse c разделенным Compute и Storage на основе Iceberg и Trino. В программе курса: • Современная архитектура аналитических систем от DWH и Data Lake до Lakehouse с разделением Compute и Storage на базе Apache Iceberg и Trino. • Iceberg: управление файлами, снимками, каталогами, схемами изменений и очисткой. • Практическое использование Iceberg Catalog, работа с кластером Trino (на Kubernetes), подключение данных на S3 и выполнение SQL/ Python-запросов. • Работа с Iceberg+Trinо на больших масштабах: сложные запросы к датасету TPC-DS (2.8 млрд строк), интеграция с DBT, Apache Airflow, оценка производительность систем. • Построение пайплайнов, инструменты для корректной поддержки, обновления и масштабирования Lakehouse-инфраструктуры на уровне предприятия. Кто мы: R&D-центр Devhands, наш канал. Автор курса — Алексей Белозерский, CDO в inSales (Сбер 2B), ex: VK Tech, М.Видео, Эльдорадо 🗓 Старт курса: 27 августа Изучить программу и записаться можно здесь. Ждём вас! Реклама. ИП Рыбак А.А. ИНН 771407709607 Erid: 2VtzquZf5с8
Антон Чигур отчитывает Джуна Дата Инженера! https://youtube.com/shorts/t5zUcI0_EVk?is=B2v211CnYhwm68EO Кто не видел, срочно смотреть - этот шедевр потихоньку набирает свои просмотры уже!
Набор на BootCamp Сентябрь ОТКРЫТ! ВОСЬМОЙ ПОТОК стартует уже 1 сентября! Успей записаться через @bootcampych_bot и жми Хочу на BootCamp Для тех, кто не знает, что такое BootCamp DE. Мы сделали супер интенсив за 2 месяца в DE. Это буквально копия вашей будущей работы. Представьте, что вы приходите на новое место работы, и увольняющийся коллега передаёт вам дела. У него есть две недели, чтобы показать, что и как делать. Вы буквально впитываете всё как губка, потому что потом спрашивать будет не у кого. Так вот именно эту идею мы и вложили в Bootcamp! За короткое время вы погружаетесь в работу инженера данных, осваиваете современный стек и получаете навыки прохождения собеседований и составления резюме. Мы реально вычеркнули большую часть бесполезной теории. Упор исключительно на практику. Чтобы вы пришли на работу и сказали: "Мы это уже делали" 🔴 Уже в это воскресенье 2 августа 14:00 МСК делаем СТРИМ, где покажем, как сейчас выглядит BootCamp и что нового мы туда внесли! А пока можете посмотреть ▶️ видео с прошлого потока ссылка на СТРИМ - https://telemost.yandex.ru/live/afa760a8b2b349369d0290a40cb0c984 Ближайший старт потока — 1 сентября Переходите в наш бот @bootcampych_bot и жми Хочу на BootCamp Кол-во мест ограничено!
Не знаешь AWS — не получишь оффер! Два дня назад в Тбилиси (Грузия) я пообщался с тимлидом DE из одной компании. Название не скажу. Это не банк. Сокращенная аббревиатура звучит как «Телевизор» на английском. ИХ стек и стек на рынке РФ — это параллельные вселенные. Буквально, вы разговариваете на разных языках. Из общего у нас только Airflow. Дальше идут Glue, Glue Catalog, Redshift, Athena, Lambda и еще ряд сервисов, о которых я СЛЫШАЛ, но ДО СИХ ПОР НЕ ЗНАЮ! (это просто позор). Конечно, под капотом это те же Spark, Greenplum и ClickHouse. Но знающие люди скажут, что я ЦКАТИНА такая и все неверно написал. Но кто, если не я, напишет вам понятным и доступным языком об этой душной теме? Я спросил, как они нанимают. Вы должны знать либо AWS, либо Azure, либо аналоги. Дальше можно будет уже вкатиться в процессы. Приоритет отдают тем кандидатам, которые могут привнести свою допэкспертизу в команду. Например, вы копали в своей карьере то, как работает Spark или Airflow (ну, прямо сильно копали), и можете закрыть какие-то пробелы в команде — тогда, может быть, возьмут. Тут релокация в Тбилиси и ОФИС. Ну, либо гибрид. Компания вас перевезет. Ищут на LinkedIn, HH. Нанимают и из РФ соответственно... короче, если вы говорите на языке команды. Но не все соглашаются, потому что все хотят ВАЛЮТНУЮ УДАЛЕНКУ. Хотя тут, возможно, играет большой фактор зарплаты. Например, а если вам предложат +1 млн долларов? Ладно... Короче, я думаю, насыпать денег — тоже может помочь завлечь. Что еще? Я спросил, а где учить? Roadmap? Bootcamp? Мне сказали, только курсы AWS внутри. Причем с сертификатом или без — это на твое усмотрение. Какие-то компании просят сертификат. Какой-то доступный ресурс, чтобы более-менее понятно было объяснено, я не услышал. Ну, возможно, Amazon действительно хорошо и так преподносят. Но для меня пока это все еще на уровне, когда я только начинал учить DE. Есть идея зайти и на этот стек и познакомить вас с ним. Но сейчас все выглядит как огромное кол-во инструментов, у которых есть тысячи аналогов, и на тему выбора которых могут спорить в ТРУШНЫХ чатах DE-шников. Вообще, иногда смотришь на все эти инструменты и кажется, что это инопланетные технологии, о которых должны знать только избранные. А обычные люди пусть страдают сами! Не гоже дело! Мы страдали и ты страдай!
▶️ Не становись Дата Инженером, пока не посмотришь это видео! https://youtu.be/H2afgcadVHg https://youtu.be/H2afgcadVHg https://youtu.be/H2afgcadVHg Рассказываю, ЗАЧЕМ ТАК МНОГО ИНСТРУМЕНТОВ для этого Дата Инженера! АСТАНАВИТЕСЬ! По факту раскидывал вам примеры использования на завайбкоженом сервисе — ссылка в описании к видосу. Кстати если будут вопросы или пожелания — пишите в лс. Или если есть вопросы и хочется видео на определенную тему, тоже пишите!
Типичные вопросы с собесов на Дата Инженера Часть 2 Hadoop | Spark | DWH https://youtu.be/BWSXh1Ussms https://youtu.be/BWSXh1Ussms https://youtu.be/BWSXh1Ussms Кстати, мы уже набираем поток на BootCamp сентябрь Запись на поток
Базовый минимум для VS CODE Если у тебя нет этих расширений, то нам не о чем с тобой разговаривать. Это так на Патриках мне сказали, однажды, когда я убирал улицу от мусора. Еще и пять тысяч кинули в лицо из гелика.. Это был самый неоднозначный день в моей жизни. Ближе к делу. Есть VSCode. Программа, где программисты-душнилы пишут свой никому ненужный код. Либо вайбокодят и делают вид, что работают. Хочу поделиться самыми основными плагинами для этой програмы, которые помогают мне ПО СЕЙ ДЕНЬ БЫТЬ почти программистом. Сразу скажу: я не собирал сюда 150 расширений, которые показывают погоду, настроение разработчика и фазу Луны во время деплоя. Только то, чем реально пользуюсь. Black Formatter Чтобы код не выглядел как будто его писали во время высадки в Камбодже. Автоматически делает аккуратным. Пишете код ногами, сохраняете файл — Black его форматирует. Можно включить форматирование при каждом сохранении: "[python]": { "editor.defaultFormatter": "ms-python.black-formatter", "editor.formatOnSave": true } Flake8 Если Black молча исправляет форматирование, то Flake8 ходит за вами и говорит: «Вообще-то здесь импорт не используется». «Вообще-то переменная не определена». «Вообще-то строка слишком длинная». «Вообще-то ваш код нарушает правила». То есть Flake8 — это линтер. Он анализирует код и показывает потенциальные ошибки, подозрительные места и нарушения стиля. Открываете Python-файл — расширение автоматически запускает проверку. DBCode Чтобы не переключаться постоянно на DBeaver или DataGrip DBCode превращает VS Code практически в программу для баз данных. Можно подключиться к PostgreSQL, ClickHouse, MySQL, SQLite, MongoDB и ещё огромному количеству баз, открыть таблицы, посмотреть колонки, написать SQL-запрос и сразу увидеть результат. По ощущениям — DBeaver встроили прямо в редактор. Очень удобно, когда одновременно пишете Python, SQL и смотрите данные. Parquet-viewer Чтобы посмотреть файл формата Parquet. Если что, паркет нельзя открыть и посмотреть содержимое. Это вам не CSV или TXT. Там внутри из коробки будет нечеловекочитаемая ерунда. Dracula Theme Это просто тёмная тема. Там есть розовый цвет, поэтому если вы мощный мужик — это для вас. Codex Это coding agent от OpenAI, встроенный в VS Code. Главное отличие от обычного ЧатаГПТ: ему не нужно вручную отправлять каждый файл по отдельности. Он может работать с репозиторием, находить нужные файлы, разбираться в связях между модулями, объяснять незнакомый код и вносить изменения. Например, можно попросить: - рассказать, как устроен новый репозиторий; - найти, откуда запускается конкретный процесс; - объяснить непонятный файл; - добавить проверку; - исправить ошибку; - написать тесты; - поменять логику сразу в нескольких связанных файлах; - проверить изменения. Особенно полезно, когда открываете чужой проект, видите 300 папок и понимаете, что сегодня можно было просто не просыпаться. Но есть нюанс. Работает только, если вы не в РФ. А как быть не в РФ, но при этом в РФ — думаю все понимают. Но кодекс правда у меня платный. Я плачу по 20 долларов в месяц на подписку GPT Plus. И я в восторге. Если есть какие-то ваши находки, делитесь, че еще удобное можно использовать?
Один из наших выпускников BootCamp @bootcampych_bot
видео или голосовое, без подписи
Подтверди скилл в Yandex Cloud со скидкой 50% 🚀 Коллеги, у нас всего пара недель, чтобы закрыть вопрос с сертификацией на льготных условиях. До 25 сентября включительно действует скидка полцены на два экзамена от Yandex Cloud. Для дата-инженеров — самое то, чтобы официально зафиксировать свой уровень и получить весомый плюс к резюме. Что предлагают: 1️⃣ Yandex Cloud Certified Data Engineer База для тех, кто уже плотно работает с облачной платформой. Экзамен покрывает всё основное: загрузка и приём данных, ETL/ELT-процессы, оркестрация, мониторинг и безопасность. Хороший способ систематизировать знания и подтвердить их на практике. 2️⃣ Yandex Cloud Certified Lakehouse Data Engineer Для тех, кто ушёл глубже и работает с архитектурой Lakehouse. Тут уже спрашивают про проектирование решений, трансформацию данных и построение пайплайнов в этой парадигме. Продвинутый уровень для серьёзных проектов. Как проходит экзамен? Онлайн-тестирование с прокторингом — запись на камеру, контроль нарушений. Всё прозрачно и без вариантов "списать". 📌 Успей зарегистрироваться до 25 сентября 2026: Ссылка Ссылка Потом цена вернётся к обычной, так что не тяните. Удачи на экзамене! 💪
Типичные вопросы на собесе на Дата Инженера Выпустил ролик про вопросы на собесах. Далеко не весь пулл, но постарался объяснить свои ответы. Вопросы брал из нашего Roadmap. Внутри вопросы по SQL, Python, Spark и Airflow ▶️ Смотреть на Youtube Кстати, у нас открыта запись на следующий поток BootCamp (Сентябрь 2026) @bootcampych_bot
Учить инженерию данных по курсам и роликам — это как собирать пазл без картинки на коробке: детали вроде бы есть, а как они складываются вместе — не всегда понятно karpovꓸcourses сделали тест-квест, который эту картинку как раз и показывает: вы сами, шаг за шагом, собираете дата-платформу стартапа — от Excel до Kafka, Spark и ClickHouse — и видите, как отдельные инструменты складываются в цельную архитектуру. Прохождение построено как игра: выбираете следующий шаг, растет уровень зрелости платформы, накапливается ваш опыт, от которого вы получается звание в инженерии данных. Узнайте, какой вы инженер данных: https://clc.to/erid_2W5zFGaGrnd Реклама. ООО «КАРПОВ КУРСЫ». ИНН 7811764627. erid: 2W5zFGaGrnd