5 Aug 2026, 15:10 UTC379 views19 reactionsread 7 August 2026 Photo
Собес в бигтех: когда теория уже не спасает
На собесах в классные компании на интервью редко спрашивают только «что такое ETL?». Чаще дают кейс с прода и смотрят, как ты думаешь🧐: где риск дублей, что сломается при ретрае, как найти узкое место и чем лечить проблему.
💡Собрал 5 интересных и реальных вопросов, на которых проверяют реальный опыт:
1️⃣Airflow: задача упала на середине загрузки — что делать?
Не просто…
👍11🔥4❤2👀1😁1
1 Aug 2026, 09:58 UTC669 views24 reactionsread 7 August 2026 Photo
🎉Июль стал рекордным месяцем по количеству офферов!
За этот месяц 9 офферов:
🔥 5 - с нуля в Data Engineering
🚀 4 - с коммерческим опытом
Причем компании самые разные: от крупных бигтехов до иностранных компаний и стартапов.
Это еще раз подтверждает: рынок Data Engineer жив 🎥
📊Среднее время до оффера:
🤩С нуля - 5,5 месяцев
🤩С опытом - 3 месяца
Очень рад видеть такие результаты. Для меня это показатель того, что п…
🔥13❤7🏆3🥰1
28 Jul 2026, 15:40 UTC877 views22 reactionsread 7 August 2026 Photo
Flink vs Spark Streaming: что выбрать для Data Lakehouse
Если совсем просто, Flink и Spark Streaming - это инструменты, которые обрабатывают данные на лету➡️
То есть не ждут конца дня, чтобы всё пересчитать, а работают с событиями почти сразу, как только они появляются🌟
🐿Что делает Flink:
Flink нужен там, где данные идут непрерывным потоком: из Kafka, из логов, из CDC, из событий приложения.
Он умеет сразу приним…
🔥11👍6👏4❤1
23 Jul 2026, 14:02 UTC886 views18 reactionsread 7 August 2026 Photo
Зачем нужен dbt, если есть Spark и ClickHouse?
Многие до сих пор путают dbt (Data Build Tool) с вычислительными движками. Давайте сразу: dbt сам ничего не считает🚨
Он не заменяет Spark, Trino или ClickHouse. dbt — это инструмент для организации трансформаций внутри вашего хранилища🖥Он превращает разрозненные SQL-скрипты в полноценный инженерный проект с тестами, документацией и зависимостями.
В чем суть?
Без dbt …
🔥9👍5👏3❤1
18 Jul 2026, 15:50 UTC≈1,000 views13 reactionsread 7 August 2026 Photo
Что спрашивают в Бигтехе: вопросы по Iceberg и Trino из закрытого канала
В вакансиях всё чаще мелькает связка Iceberg + Trino + S3. Тренд понятный: многие компании сейчас мигрируют с классических СУБД на объектные хранилища и ищут инженеров под эти задачи🚨
Если планируете выходить на рынок, к вопросам по этому стеку нужно быть готовыми. Собрал список того, что реально спрашивают на собесах — инсайды от ребят из наш…
👍6🔥4💯2👀1
15 Jul 2026, 18:05 UTC988 views21 reactionsread 7 August 2026 Photo
13 параметров Spark, которые стоит знать перед собеседованием
Надеюсь все правильно ответили в предыдущем опросе, но в любом случае советую освежить память или узнать что-то новое🔥Перечислил самые популярные параметры Spark, которые реально встречается в конфигах и на проде
💦 Ресурсы
spark.executor.instances
— сколько executors поднимется для приложения.
spark.executor.cores
— сколько ядер выделяем на один ex…
👍11🔥6👏4
15 Jul 2026, 10:04 UTC818 views14 reactionsread 7 August 2026 Poll
⚙️ Есть конфигурация:
spark.executor.instances = 100 spark.executor.cores = 5 spark.executor.memory = 28g spark.executor.memoryOverhead = 2g Сколько памяти займут Executors❓
- 2800 GB34%
- 3000 GB46%
- 2820 GB16%
- 3020 GB4%
Shares as published. No per-option vote count is published by Telegram, so none is shown.
🔥6👀4💯4
15 Jul 2026, 10:04 UTC779 viewsread 7 August 2026 ⭐️Вспомним параметры Spark?
9 Jul 2026, 13:35 UTC≈1,180 views15 reactionsread 7 August 2026 Photo
Рынок в Data Engineering, лето 2026??⚙️
Рынок изменился, и это факт. Но важно понимать: он не умер. За последние две недели 5 моих учеников уже получили офферы 👊, поэтому вакансии есть, но конкуренция стала заметно выше.
Если раньше для оффера на Junior/Middle позицию достаточно было знать теорию и пару инструментов, то в 2026 году требования взлетели. Сейчас на собеседованиях мало просто понимать технологии. От те…
🔥7👀3🤔3❤2
5 Jul 2026, 11:15 UTC≈1,160 views16 reactionsread 7 August 2026 Новая статья на VC!
Вспомните или узнаете про UPDATE в ClickHouse🏠
ССЫЛКА
P.S. буду благодарен за лайк и комментарий 😛
👍10💯3🔥3
2 Jul 2026, 11:02 UTC≈1,400 views24 reactionsread 7 August 2026 🗂 Навигатор по техническим постам
Собрала все статьи канала в одном месте — сохраняйте, чтобы не потерять 👇
🧭 Старт в профессии
Как я стал дата-инженером
Как я получил оффер на Джуна в ML
⚙️ Основы Data Engineering
Что такое ETL и ELT?
OLTP и OLAP
Что такое оркестратор данных
Взрыв дублей при JOIN
Разный grain таблиц и как его фиксить
〰️ Базы данных и хранилища
Oracle
HDFS
Объектное хранилище (object stor…
🔥17👍3👏2💯1😁1
28 Jun 2026, 13:26 UTC≈1,110 views18 reactionsread 7 August 2026 Photo
Новое видео на ютуб ⛔️
Бегом смотреть😆:
YOUTUBE
RUTUBE
P.s. лайки, комментарии и подписка очень мотивируют снимать дальше
❤9🔥5👀2👍1😁1
Showing the 12 most recent of 17 posts we hold for @dataengineerlab. View and reaction counts are the latest single reading for each post, not a live figure, and a recent post is still accumulating both. A view count marked ≈ was rounded by Telegram before we ever saw it — t.me prints views in full below 1,000 and to three significant figures above, so ≈1,200,000 means somewhere between 1,150,000 and 1,249,999. Unmarked counts are exact. Text is reproduced from the public post preview and truncated for length.