Старший Data Engineer в продуктовую IT-компанию

В крупную продуктовую IT-компанию требуется Senior Data Engineer. Компания разрабатывает собственную высоконагруженную платформу и имеет команду из более чем 500 специалистов. В данный момент команда занимается перестройкой существующего хранилища данных (DWH) на современную архитектуру Data Lakehouse. Новый контур создается практически с нуля: уже реализована часть платформы, и сейчас идет масштабирование на остальные данные и развитие новых витрин. В этой роли вам будет предоставлена высокая степень самостоятельности и возможность решать задачи end-to-end — от получения данных из источника до создания готовой витрины. Архитектура и технические решения обсуждаются внутри команды, что позволяет Senior Data Engineer влиять на развитие платформы. Что предстоит делать: - Развивать Data Lakehouse и единое DWH. - Строить ETL/ELT-пайплайны от источника до готовой витрины. - Разрабатывать интеграции с внутренними и внешними системами. - Настраивать оркестрацию и регулярное обновление данных. - Работать с качеством данных (data quality) и управлением метаданными (metadata management). - Участвовать в выборе инструментов и архитектурных решений. - Взаимодействовать с архитекторами, DevOps, информационной безопасностью и бизнесом. Что хотим видеть в кандидате: - Уверенные знания Python и SQL. - Опыт работы с Airflow или Dagster. - Опыт построения ETL/ELT-пайплайнов. - Хорошее понимание DWH и современных подходов к работе с данными. - Опыт работы с Kafka или streaming-технологиями. - Опыт в небольших командах или проектах, где приходилось самостоятельно закрывать широкий круг задач. Будет плюсом: - Знание Trino, Apache Iceberg, DBT, ClickHouse. Компания предлагает: - Оформление по ТК РФ. - ДМС со стоматологией после испытательного срока. - Компенсация питания — 10 000 ₽ в месяц. - Полугодовые премии. - Ежегодная индексация. - Спортивные активности и корпоративные мероприятия. - На испытательном сроке — работа в офисе 5/2, далее возможен гибридный формат по договоренности.