Ведущий инженер данных
Что за роль
Ведущий инженер данных будет отвечать за архитектуру данных отдела и надёжность production-контура. Работа проходит в гибридном формате в Москве; в команде используют Airflow, Python, SQL и Spark.
Чем вы будете заниматься
- Проектировать и развивать архитектуру пайплайнов, DWH, интеграций, мониторинга и CI/CD.
- Разрабатывать и оптимизировать процессы на Airflow, Python, SQL и Spark.
- Внедрять проверки качества данных и мониторинг отклонений.
- Оценивать варианты развития или замены архитектуры, включая стоимость, бюджет, риски и ожидаемый эффект.
- Повышать отказоустойчивость production-систем, решать сложные инциденты и развивать инженерные стандарты.
Требования
- От 3 лет опыта в роли Middle или Senior Data Engineer.
- Опыт самостоятельного проектирования и развития архитектуры данных.
- Опыт работы с production-системами и ответственность за их работоспособность.
Будет плюсом
- Опыт применения или внедрения AI-инструментов.
Кто здесь добьётся успеха
Уверенно проектирует архитектуру DWH и сквозных потоков данных: выбирает подходы к интеграциям и обработке, сочетая Airflow, Python, SQL и Apache Spark с требованиями к масштабируемости и сопровождаемости.
Относится к production надёжности как к части разработки: внедряет проверки качества данных, мониторинг отклонений и CI/CD, умеет находить причины сбоев в пайплайнах и предотвращать их повторение.
Обладает опытом ведущего уровня: способен задавать технические стандарты отдела, принимать архитектурные решения и разбирать компромиссы между скоростью обработки, стоимостью и качеством данных.
Комфортно работает в гибридном формате в Москве: самостоятельно продвигает сложные задачи между встречами и эффективно использует очное взаимодействие для согласования архитектуры и технических решений.
Ресурсы для обучения
Карьерный путь
Обзор рынка
Навыки и требования
Тренды отрасли
Новости Real Estate
Загружаем новости отрасли...
Ищем релевантные статьи за последние 6 месяцев