Senior Data Engineer — развитие платформы и интеграции@ Flowwow

Что за роль

Senior Data Engineer в компании Flowwow будет заниматься развитием ядра платформы, включая проектирование API и написание библиотек на Python.

Чем вы будете заниматься

• Развивать ядро платформы: фреймворк Data Vault, обвязку Airflow, lineage-инструменты.
• Писать библиотеки и фреймворки на Python: клиенты к источникам, инструменты тестирования пайплайнов.
• Работать с lakehouse на глубине: Iceberg maintenance и оптимизация layout'а таблиц.
• Строить интеграции с источниками: OLTP-базы, REST/gRPC API, Kafka.
• Внедрять AI в инженерные процессы: агенты для расследования инцидентов.
• Участвовать в архитектурных решениях: выбор технологий и дизайн интерфейсов.
• Делать code review и менторить менее опытных коллег.

Требования

• Промышленный опыт от 5 лет в data engineering или backend-разработке.
• Уверенное знание Python на уровне senior разработчика.
• Практический опыт работы с lakehouse-стеком, Apache Iceberg.
• Глубокое знание Apache Airflow и написание собственных операторов.
• Опыт работы с Apache Spark и продвинутый уровень SQL.
• Уверенное использование Git и CI/CD.

Будет плюсом

• Опыт разработки внутренних платформенных инструментов.
• AI-native подход к разработке.
• Опыт с Kubernetes и стриминговыми пайплайнами.
• Знание форматов хранения данных, таких как Parquet.

Что мы предлагаем

• Полная занятость с оформлением трудового договора.
• График 5/2 и удаленный формат работы.
• Уровень дохода обсуждается на этапах найма.