Что за роль

Проект связан с программным обеспечением транспортной компании. Работа посвящена разработке хранилища данных и ETL-процессов.

Чем вы будете заниматься

• Разрабатывать ETL/ELT для хранилищ или озёр данных.
• Создавать DAG’и в Apache Airflow и управлять зависимостями ETL-пайплайнов.
• Оптимизировать SQL, в том числе для OLAP.
• Интегрировать данные через API, веб-сервисы и очереди.

Требования

• Опыт от 2 лет в роли инженера данных или разработчика ETL на SQL и PySpark.
• Знание SQL, PostgreSQL и Apache Airflow.
• Базовое владение Apache Hadoop, Spark, Hive или Impala.
• Опыт работы с Kafka или RabbitMQ, S3 Minio и Apache Iceberg.

Что мы предлагаем

• Полный рабочий день на удалённом формате.
• Оформление по ИП или ГПХ.
• Работа на проекте.