Ведущий разработчик ETL@ Outlines Tech

О позиции

Компания Outlines Tech ищет ведущего разработчика ETL для работы с большими данными. Вы будете заниматься разработкой и сопровождением ETL-процессов, а также работать с современными инструментами и технологиями в области Big Data. Это отличная возможность для тех, кто хочет развиваться в динамичной и инновационной среде.

Чем вы будете заниматься

• Разработка ETL-процессов для обработки больших объемов данных.
• Использование Apache Spark и PySpark для обработки данных.
• Работа с инструментами Apache Airflow для автоматизации процессов.
• Сопровождение и оптимизация существующих ETL-процессов.
• Взаимодействие с командами для интеграции данных из различных источников.
• Обеспечение качества данных и их доступности для аналитики.

Требования

• Коммерческий опыт разработки в Big Data от 3 лет.
• Уверенное знание Python и SQL.
• Опыт работы с Apache Spark и PySpark.
• Практический опыт работы с Apache Airflow.
• Опыт работы с Hadoop/HDFS и S3 или S3-compatible хранилищами.
• Знание форматов Parquet и ORC.
• Опыт работы с Git и CI/CD инструментами.
• Базовое понимание работы Kafka.
• Практический опыт работы с архитектурой Data Vault.

Будет плюсом

• Опыт работы с облачными платформами.
• Знание методов машинного обучения.

Что мы предлагаем

• Конкурентоспособная заработная плата от 220 000 до 270 000 ₽.
• Полностью удаленная работа с гибким графиком.
• Возможности для профессионального роста и развития.
• Доступ к современным инструментам и технологиям.
• Дружелюбная команда и поддержка коллег.