Data Engineer (Middle+ | Senior)

О позиции

Мы в поиске Data Engineer для проектной занятости. Эта позиция Data Engineer предлагает возможность работать с современными технологиями в области больших данных. Вы будете заниматься разработкой, реализацией и поддержкой интеграционных решений на стеке технологий, принятых в команде.

Чем вы будете заниматься

• Самостоятельная разработка, реализация и поддержка интеграционных решений на стеке технологий, принятых в команде (Java, Groovy, Apache Nifi, Airflow);
• Определение стека технологий для конкретных проектов и задач;
• Решение технически сложных задач, которые не могут решить другие инженеры в команде;
• Оперативное реагирование на информацию о проблемах в зоне ответственности;
• Разработка и контроль актуальности документации по взаимодействию конфигурационных единиц платформы больших данных;
• Контроль качества интеграционных решений с последующим созданием задач/дефектов для рефакторинга;
• Определение технологической стратегии развития проекта или продукта;
• Выстраивание процессов (например, CI/CD, код-ревью), внедрение и развитие инженерных практик.

Требования

• Опыт работы в роли Data Engineer от 4-х лет;
• Опыт полного цикла создания данных: от проектирования пайплайнов и моделей до внедрения в production и мониторинга;
• Системное мышление, способность проектировать масштабируемые и отказоустойчивые решения;
• Навыки эффективной коммуникации с командами аналитики и разработки;
• Опыт написания эффективных SQL-запросов для анализа и трансформации данных;
• Опыт написания DAG в Airflow для планирования ETL-задач;
• Знание Python и PySpark для разработки скриптов для ETL;
• Базовое понимание Kubernetes и его компонентов.

Будет плюсом

• Опыт работы с OLAP-системами (ClickHouse, Impala);
• Понимание архитектуры микросервисов на базе K8s;
• Опыт работы с Parquet, Iceberg, JSON, CSV.

Что мы предлагаем

• Конкурентная заработная плата от 272К до 285К ₽;
• Долгосрочный проект с возможностью профессионального роста;
• Работа в дружной команде профессионалов;
• Гибкий график работы;
• Оформление по ИП.