Инженер данных — Python и Spark@ Navio

О позиции

Компания Navio ищет Инженера данных для работы в гибридном формате. Ваша задача будет заключаться в разработке и поддержке систем обработки данных с использованием современных технологий. Основное внимание будет уделено работе с Python и инструментами для обработки больших данных.

Чем вы будете заниматься

• Разработка ETL-процессов для обработки и анализа больших объемов данных.
• Работа с классическими алгоритмами и структурами данных для оптимизации процессов.
• Использование SQL для выполнения сложных запросов и анализа данных.
• Интеграция и работа с фреймворками Spark и Ray для обработки данных.
• Настройка и управление рабочими процессами с помощью Airflow или Dagster.

Требования

• Опыт работы на позиции Инженера данных от 4-х лет.
• Глубокие знания Python и опыт его применения в проектах.
• Знание SQL на уровне джойнов и оконных функций.
• Практический опыт работы с фреймворками Spark и Ray.
• Опыт работы с системами управления рабочими процессами, такими как Airflow или Dagster.

Будет плюсом

• Знание других языков программирования, таких как Java или Scala.
• Опыт работы с облачными платформами (AWS, GCP, Azure).
• Навыки работы с инструментами визуализации данных.

Что мы предлагаем

• Конкурентная заработная плата от 280 000 до 350 000 ₽ в месяц.
• Гибридный формат работы с возможностью частичной удалённой работы.
• ДМС и другие социальные гарантии.
• Возможности для профессионального роста и развития.
• Работа в дружной команде профессионалов.