Python-разработчик — ETL процессы и ClickHouse@ МегаФон

О позиции

Компания Мегафон ищет Python-разработчика для работы в офисе в Екатеринбурге. Ваша основная задача будет заключаться в проектировании, разработке и оптимизации ETL процессов для загрузки данных из различных источников. Вы будете управлять потоковой обработкой данных с использованием Apache Kafka и разрабатывать структуры данных в PostgreSQL.

Чем вы будете заниматься

• Проектировать и поддерживать ETL процессы для загрузки данных.
• Управлять потоковой обработкой данных с использованием Apache Kafka.
• Разрабатывать и оптимизировать структуры данных в PostgreSQL.
• Строить и администрировать ClickHouse кластеры для аналитических запросов.
• Интегрировать данные между PostgreSQL, Kafka и ClickHouse.
• Мониторить производительность и безопасность data pipeline.
• Автоматизировать процессы обработки данных и развертывания (CI/CD).
• Взаимодействовать с аналитиками и разработчиками для понимания потребностей в данных.

Требования

• Опыт работы с Python от 2-3 лет.
• Опыт разработки и администрирования ClickHouse.
• Глубокое понимание Apache Kafka и настройка потоков данных.
• Опыт работы с PostgreSQL и написание сложных SQL-запросов.
• Понимание принципов ETL процессов.
• Знание SQL на продвинутом уровне.
• Понимание принципов DevOps (Docker, Kubernetes, CI/CD).

Будет плюсом

• Опыт работы с Golang.
• Знание других инструментов для обработки данных.
• Опыт работы в команде Agile.

Что мы предлагаем

• Конкурентная зарплата от 200 000 до 300 000 ₽.
• Работа в стабильной компании с возможностью карьерного роста.
• ДМС и другие социальные гарантии.
• Гибкий график работы.
• Современный офис в центре Екатеринбурга.
• Обучение и развитие профессиональных навыков.