Дата инженер — работа с ClickHouse и Apache Airflow@ Монетка
О позиции
Компания «Монетка» ищет опытного Дата инженера для работы с большими данными. Ваша задача будет заключаться в проектировании и поддержке систем обработки данных, а также в оптимизации процессов ETL. Мы ищем специалиста, который сможет эффективно работать с различными инструментами и технологиями, включая ClickHouse и Apache Airflow.
Чем вы будете заниматься
- Проектирование и реализация ETL-процессов для обработки больших объемов данных.
- Оптимизация существующих процессов обработки данных.
- Работа с базами данных PostgreSQL и Oracle.
- Создание и поддержка документации по архитектуре данных.
- Сотрудничество с командами аналитиков и разработчиков для обеспечения качества данных.
- Мониторинг и поддержка производительности систем обработки данных.
Требования
- Опыт работы с Python и SQL.
- Знание систем управления базами данных, таких как PostgreSQL и Oracle.
- Опыт работы с ClickHouse и Apache Kafka.
- Знание Linux и опыт работы с Apache Airflow.
- Способность работать в команде и эффективно коммуницировать.
- Опыт работы с инструментами для мониторинга и оптимизации производительности.
Будет плюсом
- Опыт работы с Apache Spark.
- Знание принципов работы с облачными платформами.
- Опыт работы с системами управления версиями, такими как Git.
Что мы предлагаем
- Заработная плата от 280 000 до 350 000 ₽.
- Полный рабочий день с возможностью удаленной работы.
- ДМС и другие социальные гарантии.
- Возможности для профессионального роста и обучения.
- Работа в дружной команде профессионалов.
- Современные технологии и инструменты для работы.
Вакансия хорошая, с четкими требованиями и конкурентоспособной зарплатой. Однако, описание вакансии можно было бы сделать более детальным.
Кто здесь добьётся успеха
Глубокие знания в области ETL-процессов и обработки данных с использованием ClickHouse и Apache Airflow, что позволит эффективно разрабатывать и оптимизировать процессы обработки данных.
Способность работать в удаленном режиме, проявляя высокий уровень самоорганизации и ответственности, что критично для успешного выполнения задач в распределенной команде.
Опыт работы с языком программирования Python и навыки работы с SQL, что необходимо для написания качественного кода и выполнения сложных запросов к базам данных.
Ресурсы для обучения
Карьерный путь
Обзор рынка
Навыки и требования
Тренды отрасли
Новости Data Engineering
Загружаем новости отрасли...
Ищем релевантные статьи за последние 6 месяцев