О позиции
Компания Secreate ищет опытного Data Engineer для работы удалённо. Мы предоставляем полный спектр IT-услуг и ищем специалиста, который поможет нам в проектировании и реализации эффективных решений для обработки данных. Ваша роль будет заключаться в разработке и оптимизации процессов обработки данных, а также в построении хранилищ данных.
Чем вы будете заниматься
- Проектирование и реализация ETL/ELT процессов для обработки данных.
- Работа с облачными сервисами, такими как Yandex.Cloud, Google Cloud и AWS.
- Оптимизация работы с базами данных PostgreSQL, ClickHouse и другими.
- Разработка и поддержка DWH для аналитических нужд.
- Создание и тестирование SQL-запросов различной сложности.
- Участие в разработке CI/CD процессов и написание тестов с использованием Pytest.
- Ведение проектов в Git и работа в команде разработчиков.
Требования
- Опыт работы в роли Data Engineer от 4-х лет.
- Глубокие знания Python или Java, а также опыт работы с Spark и Airflow.
- Опыт проектирования баз данных и написания сложных SQL-запросов.
- Знание инструментов для работы с облачными сервисами.
- Опыт работы с Docker и Kubernetes.
- Понимание методологии TDD и опыт написания тестов.
Будет плюсом
- Знание Scala и Hadoop.
- Опыт работы с другими инструментами для обработки данных.
Что мы предлагаем
- Конкурентоспособная зарплата в диапазоне 270 000 — 300 000 ₽ в месяц.
- Удалённая работа с гибким графиком.
- Возможности для профессионального роста и обучения.
- Работа в команде профессионалов с интересными проектами.
- Доступ к современным технологиям и инструментам.
Вакансия предлагает хорошие условия для Data Engineer с конкурентоспособной зарплатой и возможностью удалённой работы. Однако, описание вакансии могло бы быть более подробным.
Кто здесь добьётся успеха
Глубокое понимание Python и его библиотек для обработки данных, таких как Pandas и NumPy, а также опыт работы с фреймворками, такими как Apache Spark для обработки больших объемов данных.
Способность работать в удалённой команде, проявляя высокую степень самодисциплины и организации, чтобы эффективно управлять своим временем и задачами.
Опыт проектирования и внедрения ETL/ELT процессов с использованием Airflow и работы с базами данных PostgreSQL и Clickhouse для хранения и обработки данных.
Ресурсы для обучения
Карьерный путь
Обзор рынка
Навыки и требования
Тренды отрасли
Новости IT Services
Загружаем новости отрасли...
Ищем релевантные статьи за последние 6 месяцев