О позиции
Компания "Кодекс-ИТ" ищет Data Engineer для разработки единой системы оценки эффективности. Ваша задача будет заключаться в создании решений вокруг DWH и работе с BI-аналитикой.
Чем вы будете заниматься
- Разрабатывать решения вокруг DWH.
- Создавать ETL и настраивать сбор данных.
- Работать с BI-аналитикой.
- Проектировать архитектуру данных и систему их сбора.
- Разрабатывать новый функционал и сокращать технический долг.
Требования
- Опыт построения пайплайнов: Python + Apache Airflow.
- Интеграция источников через GraphQL / REST API.
- Опыт работы с Apache Iceberg и архитектурой хранения данных.
- Проектирование архитектуры сбора данных и витрин.
- Понимание принципов тестирования и качества данных.
- Опыт с Prometheus, метриками и алертами.
- Знание предметной области.
Что мы предлагаем
- Полностью удалённая работа.
- Интересный проект с архитектурными задачами.
- Возможности профессионального роста.
Кто здесь добьётся успеха
Глубокие знания Python для разработки ETL-процессов и автоматизации сбора данных, включая использование библиотек, таких как Pandas и NumPy.
Способность работать в удаленном режиме, требующая высокой степени самоорганизации и ответственности за выполнение задач в установленные сроки.
Опыт проектирования архитектуры данных с использованием Apache Airflow и Apache Iceberg для эффективного управления данными и минимизации технического долга.
Знание REST API и GraphQL для интеграции систем и оптимизации доступа к данным, а также опыт работы с инструментами мониторинга, такими как Prometheus.
Ресурсы для обучения
Карьерный путь
Обзор рынка
Навыки и требования
Тренды отрасли
Новости IT Services
Загружаем новости отрасли...
Ищем релевантные статьи за последние 6 месяцев