Старший разработчик сервисов данных — Python и ETL@ БЮРО 1440
О позиции
Компания БЮРО 1440 ищет старшего разработчика сервисов данных для разработки микросервисов управления данными и интеграции вычислительных модулей.
Чем вы будете заниматься
- Разработка микросервисов управления данными Модели Космической Системы.
- Разработка пайплайнов обработки данных ETL/ELT.
- Интеграция вычислительных модулей (микросервисов).
- Реализация процессов контроля качества данных.
- Разработка моделей данных и согласование дата-контрактов.
- Работа с СУБД Postgres, Clickhouse.
- Обработка и анализ данных в Pandas, NumPy, Polars.
Требования
- Инженерное или техническое образование (обязательно).
- Опыт разработки на Python от 3 лет, на позиции Middle — от 1 года.
- Опыт работы с библиотеками для анализа данных: Pandas, NumPy, Polars.
- Понимание принципов проектирования и работы с хранилищами данных.
- Опыт работы с базами данных PostgreSQL, ClickHouse.
- Опыт работы с инструментами ETL/ELT (например, Airflow, Dagster, PandasETL).
- Понимание принципов работы систем потоковой обработки данных.
- Опыт в разработке веб-приложений (FastAPI).
- Опыт работы с контейнерами Docker.
- Опыт работы с инструментами командной разработки: Confluence, Jira, Git.
Вакансия предлагает интересные задачи в области разработки данных с хорошими условиями. Однако, стоит обратить внимание на требования к опыту и образованию.
Кто здесь добьётся успеха
Глубокие знания Python и опыт работы с библиотеками Pandas и NumPy для обработки и анализа данных, а также опыт разработки микросервисов с использованием фреймворков, таких как FastAPI или Flask.
Способность работать в гибридном режиме, умеющий эффективно взаимодействовать с командой как в офисе, так и удаленно, сохраняя высокую продуктивность и соблюдая сроки проектов.
Опыт разработки и оптимизации ETL-пайплайнов, а также знание баз данных PostgreSQL и Clickhouse для эффективного управления данными и обеспечения их качества.
Стратегическое мышление и опыт в проектировании моделей данных, что позволяет находить эффективные решения для интеграции вычислительных модулей и обеспечения их совместимости.
Ресурсы для обучения
Карьерный путь
Обзор рынка
Навыки и требования
Тренды отрасли
Новости Data Engineering
Загружаем новости отрасли...
Ищем релевантные статьи за последние 6 месяцев