Data Engineer с функциями Data Analyst — финтех и аналитика

О позиции

Мы ищем Data Engineer с функциями Data Analyst для работы в сфере финтех. Эта позиция предлагает возможность работать удалённо и участвовать в интересных проектах, связанных с анализом данных и оптимизацией бизнес-процессов.

Чем вы будете заниматься

• Анализ источников данных легаси БД MSSQL: сбор информации о наполнении, выявление ключевых бизнес-сущностей и зависимостей, регламентных операций.
• Проектирование и оптимизация потоков переноса данных из MSSQL в новое хранилище.
• Разработка и поддержка моделей данных и трансформаций в dbt для формирования конечных витрин.
• Организация и автоматизация процессов оркестрации с Airflow.
• Обеспечение качества, тестирование данных и их целостности при миграции и трансформации.
• Работа с потоками данных и интеграция с Kafka для обмена и передачи событий в реальном времени.

Требования

• Опыт работы с реляционными БД и умение создавать и оптимизировать сложные SQL-запросы.
• Способность проектировать и создавать модели данных, адаптированные для аналитических задач и эффективной работы DWH.
• Владение методологиями Data Vault и другими современными подходами к моделированию.
• Опыт документирования моделей данных и поддержания их совместимости с процессами ETL/ELT и бизнес-метриками.
• Умение управлять изменениями модели при росте объема данных и изменениях в требованиях аналитики.
• Знание языка программирования Python, работа с объектным хранилищем S3, стриминг данных с Kafka, реляционные СУБД Postgres и MSSQL, NoSQL MongoDB, аналитическая СУБД Clickhouse.
• Опыт создания и поддержки ETL/ELT-конвейеров данных.
• Умение создавать модели данных и преобразования с помощью dbt, знание SQL и шаблонизации в dbt.
• Опыт оркестрации процессов с помощью Apache Airflow, настройка DAG, автоматизация и мониторинг ETL задач.
• Понимание методологии и практик DataOps для контроля версий моделей, тестирования, мониторинга и безопасного развертывания.
• Навыки документирования процессов, работы с технической документацией.

Будет плюсом

• Знание дополнительных инструментов и технологий в области анализа данных.
• Опыт работы в команде и умение эффективно взаимодействовать с другими отделами.
• Знание английского языка на техническом уровне.

Что мы предлагаем

• Конкурентоспособная зарплата, обсуждаемая в зависимости от опыта.
• Удалённый формат работы с гибким графиком.
• Возможности для профессионального роста и развития.
• Работа в дружной команде профессионалов.
• Участие в интересных проектах в сфере финтех.
• Поддержка в обучении и развитии навыков.