Data QA — интеграция внешних источников Centicore

200K ₽–350K ₽/мес
Опубликовано 05.11.2026

Что за роль

Data QA в проекте крупного банка проверяет загрузку данных из внешних источников: БКИ, ФНС, ЦБ и API партнёров. Работа удалённая по России, оформление — по ТК РФ.

Чем вы будете заниматься

  • Проверять корректность загрузки данных и работу обновлений, включая отсутствие дубликатов при повторной загрузке.
  • Выявлять и блокировать записи с аномалиями, ошибками источника и некорректными форматами.
  • Анализировать технические задания и мэппинги, проектировать тест-кейсы.

Требования

  • Опыт интеграции внешних источников: БКИ, ФНС, ЦБ или API партнёров.
  • Практическое знание SQL.
  • Опыт работы с S3, Iceberg, слоями RAW/ODS/DDS, Airflow и Spark или Hadoop.
  • Умение читать код на Python для анализа скриптов обработки данных.

Будет плюсом

  • Опыт в Data Engineering.

Что мы предлагаем

  • Зарплата 200 000–350 000 рублей на руки, в зависимости от опыта.
  • Удалённая работа по России.
  • Оформление по ТК РФ с полностью официальной зарплатой.

Кто здесь добьётся успеха

→

Уверенно использует SQL и Python для сверки данных из БКИ, ФНС, ЦБ и партнёрских API: проверяет полноту и форматы, находит дубликаты при повторной загрузке и локализует аномалии.

→

Внимателен к деталям и мыслит проверяемыми сценариями: переводит технические задания и мэппинги в тесты качества, проверяет обновления и отслеживает некорректные записи до источника или этапа обработки.

→

Имеет опыт уровня middle в интеграции и тестировании данных, понимает потоки обработки на Airflow и Apache Spark, а также хранение в S3 и Apache Iceberg; способен разбираться в Hadoop-среде без постоянных пошаговых инструкций.

→

Комфортно работает удалённо и самостоятельно ведёт проверки: фиксирует результаты и дефекты так, чтобы инженеры могли воспроизвести проблему, а банковские данные не попадали в дальнейшую обработку с ошибками.

Ресурсы для обучения

Карьерный путь

Data QA — интеграция внешних источников (Сейчас)→Ведущий специалист по качеству данных банковских интеграций (Через 1–2 года)→Руководитель направления качества данных или архитектор тестирования данных (Через 3–5 лет)

Обзор рынка

Объём рынка ПО для управления данными, 2026
$142B
Годовой рост рынка ПО для управления данными
12%
Внедрение AI в процессы работы с данными
около 30%
Инвестиции в инфраструктуру данных и AI, 2026
$150B+

Навыки и требования

Обязательные
SQLS3Apache Iceberg
Растущий спрос
Apache Iceberg и форматы открытых таблиц (включая Delta Lake)Автоматизированное тестирование качества данных: Great Expectations, Soda, dbt testsПотоковая интеграция и CDC: Kafka, Debezium
Снижающийся спрос
Apache Hive с форматом таблиц HiveРучные проверки качества данных и самописные SQL-скрипты без тестовых фреймворков

Тренды отрасли

Переход озёр данных на открытые табличные форматы
Iceberg, Delta Lake и Hudi добавляют транзакционность и эволюцию схем к объектному хранению S3. Для российских команд это практичный способ строить lakehouse на отечественных S3-совместимых хранилищах и не привязывать аналитические данные к одному движку. Кандидату полезно показать опыт проверки схем, партиций, снапшотов и совместимости Spark с Iceberg.
Качество данных становится частью конвейера интеграции
По оценке Gartner, к 2026 году организации, внедрившие управление качеством данных, смогут сократить операционные потери из-за плохих данных на 40%. На практике проверки полноты, уникальности, свежести и соответствия схемы переносятся в Airflow/DAG и выполняются при каждом обновлении источника. Для Data QA важно демонстрировать контрольные SQL-запросы, пороговые правила и обработку ошибок без остановки всего конвейера.

Новости FinTech

Загружаем новости отрасли...

Ищем релевантные статьи за последние 6 месяцев