Что за роль

Проект телеком-оператора связан с миграцией ETL-системы с Oracle и Informatica на Apache-стек. Работа оформляется как ИП; проектная занятость указана как полная.

Чем вы будете заниматься

• Переносить бизнес-логику Informatica в высокопроизводительный SQL-код.
• Разрабатывать DAG-и в Airflow и пайплайны в NiFi.
• Создавать Spark-джобы на PySpark и интеграцию с Kafka.
• Настраивать мониторинг, разбирать ошибки загрузки и инциденты с качеством данных, проводить code review.

Требования

• Опыт миграции ETL-систем, желательно с Oracle/Informatica на Apache-стек.
• Глубокое знание SQL и его оптимизации для highload.
• Опыт с Oracle (PL/SQL), PostgreSQL, Greenplum и/или ClickHouse.
• Опыт проектирования архитектур на Spark, NiFi и Airflow, а также работы с Hadoop и Hive.
• Опыт мониторинга ETL через Grafana/Prometheus или VictoriaMetrics.
• Опыт с биллинговыми системами; телеком-домен будет преимуществом.

Будет плюсом

• Kafka Streams или Spark Streaming, Informatica PowerCenter, S3 и бинарные форматы Hadoop.
• Знание Patroni, различий между Hive и Impala, Greenplum и PostgreSQL, ClickHouse и PostgreSQL.
• Опыт работы с КриптоПро или защищёнными каналами передачи данных.

Что мы предлагаем

• Полная проектная занятость, оформление только как ИП.
• Удалённая работа для кандидатов в России, часовой пояс МСК ± 3 часа.
• Оплата: 250 000–270 000 рублей на руки.