Тимлид разработки DWH — платформа потоковой обработки данных Авито

500K ₽/мес
Опубликовано 28.10.2026

Что за роль

Команда развивает платформу потоковой обработки данных для real-time-систем Авито. В работе — антибот- и антифрод-детекция, рекламная аналитика и доставка событий в DWH.

Чем вы будете заниматься

  • Развивать платформу потоковой обработки и пайплайны обогащения событий.
  • Управлять Flink Platform, Kubernetes Operator и деплоями в нескольких дата-центрах.
  • Руководить командой разработки, определять архитектурные стандарты и технический роадмап.

Требования

  • Опыт руководства командой разработки от 4 лет.
  • Глубокое знание Apache Flink, Spark Streaming или Kafka Streams.
  • Опыт работы с высоконагруженными продакшен-системами и понимание Apache Kafka и распределённых систем.
  • Умение декомпозировать задачи, планировать развитие платформы, мотивировать и развивать сотрудников.

Что мы предлагаем

  • Зарплата от 500 000 ₽ и прозрачная система премирования.
  • Удалённую работу или офис в одном из нескольких городов.
  • ДМС со стоматологией с первого дня.
  • Личный бюджет на книги, курсы и профессиональные конференции.
  • Рабочее оборудование и дополнительные мониторы.

Кто здесь добьётся успеха

→

Уверенно проектирует отказоустойчивые потоки событий на Apache Flink и Kafka, понимает, когда уместны Spark Streaming или Kafka Streams, и умеет доводить архитектуру от прототипа до промышленной платформы.

→

Сочетает техническое лидерство с управлением командой: задаёт архитектурные стандарты и технический роадмап, помогает инженерам принимать решения и сохраняет фокус на надёжной доставке событий в DWH.

→

Разбирается в распределённых системах и эксплуатации Flink Platform на Kubernetes: способен оценивать сбои, нагрузку и компромиссы при деплоях в нескольких дата-центрах.

→

Комфортно работает в гибридном формате, самостоятельно организует взаимодействие с командами антифрода, антибота и рекламной аналитики и связывает их потребности в реальном времени с развитием платформы Авито.

Ресурсы для обучения

Карьерный путь

Тимлид разработки DWH — платформа потоковой обработки данных (Сейчас)→Руководитель направления платформ потоковой обработки данных (Через 1–2 года)→Директор по инженерии данных или руководитель платформенной разработки (Через 3–5 лет)

Обзор рынка

Объём рынка потоковой обработки данных, 2026
$35B
Среднегодовой рост рынка, 2025–2030
21%
Использование AI/ML в потоковых аналитических сценариях
35%
Рост инвестиций в инфраструктуру потоковых данных, 2025
+24%

Навыки и требования

Обязательные
Apache FlinkSpark StreamingKafka Streams
Растущий спрос
Apache Flink SQL и Table APIApache Iceberg и потоковые lakehouse-архитектурыFlink Kubernetes Operator и GitOps для управления кластерами
Снижающийся спрос
Apache StormСамописные Kafka consumers с ручным управлением состоянием вместо Flink или Kafka Streams

Тренды отрасли

Переход от микробатчей к обработке событий с низкой задержкой
Команды модернизируют Spark Streaming на базе микробатчей в пользу Flink и других потоковых движков с непрерывной обработкой. Для DWH это позволяет сократить задержку обновления витрин с минут до секунд; при выборе архитектуры важно демонстрировать опыт с event time, обработкой опоздавших событий и exactly-once.
Сближение потоковой обработки и lakehouse
Apache Iceberg и другие открытые табличные форматы всё чаще используются как общий слой для пакетных и потоковых данных. Для лидов DWH практическая задача — обеспечить совместимость Flink с каталогом, форматом таблиц и движками запросов, а также контролировать задержки, эволюцию схем и стоимость хранения.

Новости B2C E-commerce

Загружаем новости отрасли...

Ищем релевантные статьи за последние 6 месяцев