Data Engineering Team Lead — проектирование конвейеров и инфраструктуры данных@ ООО "ОДСС"

О позиции

Мы ищем Data Engineering Team Lead для работы над крупным проектом Data Lake. Ваша задача будет заключаться в руководстве командой дата-инженеров и проектировании конвейеров и инфраструктуры данных. Это уникальная возможность работать над проектом с нуля, без тяжёлого легаси, где вы сможете экспериментировать и внедрять новые идеи.

Чем вы будете заниматься

• Руководить командой дата-инженеров, включая код-ревью, распределение задач и развитие сотрудников.
• Проектировать конвейеры и инфраструктуру данных для обработки и хранения информации.
• Разрабатывать и поддерживать парсеры для различных форматов документов (PDF, doc, docx, xls, xlsx).
• Автоматизировать обработку и преобразование данных для повышения эффективности.
• Настраивать мониторинг и отладку конвейеров для обеспечения их стабильной работы.

Требования

• Опыт руководства командой дата-инженеров.
• Глубокие знания Python, включая библиотеки pandas, numpy и другие.
• Опыт парсинга сложных слабоструктурированных документов.
• Знание Dagster для проектирования конвейеров и оркестрации процессов.
• Опыт работы с PostgreSQL и Git, включая стратегии merge и ревью кода.
• Уровень английского языка, достаточный для чтения технической документации.

Будет плюсом

• Опыт работы с open data.
• Долгосрочное поддержание парсеров и их оптимизация.

Что мы предлагаем

• Конкурентоспособная зарплата от 250 000 до 350 000 ₽.
• Полностью удалённая работа с оформлением по ТК РФ.
• Возможность работать над интересными проектами и внедрять новые технологии.
• Гибкий график работы и возможность экспериментировать с новыми подходами.
• Поддержка профессионального роста и развития.