Data Engineer — проектирование схем поставок данных и оптимизация@ Яндекс

О позиции

В команде Яндекса открыта вакансия Data Engineer. Ваша задача — проектирование схем поставок данных и оптимизация процессов обработки. Вы будете работать с большими данными, разрабатывать и улучшать фреймворки, а также принимать решения по реализации поставок данных.

Чем вы будете заниматься

• Проектировать схемы поставок данных и выбирать оптимальные подходы к внесению доработок.
• Развивать фреймворки обработки данных, выявляя недостатки существующих инструментов.
• Руководить реализацией сложных технических поставок, упрощая постановку задач.
• Анализировать алгоритмическую составляющую инструментов для нахождения эффективных решений.
• Работать в команде, взаимодействуя с другими специалистами для достижения общих целей.

Требования

• Уверенное знание Python и SQL на уровне оптимизации запросов.
• Опыт проектирования DWH: слои, модели хранения данных, процессы ETL.
• Понимание принципов работы распределённых систем, таких как Hadoop или ClickHouse.
• Опыт работы от трёх лет в области обработки данных.
• Умение работать в командной строке Unix-подобных систем (Linux, macOS).

Будет плюсом

• Знание основных алгоритмов и структур данных, особенно для работы с большими данными.
• Опыт выбора технологий для решения конкретных задач.

Что мы предлагаем

• Конкурентная зарплата от 180 000 до 320 000 ₽ в месяц.
• Гибридный формат работы с возможностью частичной удалённой работы.
• ДМС и другие социальные гарантии.
• Возможности для профессионального роста и обучения.
• Работа в команде профессионалов с интересными проектами.