Middle/Senior Data Engineer (Big Data)@ UzDev

О позиции

Мы ищем Middle/Senior Data Engineer для работы в нашей команде, занимающейся созданием ETL-процессов и агрегатов для формирования витрин данных и отчетов для BI и конечных пользователей. Эта вакансия Data Engineer удалённо предлагает возможность работать с современными технологиями и решать интересные задачи, связанные с обработкой больших объёмов данных.

Чем вы будете заниматься

• Построение и поддержка ETL-процессов с использованием Spark и Scala для обработки больших объёмов данных.
• Оптимизация скорости обработки данных и потребления системных ресурсов.
• Создание оптимальных SQL-запросов для анализа данных по требованиям бизнеса.
• Решение разнообразных бизнес-задач, связанных с обработкой данных.
• Работа с инструментами, такими как Apache Spark, ClickHouse и другими технологиями из нашего стека.

Требования

• Владение Scala, Java или готовность быстро освоить основы Scala.
• Консольный минимум Linux.
• Опыт работы со Spark и уверенное понимание принципов работы.
• Знание основ работы с базами данных и уверенное знание SQL.

Будет плюсом

• Опыт работы с Zeppelin или Jupyter.
• Знание Hadoop/HDFS и работа с Parquet-файлами.
• Умение работать с GitLab CI.
• Знание Bash для внесения исправлений в скрипты.
• Минимальные знания Python.
• Английский на уровне B1 и выше.

Что мы предлагаем

• Заработная плата от $1800 в месяц.
• Оформление ИП/самозанятость с 100% оплатой больничного и отпуска.
• Предоставление техники для работы.
• Корпоративные обучающие программы.
• Демократичный подход к процессам и плавающее начало рабочего дня.