О позиции
Компания Omega Solutions ищет Middle Data Engineer (Java) для работы над проектом оптимизации текущих пайплайнов в GreenPlum/Hive. Ваша задача будет заключаться в интеграции данных в S3 и разработке новой витрины в ClickHouse. Это отличная возможность для тех, кто хочет развиваться в области обработки больших данных и ETL.
Чем вы будете заниматься
- Разработка и поддержка ETL-процессов и интеграций.
- Оптимизация пайплайнов и витрин данных.
- Внедрение инженерных практик: CI/CD, code review.
- Решение сложных технических задач и развитие архитектуры.
Требования
- Опыт работы с Java и Groovy, понимание принципов ООП.
- Знание Hadoop, Hive, HDFS, DWH/DataLake.
- Уверенные навыки работы с SQL и оптимизацией запросов.
- Опыт работы с ETL-инструментами: Airflow, NiFi, Talend и др.
- Знание Docker, Rancher, Git.
- Опыт работы с Big Data-интеграциями.
- Знание Linux/Unix, Spark, Yarn, Ranger, Zookeeper, Ansible, Zabbix.
Будет плюсом
- Опыт работы в команде над крупными проектами.
- Знание других языков программирования.
- Опыт работы с облачными решениями.
Что мы предлагаем
- Оформление по ИП.
- Дружелюбная атмосфера внутри компании.
- Развитие через реальные задачи, а не формальные курсы.
- Возможность предлагать идеи и видеть, как они внедряются.
- Гибкий график работы и возможность удаленной работы.
- Оплата за фактически отработанное время.
- Участие в интересных проектах без лишнего микроменеджмента.
Обязательные
0/1
Желательные
0/1
Бонус
0/1
Почему эта вакансия
7.5
7.5 из 10
оценка совпадения
Вакансия предлагает конкурентную зарплату и интересные задачи в области обработки данных. Однако, информация о компании ограничена.
Формируем профиль успеха...
Анализируем требования вакансии и данные рынка
Обзор рынка
Объём рынка Java 2026
$12B
Годовой рост
8.5%
Внедрение AI
35%
Инвестиции
+50%
Навыки и требования
Обязательные
JavaGroovyHadoop
Растущий спрос
Spring BootKubernetesApache Kafka
Снижающийся спрос
jQueryJava EE
Тренды отрасли
Увеличение использования контейнеризации
Согласно последним исследованиям, 65% компаний в России начали использовать Docker и Kubernetes для управления своими приложениями, что способствует упрощению развертывания и масштабирования.
Адаптация к облачным решениям
Около 70% организаций в России переходят на облачные платформы, такие как AWS и Azure, для хранения и обработки данных, что увеличивает спрос на специалистов по ETL и Data Engineering.
Новости Data Integration
Загружаем новости отрасли...
Ищем релевантные статьи за последние 6 месяцев
Похожие вакансии
Java-разработчик — работа с PostgreSQL и Apache
Лига Цифровой Экономики·180K ₽–320K ₽
React Native Developer — международные продукты для музыкантов
Muse Group·180K ₽–320K ₽
IT-редактор — создание контента для VPN-сервиса
Papers·110K ₽–180K ₽
Flutter-разработчик для кроссплатформенного социального приложения
Nilesoft·15K ₽–25K ₽
Операционный менеджер — управление контентом и продажами
Hormone Yoga·60K ₽–80K ₽
Контент-креатор — полный цикл видеопродакшна
100K ₽–180K ₽
Staff Software Engineer — разработка решений в области оборонных технологий
Shield AI·6K ₽–9K ₽
Исполнительный ассистент — поддержка финансового планирования
Ramp·15K ₽–25K ₽
Ментор по Guidewire ClaimCenter — долгосрочное сотрудничество
Guidewire·300K ₽–500K ₽
Специалист по Meta Ads для увеличения продаж
5K ₽–25K ₽
Менеджер по стратегии и планированию — поддержка бизнес-инициатив
inDrive·180K ₽–320K ₽
Аналитик по операциям доставки — финансовые технологии
Cryptio·180K ₽–320K ₽
Growth Owner — финансовые технологии и CRM
Cryptio·110K ₽–180K ₽
SMM-менеджер — маркетинговое агентство полного цикла
Genspt·120K ₽–170K ₽
UI-дизайнер — обновление интерфейса для React и Angular
13K ₽–38K ₽