Data Engineer@ BGStaff

О позиции

Компания BGStaff ищет опытного Data Engineer для работы над проектами в области обработки данных. Ваша основная задача будет заключаться в проектировании, разработке и сопровождении ETL/ELT-пайплайнов с использованием Snowflake и SQL. Вы будете управлять облачной инфраструктурой на AWS, включая такие сервисы как S3, Glue, Lambda, CloudWatch и IAM. Также вам предстоит писать чистый и поддерживаемый код на Python и автоматизировать развертывание и настройку инфраструктуры через Terraform.

Чем вы будете заниматься

• Проектирование, разработка и сопровождение ETL/ELT-пайплайнов с использованием Snowflake и SQL.
• Управление облачной инфраструктурой на AWS (S3, Glue, Lambda, CloudWatch, IAM).
• Написание чистого и поддерживаемого кода на Python.
• Автоматизация развертывания и настройки инфраструктуры через Terraform.
• Оркестрация рабочих процессов с помощью Apache Airflow.
• Мониторинг и устранение неполадок в пайплайнах, контроль качества данных и производительности систем.
• Совместная работа с дата-сайентистами, аналитиками и разработчиками для создания масштабируемых решений.

Требования

• 5+ лет коммерческого опыта в Data Engineering или смежных областях.
• Глубокие знания Snowflake и продвинутый уровень владения SQL.
• Реальный опыт работы с AWS (S3, Glue, Lambda, CloudWatch, IAM).
• Уверенное владение Python для обработки данных и автоматизации.
• Практический опыт использования Terraform (инфраструктура как код).
• Опыт работы с Apache Airflow для оркестрации пайплайнов.
• Отличные коммуникативные навыки и английский язык уровня C1.
• Способность работать самостоятельно в распределённой команде.

Будет плюсом

• Опыт интеграции и разработки REST API.
• Знание CircleCI или других CI/CD-инструментов.
• Опыт работы в полностью удалённых международных командах.
• Понимание принципов управления данными и безопасности.

Что мы предлагаем

• Удалённая работа с гибким графиком по восточному времени США (EST).
• Работа в международной команде с профессионалами своего дела.
• Конкурентоспособная зарплата и возможности для профессионального роста.