Главный SRE/DevOps-инженер — сопровождение Data Lake платформ

Что за роль

Ищем Главного SRE/DevOps-инженера с глубоким пониманием S3/Object Storage и архитектуры распределенного хранения. Работа в команде, занимающейся сопровождением Data Lake платформ.

Чем вы будете заниматься

• Сопровождение и эксплуатация Data Lake платформ;
• Поддержка S3/Object Storage инфраструктуры;
• Мониторинг, диагностика и устранение инцидентов;
• Troubleshooting производительности платформы и storage систем;
• Сопровождение Kubernetes и компонентов Data Lake: Apache Spark, Airflow, Flink, Kafka, Apache Iceberg;
• Проведение RCA и postmortem analysis;
• Автоматизация эксплуатационных задач;
• Взаимодействие с командами Data Engineering и инфраструктуры;
• Сопровождение Big Data Platform.

Требования

• Экспертный опыт администрирования Linux;
• Опыт сопровождения высоконагруженных distributed systems;
• Глубокое понимание S3/Object Storage и distributed storage architecture;
• Опыт сопровождения Kubernetes-платформ;
• Практический опыт эксплуатации компонентов Data Lake: Apache Spark, Airflow, Flink, Kafka, Apache Iceberg;
• Опыт эксплуатации MinIO / Object Storage решений;
• Понимание replication, erasure coding, consistency, fault tolerance;
• Практический опыт troubleshooting: CPU, RAM, network, disk I/O, latency, throughput;
• Опыт работы с observability stack: Prometheus, Grafana, alerting, log analysis;
• Опыт автоматизации: Ansible, Terraform, Bash, Python;
• Понимание incident/problem management и SRE-практик;
• Навыки RCA, postmortem analysis и повышения reliability платформ.