Ищут главного SRE/DevOps-инженера для сопровождения Big Data Platform и Data Lake.

Задачи:

  • Сопровождение и эксплуатация Data Lake-платформ и S3/Object Storage-инфраструктуры.
  • Мониторинг, диагностика и устранение инцидентов; troubleshooting производительности платформ и систем хранения.
  • Сопровождение Kubernetes и компонентов Data Lake.
  • Проведение RCA и postmortem analysis, автоматизация эксплуатационных задач.
  • Взаимодействие с командами Data Engineering и инфраструктуры.

Требования:

  • Экспертный опыт администрирования Linux и сопровождения высоконагруженных распределённых систем.
  • Глубокое понимание S3/Object Storage и архитектуры распределённых систем хранения; опыт эксплуатации MinIO или других Object Storage решений.
  • Опыт сопровождения Kubernetes-платформ и эксплуатации Apache Spark, Airflow, Flink, Kafka, Apache Iceberg.
  • Понимание replication, erasure coding, consistency и fault tolerance.
  • Практический опыт troubleshooting CPU, RAM, network, disk I/O, latency и throughput.
  • Опыт работы с observability stack: Prometheus, Grafana, alerting и log analysis.
  • Опыт автоматизации с Ansible, Terraform, Bash и Python.
  • Понимание incident/problem management и SRE-практик; навыки RCA, postmortem analysis и повышения надёжности платформ.

Часовой пояс: строго МСК. Локация: РФ.