Magnum — одна из крупнейших e-commerce компаний Казахстана, входящая в экосистему Kaspi.

Обязанности:

  • Разработка и поддержка ETL/ELT-процессов.
  • Построение и поддержка витрин данных для аналитики.
  • Обработка и преобразование данных из различных источников.
  • Разработка и поддержка DAG в Apache Airflow.
  • Работа с ClickHouse и развитие DWH.
  • Подключение и настройка CDC для получения изменений из источников данных.

Требования:

  • Уверенное знание SQL и Python.
  • Опыт работы с Apache Airflow.
  • Понимание принципов работы ClickHouse.
  • Знание основ DWH, ETL/ELT и моделирования данных.
  • Понимание принципов контроля качества данных.
  • Базовые знания Git.
  • Понимание принципов работы Apache Kafka, CDC и Apache Spark.

Возможность развиваться в Data Engineering, работать с большими объемами данных и решать инженерные задачи.