Обязанности:

  • Разрабатывать ETL-процедуры с использованием Python, PySpark, Hadoop и Airflow.
  • Собирать данные из реляционных и нереляционных источников, включая Kafka, Redis и Hadoop.
  • Создавать и наполнять витрины данных в Hive, Postgres и Greenplum.