Мы ищем инженера по созданию витрин данных, который присоединится к нашей команде и займётся разработкой и поддержкой витрин данных на базе Hadoop. Вам предстоит участвовать в полном цикле разработки, начиная с анализа требований и заканчивая реализацией и поддержкой решений.

Обязанности

  • проектирование, разработка и сопровождение витрин данных на базе Hadoop
  • оптимизация производительности существующих витрин данных
  • участие в разработке ETL-процессов для загрузки данных в витрины
  • поддержка и мониторинг работы витрин данных
  • взаимодействие с бизнес-пользователями для понимания их потребностей и перевода их в технические требования
  • взаимодействие с командами разработки и дата-аналитики, по вопросам сбора, обработки и хранения данных
  • разбор инцидентов качества данных, развитие автоматизированных тестов (Data Quality)
  • документирование разработанных решений

Требования

  • практический опыт в разработке витрин данных, выстраивании ETL-процессов
  • уверенное владение SQL (аналитические функции, подзапросы, хранимые процедуры/функции, оптимизация производительности)
  • готовность к созданию инструментов для нужд инфраструктуры и разработки
  • опыт работы с Hadoop (HDFS, YARN, Hive) и Spark
  • опыт разработки на Python
  • понимание инструментов и технологий Big Data
  • знание принципов построения распределённых систем хранения и обработки данных
  • опыт работы с системами контроля версий (Git)

Будет плюсом:

  • опыт работы с Kafka
  • опыт работы с S3
  • опыт работы с Airflow
  • опыт работы с CI/CD инструментами (Jenkins, GitLab CI).
  • базовые знания Docker и иных технологий контейнеризации
  • опыт работы с системами Unix (bash)

Условия

  • Комфортный современный офис рядом с м. Кутузовская
  • Офисный формат работы
  • Ежегодный пересмотр зарплаты. Годовая премия
  • Корпоративный спортзал и зоны отдыха
  • Более 400 образовательных программ СберУниверситета для профессионального и карьерного развития
  • Программа адаптации и помощь руководителя на старте
  • Расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа
  • Гибкий дисконт по ипотечному кредиту, равный 1/3 ключевой ставки ЦБ
  • Бесплатная подписка СберПрайм+, скидки на продукты компаний-партнеров
  • Вознаграждение за рекомендацию друзей в команду Сбера.