Data аналитик в Сбербанк, грейд: Senior. Гражданство: РФ.
Локация: г. Москва. Формат: гибрид, 2-3 дня в офисе на ул. Вавилова.
Условия: Ставка: до 2200, с НДС. Условия оплаты: квартал. Загрузка: Fulltime. Длительность: долгосрочный проект. Отсутствие ИП/ООО у кандидата; оформление только по ТК РФ или ГПХ; оформление совместительства на минимальную ставку в штат банка.
Требования:
- Java (Scala) под Apache Spark — обязательно
- Опыт работы с Apache Spark от 1 года
- Опыт работы с СУБД (Greenplum, ClickHouse, PostgreSQL) от 2 лет
- Опыт работы с Hadoop (HDFS, Hive)
- Опыт проектирования и разработки потоков данных, алгоритмов загрузки и обработки данных
- Опыт оптимизации ETL-пайплайнов и SQL-кода; продвинутые знания SQL
- Понимание принципов работы распределённых систем
- Готовность осваивать Java для использования Spark
Будет плюсом:
- Опыт разработки на Java
- Опыт миграции данных или работы с BI-платформами
- Опыт в банковской сфере и понимание бизнес-домена
- Опыт работы в крупных проектах с высокими требованиями к надёжности
Задачи:
- Разработка ETL на Apache Spark (Java-стек)
- Разработка ETL-пайплайнов (Apache Spark, HDFS (parquets), Hive, Greenplum, ClickHouse)
- Разработка витрин данных в Greenplum и ClickHouse
- Оркестрация ETL-процессов
- Оптимизация ETL-процессов (батчинг, ретраи, SLA-контроль)
- Взаимодействие с BI-разработчиками и DevOps для доставки данных в Superset