Что вам предстоит делать:
- Руководить разработкой и сопровождением корпоративного Data Lake.
- Создание команды разработчиков и Devops
- Управлять командой разработчиков / инженеров данных: ставить задачи, расставлять приоритеты, контролировать сроки и качество реализации.
- Проектировать и развивать ETL/ELT-пайплайны загрузки данных из различных источников: БД, API, файловые системы, Kafka, SAP и другие системы.
- Участвовать в проектировании архитектуры Data Lake и развитии платформы данных.
- Разрабатывать и оптимизировать витрины данных для аналитических и бизнес-задач.
- Определять инженерные стандарты по разработке, хранению, обработке и контролю качества данных.
- Настраивать мониторинг, логирование и контроль стабильности data pipelines.
- Анализировать и устранять проблемы производительности в пайплайнах и процессах обработки данных.
- Взаимодействовать с архитекторами, аналитиками, Data Quality, Data Governance и смежными ИТ-командами.
- Развивать инженерную экспертизу внутри команды: code review, обмен знаниями, внедрение лучших практик.
Что мы ожидаем от вас:
- Опыт управления командой разработки / data engineering или технического лидерства в data-проектах.
- Глубокий опыт разработки и оптимизации Apache Spark / PySpark jobs для обработки больших объемов данных.
- Уверенное владение SQL, опыт оптимизации сложных запросов и трансформаций данных.
- Опыт разработки ETL/ELT-процессов и построения надежных пайплайнов загрузки данных.
- Опыт работы с orchestration-инструментами: Airflow, Dagster или аналогичными решениями.
- Опыт проектирования и оптимизации хранения данных в S3-совместимых хранилищах.
- Понимание форматов и подходов к хранению данных: Parquet, партиционирование, управление размером файлов, оптимизация стоимости хранения.
- Опыт работы с Data Lake технологиями: Iceberg, Delta Lake, Hive Metastore или аналогичными решениями.
- Опыт настройки мониторинга, логирования и troubleshooting производительности data pipelines.
- Опыт работы с Git и понимание CI/CD для data pipelines.
Что мы предлагаем:
- Трудоустройство согласно законодательству РУз
- Работу в престижном банке страны
- Стабильную заработную плату
- Развивающаяся и взаимоуважающая команда профессионалов
- Комфортные условия труда, график 5/2 с 9:00 до 18:00
- Ценный и полезный опыт
- Возможность построить карьеру в престижном банке страны
- Доступ к электронной библиотеке, включающую в себя огромное количество книг разных жанров, в том числе бизнес-литературу
- Возможность профессионального обучения