Альфа-Банк приглашает Главного дата-инженера для проектирования и развития масштабируемой data-инфраструктуры, поддержки витрин данных и ML-инфраструктуры.
Обязанности:
- Проектирование и развитие масштабируемой data-инфраструктуры (batch и streaming пайплайны)
- Работа с ClickHouse (MergeTree), S3 Data Lake, Kafka, Airflow (ETL/ELT)
- Архитектура и реализация витрин данных для аналитики, ML и AI-агентов
- Поддержка и написание пайплайнов ETL/ELT (dbt / Airflow / Spark / Kafka и др.)
- Оптимизация производительности, стоимости хранения и потребления данных
- Внедрение и поддержка стандартов CI/CD и мониторинга пайплайнов
- Взаимодействие с аналитиками, ML-инженерами, разработчиками и продуктом
- Участие в построении feature store, ML-инфраструктуры и поддержке GenAI систем
Требования:
- 3+ лет опыта работы с данными в роли Data Engineer
- Опыт проектирования data-платформ в продакшене (от ingestion до витрин)
- Отличное знание SQL, Python (или Scala)
- Опыт работы с Apache Airflow, Spark, Kafka
- Опыт построения CI/CD процессов и мониторинга data pipeline’ов
- Понимание принципов data governance, data quality и data contracts