Обязанности:
- Проектирование интеграционных ETL-процессов для загрузки данных из источников в Lakehouse.
- Определение источников и анализ данных.
- Написание прототипов SELECT-запросов для отбора данных на SparkSQL.
- Разработка документации: FSD и спецификаций таблиц.
- Определение критериев приёмки, постановка задач команде разработки и приёмка результатов.
Требования:
- Уверенное владение SQL, в приоритете Oracle и PostgreSQL; знание CTE, умение писать сложные запросы и DML-запросы.
- Знание SparkSQL: умение писать SELECT-запросы и анализировать план запроса.
- Понимание структуры DWH и слоёв, владение одной из методологий построения DWH; обязательный опыт работы с DWH.
- Понимание процессов ETL/ELT.
- Навыки системного анализа и ведения технической документации.
- Навыки работы с Jira и Confluence или аналогами.
- Опыт работы: 3–6 лет.
Будет плюсом:
- Опыт работы с Greenplum или другой MPP-БД.
- Знание Python, Apache Airflow, PL/SQL или PgPL/SQL.
Условия: полная занятость, график 5/2, удалённая работа.