Должность: Data Engineer, Middle и выше в группу компаний АРТ-Финтех.
Стек: Greenplum, Trino, Apache Airflow, ClickHouse, Python, Spark, SQL (dbt), S3, Hadoop, Iceberg, Kafka, Cosmos, Flink, MinIO
Обязанности:
- Сбор требований с бизнес-заказчиков и анализ источников данных
- Разработка, реализация и поддержка интеграционных потоков и потоков сборки витрин данных на принятом в команде стеке
- Оперативное реагирование на инциденты в зоне ответственности и выполнение типовых задач в установленный срок
- Поддержание в актуальном состоянии документации типовых интеграционных решений платформы больших данных и предоставление отчетности руководителю
Требования:
- Гражданство и локация РФ
- Общее представление о стеке технологий Lakehouse; понимание отличий работы с BigData/Lakehouse
- Знание SQL (индексы, функции, оптимизация, профилирование производительности)
- Знание языков программирования: Java, Python
- Опыт работы с реляционными БД: Oracle, PostgreSQL, MySQL, MSSQL и т.п.
- Умение работать с Git (git pull/commit/push)
- Опыт работы с dbt, Cosmos, NiFi
- Опыт разработки на Spark; понимание особенностей Trino
- Понимание форматов данных: Iceberg, Parquet, Avro
- Опыт работы с S3-совместимыми хранилищами (MinIO и т.п.)
- Опыт использования систем ведения проектов и документации
Условия: Full-time, 5/2.
Зарплата: до 300к рублей на руки.