Senior Data Engineer в Маркет.
Какие задачи вас ждут
- Принятие конечных сетевых решений по реализации поставок данных: проектирование схем поставок данных, выбор подхода к внесению доработок в витрины за оптимальное время с минимизацией рисков от релизов, критический взгляд на результат в интересах потребителей данных.
- Развитие фреймворков обработки данных: применение существующих инструментов работы с данными, выявление их недостатков, продвижение повестки по их улучшению или поиску новых для более эффективного решения задач.
- Руководство реализацией сложных технических поставок: разбор алгоритмической составляющей инструментов и поиск эффективных решений, в том числе упрощение постановки задачи.
Мы ждем, что вы
- Уверенно знаете Python на уровне написания собственного фреймворка и SQL на уровне оптимизации запросов.
- Умеете проектировать DWH: слои, модели хранения данных, процессы ETL.
- Хорошо понимаете принципы работы распределённых систем Hadoop или YTsaurus, ClickHouse.
- Умеете выбирать технологии для решения конкретных задач.
- Знаете основные алгоритмы и структуры данных, особенно используемые в работе с большими данными.
- Имеете опыт работы от трёх лет.
- Умеете работать в командной строке Unix-подобных систем (Linux, macOS).
Будет плюсом, если вы
- Имеете опыт промышленной разработки на C++.
- Работали в ecom-отрасли.
- Решали задачи в роли аналитика, управляли командой или проектами.