Яндекс ищет Data Engineer в команду Маркет.
Обязанности:
- Принятие конечных сетевых решений по реализации поставок данных: проектирование схем поставок данных, выбор подхода к внесению доработок в витрины с минимизацией рисков.
- Развитие фреймворков обработки данных: анализ существующих инструментов и инициирование их улучшения или поиска новых.
- Руководство реализацией сложных технических поставок: разбор алгоритмической составляющей инструментов и поиск эффективных решений.
Требования:
- Уверенные знания Python (на уровне написания собственного фреймворка) и SQL (оптимизация запросов).
- Опыт проектирования DWH: слои, модели хранения данных, процессы ETL.
- Понимание принципов работы распределённых систем: Hadoop или YTsaurus, ClickHouse.
- Умение выбирать технологии для решения конкретных задач.
- Знание алгоритмов и структур данных, особенно для работы с большими данными.
- Опыт работы от трёх лет.
- Умение работать в командной строке Unix-подобных систем (Linux, macOS).
Условия: офис / гибрид.