VK Видео ищет ведущего инженера данных.

Задачи:

  • Разрабатывать и поддерживать процессы обработки и доставки данных для аналитических и ML команд.
  • Собирать витрины, оптимизировать.
  • Писать адхоки и выгрузки, дебажить.
  • Собирать требования.

Требования:

  • Понимание работы параллельных вычислений на кластере.
  • Опыт с Airflow, Spark, Hadoop, ClickHouse, YT (опционально).
  • Знание Python: базовые алгоритмы (для понимания оптимального кода), классы и прочий сложный код (для чтения исходников и создания операторов/сервисов).
  • Знание Git и работа с кодом в команде (ревью).