Обязанности:
Генеративные модели и агенты: Поиск с Алисой, R&D, Алиса AIВам предстоит оценивать качество ответов и агентских сценариев, готовить данные для улучшения моделей, в том числе в задачах этики и безопасности. Прикладные ML-решения: Коммерческий департамент и Безопасность
Вы будете развивать модерацию и антифрод, автоматизировать процессы, выявлять злоупотребления и проверять качество защитных систем. Медиасервисы: Инфраструктура, Медиаплатформа
Нужно будет находить причины проблем с воспроизведением и доставкой контента по логам и телеметрии, разрабатывать ML-компоненты для оценки и улучшения качества. Другое
Также у нас есть много других задач в разных командах. Почему здесь интересно * Выбираем инструменты под задачу * В модерации Рекламы используем эвристики, регулярные выражения, градиентный бустинг и ручные проверки. Сочетаем методы в зависимости от того, что нужно для решения задачи * Задаём критерии качества продукта * Разрабатываем метрики, на основе которых принимаем ключевые продуктовые решения. В отдельных командах также обучаем ML-модели * Проверяем модели там, где важен контекст * В R&D создаём собственные бенчмарки для генеративных моделей: оцениваем рассуждения, знание фактов, этичность, понимание культурного контекста и реакции на провокации
Ключевые навыки:
- Владеете Python и SQL или YQL, умеете работать с большими объёмами данных
- Знаете теорию вероятностей, математическую статистику и методы проверки гипотез
- Понимаете принципы ML и умеете соотносить сложность решения с задачей
- Умеете формализовать продуктовые и бизнес-вопросы, выбирать метрики качества и анализировать ошибки
- Пишете поддерживаемый код и умеете организовывать обработку данных
- Самостоятельны в поиске решений, понятно объясняете выводы и умеете работать с разработчиками и заказчиками
Дополнительные требования:
- Обучали и внедряли модели, работали с LLM, NLP, компьютерным зрением или системами оценки качества AI-продуктов
- Как выберем команду:
- Обсудим ваш опыт и интересы, проведём технические секции и встречи с подходящими командами. После успешного прохождения этапов обсудим предложение о работе.