Vakansiya haqqında
Яндекс ищет аналитика-разработчика в команду LLM Блендер. Роль связана с улучшением офлайн-метрики ранжирования, сбором бенчмарков и развитием аналитических моделей для оценки качества Поиска.
Задачи
- Исследовать и оцифровывать проблемы в офлайн-метрике и итоговом ранжировании, разрабатывать способы их исправления.
- Собирать бенчмарк ранжирования с эталонными оценками и эталонным ранжированием.
- Строить и поддерживать аналитические модели для оценки качества Поиска.
- Участвовать в приёмке новых ML-моделей ранжирования.
- Собирать корзины запросов для оценки качества и поддерживать дашборды мониторинга качества.
- Решать продуктовые и аналитические вопросы, связанные с процессами офлайн-оценки качества поиска.
Условия
Работа в гибридном или офисном формате.