Чем предстоит заниматься
- Предстоит создавать умные таргеты обучения на основе кода. Всё, что будет приносить качество и быстро работать в рантайме, пойдёт в дело. Вы станете тестировать гипотезы с помощью A/B-экспериментов, чтобы оценивать вклад в улучшение продукта. Мы внедряем любые изменения, только если их эффективность подтвердилась.
- По мере развития ассистента необходимо внедрять новые метрики, оценивающие и развивающие новые аспекты качества. Также нужно изменять метрики для учёта новых пользовательских сценариев и уточнения старых.
Требования
- Работали с ML-моделями (NLP, IR)
- Умеете планировать эксперименты и знаете, как измерить их успех
- Умеете писать продакшен-код на Python или С++
- Знакомы с MapReduce, обработка терабайтов логов вас не пугает