Академия Яндекса: Алиса. Как измерить умность голосового ассистента – Анастасия Беззубцева - видео HD
00:28:21
Академия Яндекса: разработка 366 роликов
2628 просмотров
Алиса. Как измерить умность голосового ассистента – Анастасия Беззубцева - видео.
Присоединяйтесь к нашему чату t.me/YandexDataDriven
Сайт конференции events.yandex.ru/events/data-driven-2022
Алиса — это виртуальный помощник и друг, каждый месяц она помогает более 45 миллионам человек решать бытовые задачи и просто весело проводить время. В команде аналитики мы создаём метрики, которые позволяют замерить (а значит, и улучшить) умность и полезность голосового помощника для пользователей. В докладе расскажем, как решаем задачу измерения качества как Алисы в целом, так и ее основных составляющих компонент, почему стандартные метрики малополезны, какие сложности могут возникнуть и как мы их решаем.
Сайт конференции events.yandex.ru/events/data-driven-2022
Алиса — это виртуальный помощник и друг, каждый месяц она помогает более 45 миллионам человек решать бытовые задачи и просто весело проводить время. В команде аналитики мы создаём метрики, которые позволяют замерить (а значит, и улучшить) умность и полезность голосового помощника для пользователей. В докладе расскажем, как решаем задачу измерения качества как Алисы в целом, так и ее основных составляющих компонент, почему стандартные метрики малополезны, какие сложности могут возникнуть и как мы их решаем.
развернуть свернуть
- 1 комментарий
RSS
Написать комментарий
trapwalker
10:14
к вопросу о false negative споттера. Можно держать активными сразу два споттера с разным порогом толерантности. Второй споттер — это тот, что используется сейчас, а первый — теневой. он просто регистрирует все что отдаленно похоже на обращение к алисе. На каждый успешный вызов по реакции второго споттера нужно анализировать недавние срабатывания первого. так получим хотя бы часть false negative.
Ответить