Качественный диалог. Как мы тестируем Алису и умные устройства

Это уже не научная фантастика: голосовые технологии появляются в нашей жизни. Теперь не кажется чем-то необычным, придя домой, попросить умную колонку включить свет и приятную музыку, а занимаясь домашними делами — поболтать с ней о погоде или поиграть во что-нибудь. При этом хочется, чтобы общение с голосовым помощником было не только развлечением, но и помогало с повседневными задачами человека.

Все эти требования к голосовому помощнику обязывают нас строго следить за качеством и тщательно тестировать новые функции: не забыть охватить все возможные варианты, учитывать особенности устройства, в котором живёт ассистент.

Из доклада вы узнаете:

• как мы тестируем голосовые сценарии Алисы на всех уровнях и генеративные модели;
• как тестировать взаимодействия между сложной структурой бэкендов;
• что такого неочевидного есть в тестировании умных девайсов;
• какие инструменты мы используем при тестировании, как Алиса учится чему-то новому и как нам приходится каждый день учиться новому при её тестировании ;)