Перейти к основному содержимому

Голосовая модель Dessa от Block обучена только на человеческой речи, чтобы распознавать эмоции

Behzat AIvoice-agentsspeech-modelsagent-evaluationprosodymodel-release
Крупный план отображения звуковой волны с пиками амплитуды вдоль временной шкалы на тёмном экране.

Block выпустила Dessa — голосовую модель, обученную исключительно на человеческой речи, а не на текстовых транскриптах, сообщает The Decoder. Заявленная цель — улавливать эмоциональные и просодические сигналы, которые упускают текстовые модели. TechCrunch описывает получаемый голосовой вывод как заметно человечный по звучанию. Релиз выходит в момент, когда голосовые интерфейсы становятся распространённым фронтендом для агентных продуктов.

Крупный план экрана цифрового звукового интерфейса с настройками тюнинга, сатурации и фильтра

Для разработчиков агентов значение имеет не столько демонстрация, сколько поверхность сигналов. Модель, распознающая эмоции и просодию, даёт голосовому агенту дополнительные входные данные, на которые можно опираться: эскалация к человеку, подтверждение перед необратимым действием или смена регистра ответа. Надёжность таких проверок определяется качеством стоящей за ними оценки, а обучение только на речи смещает режимы отказов. Системы, обученные на тексте, обычно тестируют на точность транскрипции и классификацию намерений; модель, обученную только на речи, нужно проверять на ошибочное распознавание аффекта, вариативность диалектов и акцентов, фоновый шум и уверенный по звучанию, но неверный эмоциональный вывод.

Что предоставленные материалы не устанавливают — так это то, как Dessa справляется с чем-либо из этого. Бенчмарки, частоты ошибок или методология оценки не описаны, а точная архитектура и состав обучающих данных остаются неясными. Командам, рассматривающим её в производственном голосовом пайплайне, следует относиться к эмоциональному выводу как к вероятностному сигналу, а не к истине в последней инстанции, и построить собственные тестовые наборы, прежде чем позволять ему управлять логикой проверок.

Давайте поговорим!