Облачная платформа Yandex Cloud разработала нейросеть-эмпата — это новаяML-модель, которая способна по голосу распознавать эмоции человека. Технологияможет определить негатив, неформальные высказывания и нецензурную лексику, атакже пол спикера и его фразы в диалоге, сообщает пресс-служба компании.

Нейросеть-эмпат создана на базе алгоритма распознавания речи YandexSpeechKit. С его помощью компании смогут создавать голосовых помощников ивиртуальных операторов кол-центров, которые умеют понимать человеческие эмоции.Это может помочь бизнесу улучшить качество аналитики.

ML-модель работает в потоковом режиме — расшифровка и анализ эмоцийпроисходит сразу во время разговора. Например, если оператор кол-центранагрубил клиенту, система оповестит менеджмент о проблемах.

Также алгоритм может определять эмоции по голосу — по скорости речи, высоте,тембру и другим параметрам. В том числе нейросеть определяет пол участниковразговора и поддерживает технологию speaker labeling — она отмечает, комупринадлежит та или иная реплика. 

Кроме того, ML-модель расширяет возможности офлайн-аналитики: данные отнейросети помогут понять, какие именно темы и формулировки от операторавызывают негатив у клиента, и позволят оптимизировать сценариикоммуникации.

Вскоре новая модель заработает в сервисе речевой аналитики SpeechSense,который включает в себя технологии Yandex SpeechKit и интегрирован сгенеративной нейросетью YandexGPT. Это позволит нейросети распознавать болеесложные эмоции — например, сарказм и неуверенность. Кроме того, ML-модельсможет оценить, насколько профессионально оператор выполнял свою задачу:погружение в проблему клиента и качественная помощь.

«При разработке ML-сервисов мы всегда учитываем обратную связь рынка.Один из запросов наших клиентов и партнеров — умение определять эмоции прираспознавании речи. Теперь эта функция доступна каждому пользователю. Вбудущем в рамках сервиса речевой аналитики SpeechSense мы планируемзначительно расширить список распознаваемых эмоций и дать возможностьклиентам самим выбирать, какие эмоции им необходимо определять», —сказал руководитель ML-сервисов Yandex Cloud Василий Ершов.

Ранее «Яндекс» представил новую версию нейросети «Яндекс Погода», котораяначала предсказывать динамику погодных показателей для бизнеса. С помощьютехнологии предприятия могут получить доступ к сезонному прогнозу наполгода.