🧠 ИИ учится понимать эмоции по голосу, лицу и жестам
Исследователи НИУ ВШЭ вместе с коллегами из РАН и Сбера разработали мультимодальную нейросеть, которая анализирует видео, голос и речь, а также мимику, взгляд, позу и жесты 👀
Модель умеет распознавать эмоции, оценивать воспринимаемые черты личности и замечать амбивалентность — неуверенность или противоречивость поведения.
📈 На незнакомых для модели данных многозадачное обучение повысило качество распознавания эмоций на 13,7%.
В будущем технологию планируют использовать в цифровом образовании, интеллектуальных интерфейсах и персонализированных аватарах, которые смогут адаптировать мимику и речь под состояние пользователя.
💬 Представьте, что ИИ понимает ваше настроение лучше вас. Это удобно или пугает?
Исследователи НИУ ВШЭ вместе с коллегами из РАН и Сбера разработали мультимодальную нейросеть, которая анализирует видео, голос и речь, а также мимику, взгляд, позу и жесты 👀
Модель умеет распознавать эмоции, оценивать воспринимаемые черты личности и замечать амбивалентность — неуверенность или противоречивость поведения.
📈 На незнакомых для модели данных многозадачное обучение повысило качество распознавания эмоций на 13,7%.
В будущем технологию планируют использовать в цифровом образовании, интеллектуальных интерфейсах и персонализированных аватарах, которые смогут адаптировать мимику и речь под состояние пользователя.
💬 Представьте, что ИИ понимает ваше настроение лучше вас. Это удобно или пугает?