Создано программное обеспечение для распознавания эмоций.

Программное обеспечение распознает эмоции у людей, используя принципы FaceID и анализируя выражения лиц. Это достигается за счет считывания работы мимических мышц. Программа будет фиксировать стимулы (группы мимических мышц) и уровень их активности (напряжены или расслаблены). Таким образом, на основе этих данных будут определяться эмоции, которые испытывает человек в данный момент.

Разработка предоставит компаниям и индивидуальным пользователям возможность автоматически определять эмоциональное состояние человека при обработке больших объемов данных.

«Софт распознает семь основных эмоций благодаря различным алгоритмам, работающим параллельно, — отметил Данила Ильин, студент НовГУ по направлению «Информатика и вычислительная техника», один из разработчиков программы. — Это включает алгоритм FACS (систему определения эмоций на основе кодирования лицевых движений). Используются несколько математических моделей, которые оценивают стимулы и их интенсивность, а также искусственный интеллект, способный анализировать мимику и делать выводы на основе полученных данных».

Развитие технологий в сфере искусственного интеллекта и BIG DATA привело к созданию инструментов, способных анализировать и интерпретировать эмоциональные состояния человека. Разработанная в НовГУ программа может успешно применяться в маркетинге, образовании, здравоохранении, индустрии развлечений и других областях. Например, рекламщикам она поможет лучше понять реакцию потребителей на их продукты и рекламные кампании.

Образовательные учреждения смогут повысить эффективность обучения и обеспечить психологический комфорт студентов. Медицинские учреждения, а также специалисты в области психологии и психиатрии смогут диагностировать и отслеживать эмоциональное состояние пациентов. Разработчики приложений смогут интегрировать функционал распознавания эмоций в свои продукты для улучшения пользовательского опыта. А индивидуальные пользователи смогут отслеживать свое эмоциональное состояние.

«Во время различных заболеваний (например, инсульта) коэффициенты интенсивности стимулов не будут указывать на конкретную эмоцию, а лишь на наиболее вероятную. В таких случаях врачи смогут использовать этот продукт для оценки восстановления функций мимических мышц у пациентов», — пояснил Данила Ильин, приводя пример использования софта в медицине.

Как добавили разработчики, в мире уже успешно функционируют аналогичные IT-продукты для распознавания эмоций, такие как EmoDetect, Visage Technologies и FaceReader. Новый софт не уступает им по качеству (используется алгоритм распознавания FACS) и, кроме того, легко и быстро интегрируется в экосистему клиента через API, а также лучше адаптирован под русский язык.

На данный момент разработана бета-версия программы, и тестирование прошло успешно. Следующий этап работы над проектом будет заключаться в обучении искусственного интеллекта распознаванию еще большего числа эмоций. Это станет возможным благодаря гранту «Студенческий стартап», который команда разработчиков выиграла в 2023 году.

В состав команды вошли научный руководитель проекта Луков Михаил Юрьевич, психолог и нейроисследователь; десктоп-разработчик Кирилл Васильев и Данила Ильин, технический лидер, студенты университета.