Методы и алгоритмы комплексного анализа речевой и видеоинформации в коммуникационных процессах с целью поддержки принятия экспертных решений. ГПНИ «Информатика, космос и безопасность», подпрограмма «Информатика», 2016 – 2018 гг., задание 1.7.02 : отчет о научно-исследовательской работе (заключительный) / БГУ ; научный руководитель В. С. Садов

Abstract

Объектом исследования являются технические системы анализа эмоционального состояния участников коммуникационных процессов. Цель работы: повышение достоверности оценки хода коммуникационного процесса между личностями посредством автоматизированного анализа их текущего эмоционального состояния, совершенствование процессов человеко-машинного взаимодействия. Методы проекта: теория случайных процессов, математическое моделирование, экспериментальные исследования. В результате проведенной работы: - исследована структура сообщения в коммуникационном процессе, формализованы понятия вербальной и невербальной информации при коммуникациях, разработана информационная модель представления эмоций человека с возможностью числовой оценки его общего эмоционального состояния и динамики его развития; - определены качественные и количественные взаимосвязи между параметрами речевого сигнала и характеристиками восприятия звукового сообщения; - проведен выбор классификатора эмоциональной окраски речевого сигнала и разработан стохастический алгоритм оптимизации вектора признаков классификатора эмоциональной окраски речи на основе метода роя частиц; - разработана метрика лица человека с использованием реперных точек, характеризующих изменение положения лицевых мышц при выражении определенных эмоций; - создан алгоритм определения эмоционального состояния человека по положению реперных точек на изображении его лица; - данная система анализа алгоритмов извлечения и описания локальных признаков изображений внедрена в учебный процесс на кафедре интеллектуальных систем факультета радиофизики и компьютерных технологий Белорусского государственного университета, акт о практическом использовании результатов исследования от 03.12.2018.