name: Контекстно-зависимое распознавание эмоций на основе многомодальных данных
keyword_list: распознавание эмоций, многомодальные данные
abstract: В диссертации предлагаются методы повышения эффективности автоматического непрерывного распознавания эмоций человека с использованием контекстной многомодальной информации. Для этого были решены задачи исследования существующих методов и алгоритмов непрерывного распознавания эмоций; разработки и исследования методов гибкого моделирования объема контекста активного пользователя в моделях распознавания эмоций, а также методов интеграции контекстных данных собеседника и его эмоциональных состояний в модель распознавания эмоций пользователя; разработки многомодальной системы распознавания эмоционального состояния пользователя в условиях повышенного влияния физического окружения на его настроение.
  
  В результате решения поставленных задач было выявлено следующее: для разных корпусов эмоционально окрашенного поведения пользователя полученное значение объема контекста, обеспечивающее наивысшую производительность системы, варьируется, видеомодальности требуется меньший объем контекста, чем аудио. Независимое моделирование контекста в диалоговом сценарии оказалось наиболее результативной моделью, а также было показано, что при интеграции данных собеседника в модель любым из предложенных способов можно добиться улучшения для некоторых корпусов и модальностей. Наилучшие результаты для интеграции контекста окружения были получены на аудиовизуальных наборах признаков, а также на наборах, извлеченных из движений глаз и головы.
chairman_dissertation_council.name: Юрий
chairman_dissertation_council.surname: Матвеев
chairman_dissertation_council.patronymic: Николаевич
chairman_dissertation_council.position: профессор (квалификационная категория "профессор-эксперт"), факультет информационных технологий и программирования
chairman_dissertation_council.degree: Доктор технических наук
chairman_dissertation_council.rank: Профессор
chairman_dissertation_council.wos_research_id: d-4188-2014
chairman_dissertation_council.territory: РОССИЯ
organization_supervisor.name: Владимир
organization_supervisor.surname: Васильев
organization_supervisor.patronymic: Николаевич
organization_supervisor.position: ректор
organization_supervisor.territory: РОССИЯ
rubrics.code: 28.23.15
rubrics.name: Распознавание образов. Обработка изображений
rubrics.code: 20.19.29
rubrics.name: Обработка изобразительных и аудиовизуальных документов
oecds.code: 01.02.EX
oecds.name: COMPUTER SCIENCE, THEORY & METHODS
oecds.code: 01.02.EP
oecds.name: COMPUTER SCIENCE, ARTIFICIAL INTELLIGENCE
speciality_codes.name: Теоретические основы информатики
speciality_codes.code: 05.13.17
supervisors.fio: Карпов А.А.
supervisors.scientific_degree: Доктор технических наук
supervisors.speciality_code: Теоретические основы информатики
supervisors.responsible_type: Научный руководитель
opponents.fio: Накамура С.
opponents.scientific_degree: Доктор технических наук
opponents.speciality_code: Теоретические основы информатики
opponents.responsible_type: Оппонент
opponents.fio: Мещеряков Р.В.
opponents.scientific_degree: Доктор технических наук
opponents.speciality_code: Теоретические основы информатики
opponents.responsible_type: Оппонент
protection_organization.short_name: УНИВЕРСИТЕТ ИТМО; НИУ ИТМО; ИТМО
protection_organization.name: ФЕДЕРАЛЬНОЕ ГОСУДАРСТВЕННОЕ АВТОНОМНОЕ ОБРАЗОВАТЕЛЬНОЕ УЧРЕЖДЕНИЕ ВЫСШЕГО ОБРАЗОВАНИЯ "НАЦИОНАЛЬНЫЙ ИССЛЕДОВАТЕЛЬСКИЙ УНИВЕРСИТЕТ ИТМО"
protection_organization.ogrn: 1027806868154
protection_organization.supervisor_name: ВЛАДИМИР
protection_organization.supervisor_surname: ВАСИЛЬЕВ
protection_organization.supervisor_patronymic: НИКОЛАЕВИЧ
protection_organization.organization_type: Организация
protection_organization.okogu: Министерство науки и высшего образования Российской Федерации
protection_organization.okopf: Федеральные государственные автономные учреждения
author_organization.short_name: УНИВЕРСИТЕТ ИТМО; НИУ ИТМО; ИТМО
author_organization.name: ФЕДЕРАЛЬНОЕ ГОСУДАРСТВЕННОЕ АВТОНОМНОЕ ОБРАЗОВАТЕЛЬНОЕ УЧРЕЖДЕНИЕ ВЫСШЕГО ОБРАЗОВАНИЯ "НАЦИОНАЛЬНЫЙ ИССЛЕДОВАТЕЛЬСКИЙ УНИВЕРСИТЕТ ИТМО"
author_organization.ogrn: 1027806868154
author_organization.supervisor_name: ВЛАДИМИР
author_organization.supervisor_surname: ВАСИЛЬЕВ
author_organization.supervisor_patronymic: НИКОЛАЕВИЧ
author_organization.organization_type: Организация
author_organization.okogu: Министерство науки и высшего образования Российской Федерации
author_organization.okopf: Федеральные государственные автономные учреждения