Определение эмоционального состояния по видеоизображению лица

1. Московский государственный технический университет имени Н.Э. Баумана Научно-исследовательский и испытательный центр биометрической техники И.Н. СПИРИДОНОВ, Л.Х. КАШАПОВА Определение эмоционального состояния по видеоизображению лица 07 июня 2012

2. Актуальность метода • Рост психических отклонений и заболеваний • По прогнозам ВОЗ психические заболевания по объему трудопотерь будут на втором месте к 2020 году • В мире 400 млн человек, страдающих психическими расстройствами • В России за последние десятилетия уровень психических заболеваний вырос в 11,5 раз • 80% инсультов происходят на фоне депрессий

3. Актуальность метода • Бесконтактная автоматическая экспресс-оценка эмоционального состояния человека в целях выявления агрессивно настроенных личностей и предупреждения террористической угрозы Удивление Печаль Гнев

4. Показатели эмоционального состояния человека Показатели эмоционального состояния Физиологические показатели Поведенческие показатели Субъективные ощущения Мимика Тесты Вегетативные показатели Речь Собственная оценка Эндокринные показатели Жестикуляция Психомоторные показатели Пантомимика Нейрофизиол. показатели

5. Классификация базовых эмоций

6. Алгоритм определения эмоционального состояния по изображению лица Обнаружение области лица на изображении Определение положения контрольных точек лица Расчет комплекса характеристик мимики Классификация эмоционального состояния

7. База данных видеофрагментов людей, находящихся в эмоциональном состоянии • Характеристики базы данных: • Объем базы данных, человек – 87 (55 – актеры, 32 – реальные люди) • Раса реципиентов – eвропеоиды, азиаты, южноамериканцы • Возраст реципиентов, лет –19-62 • Пол реципиентов – мужской, женский • Размер изображений видеофрагментов, пиксель – от 720 х 576 до 1920х1080 • Содержание видеофрагментов: нейтральное состояние, 6 базовых эмоций

8. База данных видеофрагментов людей, находящихся в эмоциональном состоянии

9. Результаты апробации алгоритмов автоматического определения эмоционального состояния

10. ПО оценки эмоционального и напряженного состояния человека по изображению с web-камеры • Функции ПО: • подключение устройств получения изображений (web-камер); • загрузка статического изображения (.jpg), видеоролика (.avi) и получение изображения с web-камеры в реальном режиме времени; • запись видеороликов с подключенной web-камеры; • автоматическое нахождение области лица, контрольных антропометрических точек на изображении и их отображение в окне ПО; • ручная корректировка положения контрольных антропометрических точек; • автоматическое определение комплекса мимических признаков; • автоматическое определение эмоционального состояния и уровня напряженности человека в кадре; • запись координат контрольных антропометрических точек, значений мимических признаков и результатов определения эмоционального и напряженного состояния в файл

11. ПО оценки эмоционального и напряженного состояния человека по изображению с web-камеры

12. ПО оценки эмоционального и напряженного состояния человека по изображению с web-камеры

13. ПО оценки эмоционального и напряженного состояния человека по изображению с web-камеры

14. Области применения • Безопасность (массовое скопление людей, операторская деятельность на стратегически важных объектах) • Психология/ психиатрия (переговоры, беседы, допросы) • Исследование эффективности предоставления коммерческих услуг

15. Контактная информация Московский государственный технический университет имени Н.Э.Баумана Научно-исследовательский и испытательный центр биометрической техники Москва, ул. 2-я Бауманская, д. 5 НИИЦ БТ МГТУ им. Н.Э.Баумана Тел.: (499) 263 6791 (499) 263 6876 Факс: (499) 263 6252 Web: www.biometric.bmstu.ru