Личный кабинет
Подробное описание документа
Корсун О. Н.
Методы контроля психофизиологического состояния оператора по эмоциональному выражению лица и анализу характеристик морганий на основе глубоких сверточных нейронных сетей / Корсун О. Н., Юрко В. Н. - DOI 10.18698/0236-3933-2021-1-120-134 // Вестник МГТУ им. Н. Э. Баумана. Сер. Приборостроение. - 2021. - № 1. -
Скачать документ
Проанализированы два подхода оценивания состояния оператора по видеоизображению лица с использованием глубоких сверточных нейронных сетей: 1) автоматическое распознавание эмоций; 2) анализ характеристик морганий. Исследование включало в себя оценку изменений функционального состояния оператора во время выполнения пилотажной задачи захода на посадку в ручном режиме пилотирования на авиационном тренажере. Во время пилотирования проводилась запись параметров полета системой объективного контроля и видеозапись лица оператора. Затем с помощью разработанного специального программного обеспечения выполнялось автоматическое распознавание эмоций (морганий) с синхронизацией распознанных эмоций (морганий) и записанных значений параметров полета. В результате выявлены устойчивые зависимости степени утомления оператора от числа распознанных нейросетевой моделью эмоций. Тип эмоции зависит от индивидуальных психологических характеристик каждого оператора. В проводимых экспериментах эти зависимости хорошо прослеживаются при анализе эмоций "Печаль", "Страх", "Гнев". Выявлена корреляция между характеристиками морганий и точностью пилотирования. При большей точности пилотирования регистрировалось большее число морганий оператора, что объясняется уверенным пилотированием при стабильном психофизиологическом состоянии Работа выполнена при поддержке РФФИ (проект РФФИ №18-08-01142)
Статья опубликована в следующих изданиях
№ 1. - 2021.
