Аннотация:Люди постоянно испытывают различные эмоции, которые внешне выражаются по разным каналам: в виде выражений лица, вокальных характеристик речи или невербальных вокализаций, в особенностях позы тела и движений. Распознавание этих сигналов является необходимым условием успешного социального взаимодействия, так как позволяет понять состояние другого человека и предугадать его дальнейшие действия. Выражения лиц сами по себе являются носителем большого количества социально значимой информации, но в реальной жизни они редко воспринимаются и обрабатываются изолированно: мы сталкиваемся с потоком сигналов, одновременно поступающих из разных источников. Одним из вариантов такого эмоционального контекста могут быть невербальные вокальные проявления, такие как смех, вздохи и вскрики. Они, как и лица, эффективно передают эмоциональное состояние человека. Предполагается, что информация, получаемая из разных модальностей, автоматически объединяется, формируя единый образ. При этом несоответствие между эмоциональным содержанием взаимовлияющих аудиальных и визуальных стимулов вызывает конфликт, который может отразиться на восприятии эмоциональных выражений лиц. Идея данного исследования заключалась в выяснении мозговых механизмов распознавания лицевых экспрессий, предъявляемых одновременно с эмоционально конгруэнтными и неконгруэнтными невербальными вокализациями, и влияния, которое оказывает межмодальная интеграция на его результат.
Актуальность данной работы обусловлена возросшим в последние десятилетия интересом к исследованию распознавания лицевых экспрессий в более экологически валидных условиях, то есть с учетом контекста, который необходимо влияет на этот процесс.
Новизна заключается в получении новых и уточнении уже имеющихся в литературе экспериментальных данных о психофизиологических механизмах процесса межмодальной интеграции эмоциональных стимулов, в том числе с применением нового метода исследования мозговой активности по данным скальповой ЭЭГ под названием «Виртуально вживленный электрод» (Патент РФ № 2785268, автор А.В. Вартанов), позволяющей надежно реконструировать электрическую активность мозговых структур, включая подкорковые.
Целью работы является анализ показателей ЭЭГ при взаимодействии слуховой (вокализации) и зрительной (выражения лиц на изображениях) эмоциональной информации.
Объект исследования: процесс интеграции эмоционального содержания разных модальностей при восприятии.
Предмет исследования: механизмы одновременного восприятия эмоциональных выражений лиц и невербальных эмоциональных вокализаций.
Задачами исследования являются:
● Проведение теоретического анализа литературных данных
● Разработка и проведение эксперимента по определению участниками эмоций по выражениям лиц в присутствии дополнительных эмоциональных слуховых стимулов с записью ЭЭГ.
● Анализ полученных данных с целью выявления различий в мозговой активности при категоризации разных вариантов аудиовизуальных стимулов.
Выводы
1. Несоответствие между эмоциональной информацией, получаемой по слуховому и зрительному каналу, влияет в разной степени на скорость и корректность распознавания лиц, выражающих различные эмоции, при этом наибольшее негативное влияние испытывают лицевые экспрессии злости.
2. В ответ на предъявление лиц в паре с вокализациями злости наблюдается усиление активности ствола, путамена и медиального бледного шара, гиппокампа, мозжечка, миндалины, таламуса, супрамаргинальной, угловой, веретенообразной и верхней височной извилины. Медиальный бледный шар, путамен и гиппокамп также более активны в ответ на предъявление лицевых экспрессий страха в паре с вокализациями страха, в отличие от вокализаций радости.
3. Были выявлены различия в амплитудах компонентов вызванных потенциалов для разных условий предъявления пар лицевая экспрессия радости – эмоциональная вокализация (N200, P300 и N400) и лицевая экспрессия страха – эмоциональная вокализация (P300 и N400).