Эффект Мак-Герка: когда мы слышим глазами

Визуальная и слуховая информация играет ключевую роль в понимании речи. Когда мы с кем-то разговариваем, мы не просто слышим то, что они говорят, но мы также смотрим, как они это говорят, шевеля губами.

Способность человеческой речи основана на интеграции зрительной и слуховой информации, о чем свидетельствует тот факт, что мы можем испытать любопытный иллюзорный феномен: эффект МакГерка.

Можно сказать, что это своеобразное явление возникает, когда мы слышим глазами, в результате чего то, что мы слышим, изменяется в зависимости от того, что мы видим. Давайте выясним, в чем состоит этот интересный зрительно-слуховой эффект.

• Связанная статья: «17 любопытных фактов о человеческом восприятии»

Что такое эффект МакГерка?

Мы склонны считать, что наши чувства действуют независимо: когда мы слышим, мы только слышим; и когда мы видим, мы видим только. Основываясь на этом убеждении, было бы разумно думать, что визуальный стимул не способен исказить наш способ восприятия звука. Однако реальность такова, что это возможно, поскольку наш опыт восприятия является продуктом сложный процесс смешения информации, та же смесь, которая порождает своеобразное явление: эффект МакГурк.

Наверняка вы не раз разговаривали в очень шумной обстановке. Это могло быть в ночном клубе, на террасе бара на оживленной улице или в классе средней школы. Когда присутствует высокий фоновый шум, нам трудно понять, что человек говорит нам, что мы только что спереди и, чтобы что-то понять, мы используем старый инстинктивный трюк, наблюдая за его ртом Пока говорю.

В этих случаях зрительная и слуховая информация не анализируется отдельно, а скорее объединяется.. В человеческом мозге есть область, называемая верхней височной бороздой, которая специализируется на объединении обоих типов информации, В примерах, которые мы привели, он отвечал за объединение фонем, которые произносит наш собеседник, с движением их губы.

Благодаря этой способности комбинировать мультимодальную информацию, верхняя височная борозда - неврологическая стадия, на которой возникает иллюзорный эффект Мак-Гурка., что было бы не чем иным, как результатом ошибки в декодировании сообщения, когда взаимодействуют две разные сенсорные модальности, в результате чего то, что мы видим, не совпадает с тем, что мы слышим.

Если мы сделаем быстрый поиск на YouTube, мы сможем найти более одного видео, где это явление раскрывается на практике. Эта ссылка направляет нас на хороший пример этого явления:

В этом конкретном случае человек на видео все время говорит / ba /, однако, в зависимости от того, как он двигает губами, вы можете услышать / ba / или / pa /.

Этот эффект также может возникать с другими комбинациями слогов. Например, это может быть достигнуто с помощью комбинации / ka / (визуальный) и / pa / (слуховой), что дает начало восприятию / ta /. Другой пример: кто-то делает движения губ, соответствующие слогу / га /, но пока произносится слог / ba /, он будет восприниматься как / da /.

То, как мы слышим один и тот же звук, сильно различается в зависимости от того, смотрим ли мы на то, как говорящий с нами человек двигает губами. Это не только влияет на восприятие простых наборов звуков, таких как слоги, но также доказано, что Он работает с полными предложениями, хотя вы, вероятно, сами видели это в некоторых из упомянутых нами ситуаций. до.

Одним из первых открытий, связанных с эффектом Мак-Герка и взаимодействием сенсорных модальностей, является то, что наличие возможность увидеть, как шевелятся губы собеседника, значительно улучшает громкость того, что мы слышим.

Было замечено, что это дает нам ощущение слышимости фонем на 15 децибел громче, когда у нас есть излучатель в поле зрения. Это происходит даже тогда, когда акустические условия не являются неблагоприятными, например, в комнате без звука или в тихом месте.

• Может быть, вы повторяете: «Части человеческого мозга (и функции)»

История его открытия

Этот феномен впервые был описан в 1976 году в статье британского когнитивного психолога Гарри МакГерка вместе со своим коллегой Джоном Макдональдом. под названием «Слышать губы и видеть голоса». Его первоначальное исследование должно было состоять из исследования моделей подражания группы детей, которые развитие способности говорить, и эксперимент включал представление им нескольких видео людей, произносящих разные слоги.

Однако произошла ошибка воспроизведения. Техник, отвечающий за монтаж видео, допустил ошибку, из-за которой изображение и звук не синхронизировались, заставляя видеть запись человека, говорящего что-то, что не соответствует звуку, который Он услышал.

Во время воспроизведения видео МакГурк и Макдональд услышали третью фонему вместо той, которая произносилась губами, и той, которая была издана. Эти два исследователя открыли эту своеобразную слуховую иллюзию по чистой случайности.

• Связанная статья: «Нейропсихология: что это такое и каков объект ее изучения?»

Его важность в изучении человеческой речи

Открытие этого эффекта считается доказательство того, что зрительная и слуховая системы развивались вместе, чтобы, среди прочего, улучшить обработку речи. Наша зрительная система помогает нам различать звуки, которые трудно различить, - преимущество, которое получают глухие, когда читают по губам.

Возможность видеть, как наш собеседник двигает губами, повышает уверенность в сообщении, воспринимаемом слуховой системой. То есть, если две независимые системы указывают на одно и то же решение, в данном случае на одно и то же сообщение, мы доверяем этому сообщению больше, чем если бы мы получали его только по одному каналу.

Стоит отметить, что эффект Мак-Герка не возникает автоматически. Чтобы это произошло, необходимо, чтобы мы обращали внимание на нашего собеседника, и, когда включаются отвлекающие стимулы, как зрительные, так и слуховые, эта иллюзия ослабляется.

Фактически, это доказывает, что эффект возникает не из-за плохого приема зрительной или слуховой информации, а из-за ошибки в интеграции этих двух сенсорных модальностей.

Еще один факт, который придает силу идее о том, что зрительная система поддерживает слух, заключается в том, что когда мы видим человека, который говорит с нами, но мы вообще не слышим, что он говорит, активируется не только наша зрительная кора, но и слуховая, даже если мы ничего не слушаем.

• Вам может быть интересно: «Зрительный нерв: части, течение и родственные болезни»

Эффект Мак-Гурка и дисфункции мозга

Было замечено, что травмы головного мозга и нарушение навыков чтенияпомимо проявления психических расстройств, он влияет на вероятность возникновения эффекта Мак-Гурка.

У людей, перенесших каллозотомию, эффект Мак-Герка проявляется медленнее. Кажется, что дети с специфическое языковое расстройство демонстрируют эффект Мак-Гурка более слабым образом по сравнению с теми детьми, у которых нет нарушений в овладении языком или трудностей с грамотностью.

Латеральность также влияет, видя, что правши чаще испытывают этот эффект.

• Связанная статья: «Полушария головного мозга: мифы и реалии»

Эффект МакГерка на разных языках

Независимо от того, на каком языке говорят, его носители в некоторой степени зависят от визуальной информации при восприятии речи. Тем не менее, Было замечено, что интенсивность эффекта Мак-Герка варьируется от языка к языкуВидно, что говорящие на таких языках, как испанский, турецкий, итальянский, голландский, английский и немецкий, испытывают этот эффект сильнее, чем говорящие на китайском и японском.

То, что носители азиатского языка реже демонстрируют эффект Мак-Герка, может быть связано с культурной практикой избегания зрительного контакта.. К этому следует добавить, что китайский и японский, в частности, два языка с очень слоговой лингвистической структурой, обычно согласный + гласный и согласный + гласный + согласный, что делает их особенно искусными в распознавании слогов независимо от того, как двигаются их губы. собеседник.