맥거크 효과: 눈으로 들을 때

시각 및 청각 정보는 말을 이해하는 데 중요합니다. 우리가 누군가와 이야기할 때, 우리는 그들이 말하는 내용만 듣는 것이 아니라 입술을 움직여서 말하는 방식도 봅니다.

인간의 언어 능력은 시각 및 청각 정보의 통합을 기반으로 하며, 이는 우리가 이상한 환상 현상을 경험할 수 있다는 사실에 의해 입증됩니다. 맥거크 효과.

이 특이한 현상은 우리가 눈으로 들을 때 발생하며, 보는 것에 따라 듣는 것이 달라진다고 할 수 있습니다. 이 흥미로운 시각 청각 효과가 무엇으로 구성되어 있는지 알아봅시다.

• 관련 기사: "인간 지각에 관한 17가지 궁금증"

맥거크 효과란?

우리는 감각이 독립적으로 기능한다고 믿는 경향이 있습니다. 그리고 우리가 볼 때만. 이러한 믿음에 기초하여 시각적 자극은 소리를 지각하는 우리의 방식을 왜곡할 수 없다고 생각하는 것이 합리적일 것입니다. 그러나 현실은 우리의 지각 경험이 정보 혼합의 복잡한 과정, 독특한 현상을 일으키는 동일한 혼합: 효과 맥거크.

분명히 한 번 이상 매우 시끄러운 환경에서 대화를 나눴습니다. 나이트클럽, 번화한 거리의 바 테라스, 고등학교 교실에 있을 수 있습니다. 배경 소음이 높으면 그 사람이 우리에게 방금 말한 것을 이해하기 어렵습니다. 무언가를 이해하기 위해 우리는 그의 입을 관찰하는 오래되고 본능적인 속임수를 사용합니다. 말하는 동안.

이 경우 시각정보와 청각정보를 따로따로 분석하지 않고 종합적으로 분석한다.. 인간의 뇌에는 상측두고랑(superior temporal sulcus)이라는 영역이 있는데, 이 영역은 두 가지 유형의 정보를 결합하는 데 특화되어 있습니다. 우리가 제시한 예에서, 그것은 우리의 대담자가 발음하는 음소와 그들의 움직임을 결합하는 역할을 할 것입니다. 입술.

이러한 다중 모드 정보를 결합하는 능력으로 인해, 상측측두고랑은 환상적 맥거크 효과가 발생하는 신경학적 단계이다.이는 두 가지 다른 감각 양식이 상호 작용하여 우리가 보는 것과 듣는 것이 일치하지 않을 때 메시지 디코딩 오류의 결과일 뿐입니다.

YouTube에서 빠르게 검색하면 이 현상이 실제적으로 노출되는 동영상을 두 개 이상 찾을 수 있습니다. 이 링크는 이 현상의 좋은 예를 보여줍니다.

이 특정한 경우, 영상 속 사람은 항상 / ba /라고 말하지만 그가 입술을 움직이는 방식에 따라 / ba / 또는 / pa / 중 하나를 들을 수 있습니다..

이 효과는 음절의 다른 조합에서도 발생할 수 있습니다. 예를 들어, / ka / (시각적) 및 / pa / (청각적) 조합으로 달성 할 수 있으며 이는 / ta /의 인식을 유발합니다. 또 다른 예는 음절 / ga /에 해당하는 입술 움직임을 만드는 사람을 보는 것이지만 음절 / ba /가 말하는 동안 / da /로 인식됩니다.

같은 소리를 듣는 방식은 말하는 사람이 입술을 움직이는 방식을 보느냐에 따라 크게 달라집니다. 이것은 음절과 같은 단순한 소리 집합의 인식에 영향을 미칠 뿐만 아니라 우리가 언급한 일부 상황에서 직접 목격했을지라도 완전한 문장으로 작동합니다. 전에.

McGurk 효과와 감각 양식 간의 상호 작용과 관련된 첫 번째 발견 중 하나는 대화 상대의 입술이 움직이는 것을 볼 가능성은 우리가 듣는 것의 양을 상당히 향상시킵니다..

우리가 시야 내에 방사체가 있을 때 음소를 최대 15데시벨 더 크게 듣는 느낌을 주는 것으로 나타났습니다. 이것은 소리가 없는 방이나 조용한 장소와 같이 음향 조건이 불리하지 않은 경우에도 발생합니다.

• 아마도 당신은 반복합니다: "인간 두뇌(및 기능)의 일부"

발견의 역사

이 현상 1976년 영국 인지심리학자 해리 맥거크가 동료 존 맥도날드와 함께 쓴 기사에서 처음 기술했다. "입술을 듣고 목소리를 본다"라는 제목으로. 그의 원래 연구는 한 무리의 아이들을 모방하는 패턴을 조사하는 것이었습니다. 말하는 능력을 개발하고 사람들이 발음하는 여러 비디오를 제시하는 실험이 포함되었습니다. 다른 음절.

그러나 재생 오류가 발생했습니다. 영상마운팅 담당기사님 실수로 영상과 사운드 싱크가 안맞아서 사람이 말하는 소리와 일치하지 않는 말을 하는 것을 녹음하는 것 그는 들었다.

영상 재생 당시 맥거크와 맥도날드는 입으로 말하는 음소와 발산되는 음소 대신 세 번째 음소를 들었다. 이 두 연구원이 이 독특한 청각 환상을 발견하기를 원했던 것은 우연이었습니다.

• 관련 기사: "신경 심리학: 그것이 무엇이며 연구 대상은 무엇입니까?"

인간의 언어 연구에서 그것의 중요성

이 효과의 발견으로 간주됩니다 시각 및 청각 시스템이 무엇보다도 더 나은 음성 처리를 가능하게 하기 위해 함께 진화했다는 증거. 우리의 시각 시스템은 구별하기 어려운 소리를 구별하는 데 도움이 됩니다. 이는 청각 장애인이 입술을 읽을 때 수행하는 이점입니다.

대화 상대가 입술을 어떻게 움직이는지 볼 수 있으면 청각 시스템을 통해 인식되는 메시지에 대한 자신감이 높아집니다. 즉, 두 개의 독립적인 시스템이 동일한 솔루션, 이 경우 동일한 메시지를 가리키는 경우 하나의 채널을 통해서만 수신하는 경우보다 해당 메시지를 더 신뢰합니다.

언급할 가치가 있습니다 McGurk 효과는 자동으로 발생하지 않습니다. 그것이 일어나기 위해서는 대화 상대에게 주의를 기울일 필요가 있으며, 주의를 산만하게 하는 자극이 시각과 청각 모두에 통합될 때 이 환상은 약화됩니다.

사실, 이것은 그 효과가 시각 또는 청각 정보의 열악한 수용 때문이 아니라 이 두 가지 감각 양식의 통합 오류에 기인한다는 것을 증명합니다.

시각 시스템이 청각을 지원한다는 생각에 힘을 주는 또 다른 사실은 우리가 우리에게 말하는 사람을 볼 때 그들이 말하는 것을 전혀 들을 수 없을 때, 우리의 시각 피질뿐만 아니라 청각 피질도 활성화됩니다., 우리가 아무 것도 듣지 않더라도.

• 관심이 있을 수 있습니다. "시신경: 부분, 경과 및 관련 질병"

McGurk 효과와 뇌 기능 장애

라고 본적이 있다 뇌 손상 및 읽기 능력 장애, 정신 장애를 나타내는 것 외에도 McGurk 효과가 발생할 확률에 영향을 미칩니다.

뇌척수액 절제술을 받은 사람들은 McGurk 효과를 더 천천히 나타냅니다. 을 가진 아이들인 것 같다. 특정 언어 장애 언어습득장애나 문해장애가 없는 아동에 비해 맥거크 효과가 약한 것으로 나타났다.

측면도 영향을 미칩니다., 오른손잡이가 이 효과를 경험할 가능성이 더 높다는 것을 알았습니다.

• 관련 기사: "뇌 반구: 신화와 현실"

다른 언어의 McGurk 효과

어떤 언어를 사용하든지 화자는 음성 인식 동안 시각적 정보에 어느 정도 의존합니다. 그럼에도 불구하고, McGurk 효과의 강도는 언어마다 다른 것으로 나타났습니다.스페인어, 터키어, 이탈리아어, 네덜란드어, 영어 및 독일어와 같은 언어에서는 해당 언어의 화자가 중국어 및 일본어 화자보다 이러한 효과를 더 강하게 경험하는 것으로 나타났습니다.

아시아 언어 사용자가 McGurk 효과를 덜 자주 나타내는 것은 눈맞춤을 피하는 문화적 관습 때문일 수 있습니다.. 여기에 추가하여 특히 중국어와 일본어는 매우 음절 언어 구조를 가진 두 가지 언어로, 일반적으로 자음 + 모음 유형 및 자음 + 모음 + 자음으로 입술의 움직임에 관계없이 음절을 감지하는 데 특히 능숙합니다. 대담자.