マガーク効果：私たちが目で聞くとき

視覚と聴覚の情報は、スピーチを理解する上で重要です。 私たちが誰かと話すとき、私たちは彼らが言うことを聞くだけでなく、彼らの唇を動かすことによって彼らがそれをどのように言うかを見ます。

人間の発話能力は、視覚情報と聴覚情報の統合に基づいています。これは、奇妙な幻想的な現象を体験できるという事実によって証明されています。 マガーク効果.

この特異な現象は、私たちが目で聞くときに起こり、見るものによって聞こえるものが変化すると言えます。 この興味深い視覚聴覚効果が何で構成されているかを調べてみましょう。

• 関連記事： 「人間の知覚に関する17の好奇心」

マガーク効果とは何ですか？

私たちは自分の感覚が独立して機能すると信じる傾向があります。私たちが聞くとき、私たちは聞くだけです。 私たちが見るとき、私たちは見るだけです. この信念に基づいて、視覚刺激は私たちの音の知覚方法を歪めることができないと考えるのは合理的でしょう。 しかし、現実には、私たちの知覚経験は 情報混合の複雑なプロセス、独特の現象を引き起こす同じ混合：効果 マクガーク。

確かに、非常に騒がしい環境で会話をしたことが何度かあります。 それは、ナイトクラブ、にぎやかな通りのバーのテラス、または高校の教室にあった可能性があります。 バックグラウンドノイズが高いと、その人が私たちがちょうど持っていると私たちに言っていることを理解するのは難しいです フロントと、何かを理解するために、私たちは彼の口を観察するという古くて本能的なトリックを使用します 話している間。

これらの場合、視覚情報と聴覚情報は別々に分析されるのではなく、組み合わされます. 人間の脳には上側頭溝と呼ばれる領域があり、両方のタイプの情報を組み合わせることに特化しています。 私たちが与えた例では、対話者が発音する音素と彼らの動きを組み合わせることが担当します 唇。

マルチモーダル情報を組み合わせるこの機能により、 上側頭溝は、幻想的なマガーク効果が発生する神経学的段階です。、これは、2つの異なる感覚モダリティが相互作用するときのメッセージのデコードのエラーの結果にすぎず、私たちが見るものが私たちが聞くものと一致しない原因になります。

YouTubeで簡単に検索すると、この現象が実際的な方法で公開されている複数のビデオを見つけることができます。 このリンクは、この現象の良い例に私たちを導きます：

この特定のケースでは、 ビデオの人はいつも/ ba /と言っていますが、唇の動きに応じて、/ ba /または/ pa /のどちらかが聞こえます。.

この効果は、音節の他の組み合わせでも発生する可能性があります。 たとえば、/ ka /（視覚）と/ pa /（聴覚）の組み合わせで実現できます。これにより、/ ta /の知覚が生じます。 別の例は、誰かが音節/ ga /に対応する唇の動きをしているのを見ることですが、音節/ ba /が話されている間、それは/ da /として認識されます。

同じ音が聞こえる方法は、話している人が唇を動かす方法を見るかどうかによって大きく異なります。 これは、音節などの単純な音のセットの知覚に影響を与えるだけでなく、次のことも証明されています。 それは完全な文章で機能しますが、私たちが言及したいくつかの状況でおそらくあなた自身がそれを目撃したことがあります 前。

マガーク効果と感覚モダリティ間の相互作用に関連する最初の発見の1つは、 対話者の唇が動くのを見る可能性は、私たちが聞くものの音量を大幅に改善します.

視野内にエミッターがあると、最大15デシベルの音素が聞こえる感覚が得られることがわかっています。 これは、音のない部屋や静かな場所など、音響条件が悪くない場合でも発生します。

• 多分あなたは繰り返す： 「人間の脳の一部（および機能）」

その発見の歴史

この現象 1976年に、英国の認知心理学者ハリー・マクガークと同僚のジョン・マクドナルドによる記事で最初に説明されました。 「唇を聞いて声を見る」というタイトル。 彼の最初の研究は、子供たちのグループの模倣のパターンを調査することで構成されていました。 話す能力を開発し、実験には、発音している人々のいくつかのビデオを提示することが含まれていました 異なる音節。

ただし、再生エラーが発生しました。 ビデオのマウントを担当する技術者がミスを犯し、画像と音声が同期しなくなりました。 その音に対応していないことを言っている人の録音が見られるようにする 彼は聞いた。

ビデオの再生時に、マクドナルドとマクドナルドは、唇で話された音素と放出された音素の代わりに、3番目の音素を聞きました。 この2人の研究者にこの独特の錯覚を発見してもらいたかったのは偶然でした。

• 関連記事： 「神経心理学：それは何であり、その研究の目的は何ですか？」

人間の発話の研究におけるその重要性

この効果の発見は考慮されます 視覚システムと聴覚システムが一緒に進化して、とりわけ、より良い音声処理を可能にしたという証拠. 私たちの視覚システムは、区別が難しい音を区別するのに役立ちます。これは、聴覚障害者が唇を読むときに実行する利点です。

私たちの対話者がどのように唇を動かすかを見ることができることは、聴覚システムを通して知覚されるメッセージについての自信を高めます。 つまり、2つの独立したシステムが同じソリューション（この場合は同じメッセージ）を指している場合、1つのチャネルでのみメッセージを受信する場合よりも、そのメッセージを信頼します。

言及する価値があります マガーク効果は自動的には発生しません. それが起こるためには、対話者に注意を払う必要があり、視覚と聴覚の両方で気を散らす刺激が組み込まれると、この錯覚は弱められます。

実際、これは、その効果が視覚または聴覚情報の不十分な受信によるものではなく、これら2つの感覚モダリティの統合におけるエラーによるものであることを証明しています。

視覚系が聴覚をサポートしているという考えに力を与えるもう一つの事実は、私たちに話しかけている人を見ても、彼が私たちに言っていることをまったく聞くことができないということです。 私たちの視覚野だけでなく、聴覚野も活性化されます、何も聞いていなくても。

• あなたは興味があるかもしれません： 「視神経：部分、経過および関連する病気」

マガーク効果と脳機能障害

それが見られました 脳損傷と読解力の低下、精神障害の発現に加えて、それはマガーク効果が発生する確率に影響を与えます。

脳梁離断術を受けた人は、マガーク効果をよりゆっくりと示します。 の子供たちは 特定の言語障害 彼らは、言語習得障害や読み書きの困難を持っていない子供たちと比較して、弱い方法でマガーク効果を示します。

ラテラリティも影響します、右利きの人がこの効果を経験する可能性が高いことを見てください。

• 関連記事： 「脳半球：神話と現実」

さまざまな言語でのマガーク効果

どの言語が話されているかに関係なく、その話者は、ある程度、音声認識中の視覚情報に依存しています。 それにもかかわらず、 マガーク効果の強さは言語ごとに異なることがわかっていますスペイン語、トルコ語、イタリア語、オランダ語、英語、ドイツ語などの言語では、話者は中国語や日本語の話者よりもこの効果を強く経験していることがわかります。

アジアの言語を話す人がマガーク効果を示す頻度が少ないのは、アイコンタクトを避けるという文化的慣習が原因である可能性があります. これに加えて、特に中国語と日本語は、非常に音節の言語構造を持つ2つの言語であり、通常は子音+母音タイプと 子音+母音+子音。これにより、唇の動きに関係なく、音節の検出に特に熟練します。 対話者。