McGurk -effekten: når vi hører med øynene

Visuell og auditiv informasjon er nøkkelen for å forstå tale. Når vi snakker med noen, hører vi ikke bare hva de sier, men vi ser også på hvordan de sier det ved å bevege leppene.

Evnen til menneskelig tale er basert på integrering av visuell og auditiv informasjon, noe som bevises av det faktum at vi kan oppleve et merkelig illusorisk fenomen: McGurk -effekten.

Det kan sies at dette særegne fenomenet oppstår når vi hører med øynene, og får det vi hører til å endre seg avhengig av det vi ser. La oss finne ut hva denne interessante visuelle-auditive effekten består av.

• Relatert artikkel: "17 nysgjerrigheter om menneskelig oppfatning"

Hva er McGurk -effekten?

Vi har en tendens til å tro at sansene våre fungerer uavhengig: når vi hører, hører vi bare; og når vi ser, ser vi bare. Basert på denne troen, ville det være rimelig å tro at en visuell stimulans ikke er i stand til å forvride måten vi oppfatter lyd på. Imidlertid er virkeligheten at det kan, siden våre perseptuelle erfaringer er et produkt av en kompleks blanding av informasjonsblanding, den samme blandingen som gir opphav til et sært fenomen: effekten McGurk.

Sikkert ved mer enn én anledning har du hatt en samtale i et ekstremt støyende miljø. Det kan ha vært på en nattklubb, på terrassen til en bar i en travel gate eller i et videregående klasserom. Når det er høy bakgrunnsstøy, er det vanskelig for oss å forstå hva personen forteller oss at vi nettopp har foran, og for å forstå noe bruker vi det gamle og instinktive trikset med å observere munnen hans Mens du snakker.

I disse tilfellene analyseres ikke visuell og auditiv informasjon separat, men kombineres heller. Den menneskelige hjerne har en region som kalles superior temporal sulcus, som er spesialisert på å kombinere begge typer informasjon, I eksemplene vi har gitt, vil det være ansvaret for å kombinere fonemene som samtalepartneren vår uttaler med bevegelsen av deres lepper.

På grunn av denne muligheten til å kombinere multimodal informasjon, superior temporal sulcus er det nevrologiske stadiet der den illusoriske McGurk -effekten oppstår, som ikke ville være mer enn et resultat av en feil i dekodingen av meldingen når to forskjellige sansemetoder samhandler, noe som gjør at det vi ser ikke faller sammen med det vi hører.

Hvis vi gjør et raskt søk på YouTube, kan vi finne mer enn én video der dette fenomenet blir avslørt på en praktisk måte. Denne lenken leder oss til et godt eksempel på dette fenomenet:

I dette spesifikke tilfellet, personen i videoen sier / ba / hele tiden, men avhengig av hvordan han beveger leppene, kan du høre enten / ba / eller / pa /.

Denne effekten kan også forekomme med andre kombinasjoner av stavelser. For eksempel kan det oppnås med kombinasjonen / ka / (visual) og / pa / (auditiv), som gir opphav til oppfatningen av / ta /. Et annet eksempel ville være å se noen gjøre leppebevegelser som tilsvarer stavelsen / ga / men mens stavelsen / ba / blir snakket vil det bli oppfattet som / da /.

Måten vi hører den samme lyden på varierer drastisk avhengig av om vi ser på måten personen som snakker til oss beveger leppene på. Dette påvirker ikke bare oppfatningen av enkle sett med lyder som stavelser, men det har også blitt bevist at Det fungerer med komplette setninger, selv om du sannsynligvis har vært vitne til det selv i noen av situasjonene vi har nevnt før.

En av de første funnene knyttet til McGurk -effekten og samspillet mellom sensoriske modaliteter er det å ha muligheten for å se samtalepartnerens lepper bevege seg betraktelig, forbedrer volumet på det vi hører.

Det har blitt sett at det gir oss følelsen av å høre fonemer opptil 15 desibel høyere når vi har senderen i vårt synsfelt. Dette skjer selv når de akustiske forholdene ikke er ugunstige, for eksempel å være i et rom uten lyd eller på et stille sted.

• Kanskje du gjentar: "Deler av den menneskelige hjerne (og funksjoner)"

Historien om oppdagelsen

Dette fenomenet ble først beskrevet i 1976 i en artikkel av den britiske kognitive psykologen Harry McGurk sammen med sin kollega John MacDonald med tittelen "Høre lepper og se stemmer". Hans opprinnelige studie skulle bestå av å undersøke mønstrene etterligning av en gruppe barn som var utvikle evnen til å snakke og eksperimentet innebar å presentere dem med flere videoer av mennesker som uttalte forskjellige stavelser.

Det oppstod imidlertid en avspillingsfeil. Teknikeren med ansvar for montering av videoen gjorde en feil og forårsaket at bildet og lyden ikke ble synkronisert, forårsaker at en innspilling av en person blir sett si noe som ikke samsvarer med lyden som Han hørte.

På tidspunktet for avspillingen av videoen hørte McGurk og MacDonald et tredje fonem i stedet for det som ble snakket med leppene og det som ble sendt ut. Det var serendipitet som ville at disse to forskerne skulle oppdage denne særegne hørsels illusjonen.

• Relatert artikkel: "Nevropsykologi: hva er det og hva er dets studieobjekt?"

Dens betydning i studiet av menneskelig tale

Oppdagelsen av denne effekten vurderes et bevis på at de visuelle og auditive systemene har utviklet seg sammen for blant annet å muliggjøre bedre talebehandling. Vårt visuelle system hjelper oss med å skille mellom lyder som er vanskelige å skille, en fordel døve har når de leser lepper.

Å kunne se hvordan samtalepartneren beveger leppene hans, øker tilliten til meldingen som oppfattes gjennom hørselssystemet. Det vil si at hvis to uavhengige systemer peker på den samme løsningen, i dette tilfellet den samme meldingen, blir den meldingen klarert mer enn om vi bare mottar den gjennom en kanal.

Det er verdt å nevne det McGurk -effekten oppstår ikke automatisk. For at det skal skje, er det nødvendig at vi tar hensyn til samtalepartneren vår, og når distraherende stimuli blir inkorporert, både visuelt og auditivt, dempes denne illusjonen.

Faktisk beviser dette at effekten ikke skyldes dårlig mottak av visuell eller auditiv informasjon, men en feil i integreringen av disse to sansemodellene.

Et annet faktum som gir ideen om at det visuelle systemet støtter det auditive, er at når vi ser en person som snakker til oss, men vi ikke kan høre hva de sier i det hele tatt, ikke bare vår visuelle cortex er aktivert, men også den auditive, selv om vi ikke hører på noe.

• Du kan være interessert i: "Optisk nerve: deler, forløp og relaterte sykdommer"

McGurk -effekten og dysfunksjoner i hjernen

Det har man sett hjerneskader og nedsatt leseferdighet, i tillegg til å manifestere psykiske lidelser, påvirker det sannsynligheten for at McGurk -effekten oppstår.

Personer som har hatt en kallosotomi viser McGurk -effekten langsommere. Det ser ut til at barn med spesifikk språkforstyrrelse de presenterer McGurk -effekten på en svakere måte sammenlignet med de barna som ikke har språklige forstyrrelser eller lese- og skrivevansker.

Lateralitet påvirker også, ser at høyrehendte mennesker er mer sannsynlig å oppleve denne effekten.

• Relatert artikkel: "Hjernehalvdeler: myter og realiteter"

McGurk -effekten på forskjellige språk

Uansett hvilket språk som snakkes, er talerne til en viss grad avhengige av visuell informasjon under taleoppfatning. Likevel, Intensiteten til McGurk -effekten har vist seg å variere fra språk til språkDet er sett at på språk som spansk, tyrkisk, italiensk, nederlandsk, engelsk og tysk, opplever deres høyttalere denne effekten sterkere enn kinesisk og japansk.

At høyttalere i asiatiske språk viser McGurk -effekten sjeldnere, kan skyldes kulturell praksis med å unngå øyekontakt. I tillegg til dette er spesielt kinesisk og japansk to språk med svært stavelsesspråklige språklige strukturer, vanligvis konsonant + vokaltype og konsonant + vokal + konsonant, noe som gjør dem spesielt flinke til å oppdage stavelser uavhengig av hvordan leppene beveger seg. samtalepartner.