McGurk -effekten: när vi hör med ögonen

Visuell och hörselinformation är nyckeln till att förstå tal. När vi pratar med någon hör vi inte bara vad de säger, utan vi tittar också på hur de säger det genom att röra på läpparna.

Människans talförmåga bygger på integrationen av visuell och hörselinformation, något som bevisas av det faktum att vi kan uppleva ett märkligt illusoriskt fenomen: McGurk -effekten.

Man kan säga att detta märkliga fenomen uppstår när vi hör med ögonen, vilket får det vi hör att förändras beroende på vad vi ser. Låt oss ta reda på vad denna intressanta visuell-hörseleffekt består av.

• Relaterad artikel: "17 nyfikenheter om mänsklig uppfattning"

Vad är McGurk -effekten?

Vi tenderar att tro att våra sinnen fungerar oberoende: när vi hör hör vi bara; och när vi ser, ser vi bara. Baserat på denna tro är det rimligt att tro att en visuell stimulans inte kan förvränga vårt sätt att uppfatta ljud. Men verkligheten är att det kan, eftersom våra perceptuella erfarenheter är en produkt av en komplex process för informationsblandning, samma blandning som ger upphov till ett märkligt fenomen: effekten McGurk.

Säkert vid mer än ett tillfälle har du haft ett samtal i en extremt bullrig miljö. Det kan ha varit på en nattklubb, på terrassen i en bar på en upptagen gata eller i ett gymnasium. När det är högt bakgrundsljud är det svårt för oss att förstå vad personen berättar för oss att vi just har framåt och för att förstå något använder vi det gamla och instinktiva tricket att observera hans mun Medan du talar.

I dessa fall analyseras inte visuell och hörselinformation separat, utan kombineras snarare. Den mänskliga hjärnan har en region som kallas superior temporal sulcus, som är specialiserad på att kombinera båda typerna av information, I de exempel vi har gett skulle det vara ansvaret för att kombinera de fonem som vår samtalspartner uttalar med rörelsen av deras mun.

På grund av denna förmåga att kombinera multimodal information, den överlägsna temporala sulcus är det neurologiska stadiet där den illusoriska McGurk -effekten inträffar, vilket inte skulle vara mer än resultatet av ett fel i avkodningen av meddelandet när två olika sensoriska metoder interagerar, vilket gör att det vi ser inte sammanfaller med det vi hör.

Om vi ​​gör en snabbsökning på YouTube kan vi hitta mer än en video där detta fenomen avslöjas på ett praktiskt sätt. Denna länk leder oss till ett bra exempel på detta fenomen:

I detta specifika fall, personen i videon säger / ba / hela tiden, men beroende på hur han rör läpparna kan du höra antingen / ba / eller / pa /.

Denna effekt kan också uppstå med andra kombinationer av stavelser. Till exempel kan det uppnås med kombinationen / ka / (visual) och / pa / (auditiv), vilket ger upphov till uppfattningen av / ta /. Ett annat exempel skulle vara att se någon göra läpprörelser som motsvarar stavelsen / ga / men medan stavelsen / ba / talas kommer det att uppfattas som / da /.

Hur vi hör samma ljud varierar drastiskt beroende på om vi ser på hur personen som talar till oss rör sina läppar. Detta påverkar inte bara uppfattningen av enkla uppsättningar ljud som stavelser, men det har också bevisats Det fungerar med hela meningar, även om du förmodligen själv har bevittnat det i några av de situationer som vi har nämnt innan.

Ett av de första fynden relaterade till McGurk -effekten och interaktionen mellan sensoriska metoder är att ha möjligheten att se vår samtalspartners läppar röra sig avsevärt förbättrar volymen på det vi hör.

Det har sett att det ger oss känslan av att höra fonem upp till 15 decibel högre när vi har sändaren inom vårt synfält. Detta sker även när de akustiska förhållandena inte är ogynnsamma, till exempel att vara i ett rum utan ljud eller på en lugn plats.

• Du kanske upprepar: "Delar av den mänskliga hjärnan (och funktioner)"

Historien om dess upptäckt

Detta fenomen beskrevs första gången 1976 i en artikel av den brittiska kognitiva psykologen Harry McGurk tillsammans med sin kollega John MacDonald med titeln "Höra läppar och se röster". Hans ursprungliga studie skulle bestå av att undersöka mönstren för imitation av en grupp barn som var utveckla förmågan att tala och experimentet innebar att presentera dem med flera videor av människor som uttalar olika stavelser.

Ett uppspelningsfel inträffade. Tekniker som ansvarar för montering av videon gjorde ett misstag och orsakade att bilden och ljudet inte synkroniserades, att få en inspelning av en person att ses säga något som inte motsvarade ljudet som Han hörde.

När videon spelades upp hörde McGurk och MacDonald ett tredje fonem istället för det som talades med läpparna och det som sändes ut. Det var serendipitet som ville att dessa två forskare skulle upptäcka denna märkliga hörsel illusion.

• Relaterad artikel: "Neuropsykologi: vad är det och vad är dess föremål för studier?"

Dess betydelse i studiet av mänskligt tal

Upptäckten av denna effekt övervägs ett bevis på att de visuella och auditiva systemen har utvecklats tillsammans för att bland annat möjliggöra bättre talbehandling. Vårt visuella system hjälper oss att särskilja ljud som är svåra att skilja, en fördel som döva gör när de läser läppar.

Att kunna se hur vår samtalspartner rör sina läppar ökar förtroendet för budskapet som uppfattas genom hörselsystemet. Det vill säga, om två oberoende system pekar på samma lösning, i det här fallet samma budskap, litar vi mer på det budskapet än om vi bara tar emot det via en kanal.

Det är värt att nämna det McGurk -effekten sker inte automatiskt. För att det ska hända är det nödvändigt att vi uppmärksammar vår samtalspartner och, när distraherande stimuli införlivas, både visuellt och auditivt, dämpas denna illusion.

Faktum är att detta bevisar att effekten inte beror på dålig mottagning av visuell eller hörselinformation, utan på ett fel i integrationen av dessa två sensoriska metoder.

Ett annat faktum som tvingar tanken att det visuella systemet stöder hörseln är att när vi ser en person som talar till oss men vi inte kan höra vad de säger alls, inte bara vår visuella cortex är aktiverad, utan också den auditiva, även om vi inte lyssnar på någonting.

• Du kanske är intresserad av: "Optisk nerv: delar, kurser och relaterade sjukdomar"

McGurk -effekten och hjärndysfunktioner

Det har man sett hjärnskador och nedsatt läsfärdighet, förutom att manifestera psykiska störningar, påverkar det sannolikheten för McGurk -effekten.

Personer som har fått en kallosotomi visar McGurk -effekten långsammare. Det verkar som att barn med specifik språkstörning visa McGurk -effekten på ett svagare sätt jämfört med de barn som inte har språkförvärvssvårigheter eller svårigheter med läskunnighet.

Lateraliteten påverkar också, eftersom högerhänta människor är mer benägna att uppleva denna effekt.

• Relaterad artikel: "Cerebrala halvklot: myter och verkligheter"

McGurk -effekten på olika språk

Oavsett vilket språk som talas, beror dess högtalare till viss del på visuell information under taluppfattningen. Ändå, Man har sett att McGurk -effektens intensitet varierar från språk till språkDet ses att på språk som spanska, turkiska, italienska, nederländska, engelska och tyska upplever deras talare denna effekt starkare än kinesiska och japanska.

Att talare i asiatiska språk visar McGurk -effekten mindre ofta kan bero på den kulturella praxisen att undvika ögonkontakt. Till detta kommer framför allt kinesiska och japanska två språk med mycket syllabiska språkliga strukturer, vanligtvis konsonant + vokaltyp och konsonant + vokal + konsonant, vilket gör dem särskilt skickliga på att upptäcka stavelser oavsett hur deras läppar rör sig. interlokutör.