McGurk -vaikutus: kun kuulemme silmillämme

Visuaalinen ja kuuloinen tieto ovat avainasemassa puheen ymmärtämisessä. Kun puhumme jonkun kanssa, emme vain kuule, mitä he sanovat, vaan katsomme myös, miten he sanovat sen liikuttamalla huuliaan.

Ihmisen puheen kyky perustuu visuaalisen ja kuuloisen tiedon integrointiin, mistä on osoituksena se, että voimme kokea outon illuusorisen ilmiön: McGurk -efekti.

Voidaan sanoa, että tämä erikoinen ilmiö tapahtuu, kun kuulemme silmillämme, jolloin kuulemamme muuttuu sen mukaan, mitä näemme. Selvitetään, mistä tämä mielenkiintoinen visuaalinen-kuulovaikutus koostuu.

• Aiheeseen liittyvä artikkeli: "17 uteliaisuutta ihmisen käsityksestä"

Mikä on McGurk -efekti?

Meillä on taipumus uskoa, että aistimme toimivat itsenäisesti: kun kuulemme, kuulemme vain; ja kun näemme, näemme vain. Tämän uskomuksen perusteella olisi järkevää ajatella, että visuaalinen ärsyke ei kykene vääristämään tapaamme havaita ääntä. Todellisuus on kuitenkin se, että se voi, koska havaintokokemuksemme ovat a monimutkainen tiedon sekoittamisprosessi, sama seos, joka saa aikaan erikoisen ilmiön: vaikutuksen McGurk.

Varmasti useamman kerran olet keskustellut erittäin meluisassa ympäristössä. Se olisi saattanut olla yökerhossa, baarin terassilla vilkkaalla kadulla tai lukion luokkahuoneessa. Kun taustamelu on korkea, meidän on vaikea ymmärtää, mitä henkilö kertoo meille, että meillä on juuri edessä ja ymmärtääksemme jotain käytämme vanhaa ja vaistomaista temppua tarkkailla hänen suutaan Puhuessaan.

Näissä tapauksissa visuaalista ja auditiivista tietoa ei analysoida erikseen, vaan ne yhdistetään. Ihmisen aivoissa on alue, jota kutsutaan ylemmäksi ajalliseksi sulkoksi, joka on erikoistunut molempien tietojen yhdistämiseen, Annetuissa esimerkeissä se olisi vastuussa keskustelukumppanimme lausumien foneemien yhdistämisestä niiden huulet.

Koska tämä kyky yhdistää multimodaalisia tietoja, ylin ajallinen sulcus on neurologinen vaihe, jossa kuvitteellinen McGurk -ilmiö esiintyy, mikä olisi vain seurausta virheestä viestin dekoodauksessa, kun kaksi erilaista aistimoodaa ovat vuorovaikutuksessa, jolloin näkemämme ei ole sama kuin kuulemamme.

Jos teemme nopean haun YouTubesta, voimme löytää useamman kuin yhden videon, joissa tämä ilmiö esitetään käytännöllisellä tavalla. Tämä linkki ohjaa meidät hyvään esimerkkiin tästä ilmiöstä:

Tässä erityistapauksessa videossa oleva henkilö sanoo / ba / koko ajan, mutta riippuen siitä, kuinka hän liikuttaa huuliaan, kuulet joko / ba / tai / pa /.

Tämä vaikutus voi ilmetä myös muilla tavuyhdistelmillä. Se voidaan saavuttaa esimerkiksi yhdistelmällä / ka / (visuaalinen) ja / pa / (kuulo), mikä saa aikaan käsityksen / ta /. Toinen esimerkki olisi nähdä joku tekevän huuliliikkeitä, jotka vastaavat tavua / ga /, mutta kun tavua / ba / puhutaan, se nähdään muodossa / da /.

Tapa, jolla kuulemme saman äänen, vaihtelee rajusti riippuen siitä, katsomme, miten puhuva henkilö liikuttaa huuliaan. Tämä ei vaikuta pelkästään yksinkertaisten äänisarjojen, kuten tavujen, havaitsemiseen, vaan on myös todistettu, että Se toimii täydellisin lausein, vaikka olet todennäköisesti todistanut sen joissakin mainitsemissamme tilanteissa ennen.

Yksi ensimmäisistä havainnoista, jotka liittyivät McGurk -tehosteeseen ja aistimoodaalien väliseen vuorovaikutukseen, on saaminen mahdollisuus nähdä keskustelukumppanimme huulet liikkuvan huomattavasti parantaa kuulemamme äänenvoimakkuutta.

On nähty, että se antaa meille tunteen kuulla foneemeja jopa 15 desibeliä voimakkaammin, kun emitteri on näkökentässämme. Tämä tapahtuu silloinkin, kun akustiikkaolosuhteet eivät ole haitalliset, kuten huoneessa, jossa ei ole ääntä, tai hiljaisessa paikassa.

• Ehkä toistat: "Ihmisen aivojen osat (ja toiminnot)"

Sen löytämisen historia

Tämä ilmiö kuvattiin ensimmäisen kerran vuonna 1976 artikkelissa, jonka kirjoitti brittiläinen kognitiivinen psykologi Harry McGurk yhdessä kollegansa John MacDonaldin kanssa nimeltään "Huulien kuuleminen ja äänten näkeminen". Hänen alkuperäisen tutkimuksensa oli tarkoitus tutkia lasten ryhmän jäljitelmän malleja puhekyvyn kehittäminen, ja kokeeseen kuului heille useita videoita ihmisten lausumisesta eri tavuja.

Toistovirhe kuitenkin tapahtui. Videon asentamisesta vastaava teknikko teki virheen ja aiheutti kuvan ja äänen synkronoinnin, jolloin nauhoituksen nähdään sanovan jotain, joka ei vastaa sitä ääntä Hän kuuli.

Videon toiston aikana McGurk ja MacDonald kuulivat kolmannen foneemin sen sijaan, että puhuttiin huulilla ja lähetettiin. Serendipity halusi näiden kahden tutkijan löytävän tämän erikoisen kuuloharhan.

• Aiheeseen liittyvä artikkeli: "Neuropsykologia: mikä se on ja mikä on sen tutkimuksen kohde?"

Sen merkitys ihmisen puheen tutkimisessa

Tämän vaikutuksen löytämistä harkitaan todiste siitä, että näkö- ja kuulojärjestelmät ovat kehittyneet yhdessä mahdollistamaan muun muassa paremman puheenkäsittelyn. Visuaalinen järjestelmämme auttaa meitä erottamaan vaikeasti erotettavat äänet, mikä on kuurojen etu, kun he lukevat huuliaan.

Mahdollisuus nähdä, miten keskustelukumppanimme liikuttaa huuliaan, lisää luottamusta kuulojärjestelmän kautta havaittuun viestiin. Toisin sanoen, jos kaksi itsenäistä järjestelmää viittaavat samaan ratkaisuun, tässä tapauksessa samaan viestiin, luotamme viestiin enemmän kuin jos saamme sen vain yhden kanavan kautta.

On syytä mainita se McGurk -efekti ei tapahdu automaattisesti. Jotta se tapahtuisi, on välttämätöntä, että kiinnitämme huomiota keskustelukumppaniimme, ja kun häiritseviä ärsykkeitä, sekä visuaalisia että kuuloisia, lisätään tämä illuusio.

Itse asiassa tämä osoittaa, että vaikutus ei johdu visuaalisen tai kuuloisen tiedon huonosta vastaanotosta, vaan virheestä näiden kahden aistimoodin integroinnissa.

Toinen tosiasia, joka antaa voimaa ajatukselle, että visuaalinen järjestelmä tukee kuuloa, on se, että kun näemme henkilön, joka puhuu meille, mutta emme voi kuulla mitä he sanovat, ei vain näkökorttimme, vaan myös kuulo, vaikka emme kuuntele mitään.

• Saatat olla kiinnostunut: "Näköhermo: osat, kurssi ja siihen liittyvät sairaudet"

McGurk -vaikutus ja aivojen toimintahäiriöt

Se on nähty aivovammat ja heikentynyt lukutaitopsyykkisten häiriöiden ilmenemisen lisäksi se vaikuttaa McGurk -ilmiön esiintymisen todennäköisyyteen.

Ihmiset, joille on tehty kallosotomia, osoittavat McGurk -vaikutuksen hitaammin. Näyttää siltä, ​​että lapset, joilla on erityinen kielihäiriö osoittavat McGurk -vaikutuksen heikommin verrattuna niihin lapsiin, joilla ei ole kielenoppimisvaikeuksia tai lukutaito -ongelmia.

Sivuttaisuus vaikuttaa myös, koska oikeakätiset ihmiset kokevat tämän vaikutuksen todennäköisemmin.

• Aiheeseen liittyvä artikkeli: "Aivopuoliskot: myyttejä ja todellisuutta"

McGurk -vaikutus eri kielillä

Riippumatta siitä, mitä kieltä puhutaan, sen puhujat riippuvat jossain määrin visuaalisesta tiedosta puheen havaitsemisen aikana. Tästä huolimatta, McGurk -vaikutuksen voimakkuuden on havaittu vaihtelevan kielestä toiseenOn havaittu, että espanjan, turkin, italian, hollannin, englannin ja saksan kaltaisilla kielillä heidän puhujansa kokevat tämän vaikutuksen voimakkaammin kuin kiinalaiset ja japanilaiset.

Se, että Aasian kielen puhujat osoittavat McGurk -vaikutuksen harvemmin, voi johtua kulttuurikäytännöstä välttää silmäkontakti. Tämän lisäksi erityisesti kiina ja japani ovat kaksi kieltä, joilla on hyvin tavullinen kielellinen rakenne, yleensä konsonantti + vokaalityyppi ja konsonantti + vokaali + konsonantti, mikä tekee heistä erityisen taitavia havaitsemaan tavuja riippumatta siitä, kuinka heidän huulensa liikkuvat. keskustelukumppani.