McGurk-effekten: Å høre ord med øynene dine?

I en høy lydsammenheng lar McGurk-effekten oss gjette hva en annen person sier, basert på det vi ser.

Skrevet og verifisert av psykologen Maria Fatima Seppi Vinuales.

Siste oppdatering: 23 mars, 2023

Å se hud og kjenne mykheten i kroppen. Ved å se en tallerken med mat og fremkalle den smaken, føler vi at vi faktisk smaker på maten. På samme måte forteller McGurk-effekten oss at det faktisk er mulig å lytte med øynene. La oss se hva det handler om.

Hva er McGurk-effekten?

McGurk-effekten er integrasjonen mellom auditive og visuelle stimuli i muntlig språk. For å forstå hva det er, la oss tenke på et eksempel. Vi står foran en person som gjentar stavelsen «pa» om og om igjen. Dette er lyden som når hjernen vår, ledsaget av en leppebevegelse.

Personen fortsetter deretter å gjenta stavelsen “pa”, men det hjernen vår tolker er at det han eller hun nå sier er “fa”. Hva er som har skjedd?

McGurk-effekten skjedde! Det personen nå ser er en annen leppebevegelse som tilsvarer den andre stavelsen, selv om personen fortsatt sier den første stavelsen. Hvis vi lukker øynene, vil vi høre det riktige.

McGurk-effekten indikerer at det vi ser er fremtredende, gitt hva vi ser.

Det vi faktisk gjør i eksemplet er lesing av leppene. Den endelige lyden ville bli gitt eller veiledet av en blanding av leppeavlesning og tidligere erfaring.

Hva er den oppkalt etter?

McGurk-effekten er kalt det fordi den først ble foreslått i 1976 av psykologene Harry McGurk og John MacDonald, da de utførte flere eksperimenter. I dem studerte de imitasjonsmønstrene som barn fulgte når de lærte taleevne.

I så fall var konklusjonen de kom fram til at det til tider var visuell informasjon som seiret i tolkningen, og ignorerte informasjonen som kom gjennom hørselbanene. Med andre ord, det vi ser påvirker det vi hører.

På sin side rapporterer mange forskere at hjernen, under visse omstendigheter, opererer i henhold til et prinsipp om årsakssammenheng. Det vil si at den tolker kontekstuelle signaler (den vet eller assosierer at en viss leppebevegelse tilsvarer en viss lyd), beregner sannsynlighetene for at visse meldinger presenteres sammen.

Kjennetegn på McGurk-effekten

Blant kjennetegnene til McGurk-effekten er forventningen, som gir oss en viss tankeøkonomi. Det vil si at hjernen gjør tilgjengelig sine tidligere visuelle erfaringer for å forstå hva det snakkes om og hva som blir hørt.

Leppelesing kan noen ganger være nyttig, spesielt i bråkete omgivelser. Det kan imidlertid også føre til forvirring, ettersom hjernen ville lure oss til å tro at vi hører noe basert på leppebevegelsen alene.

Mange av disse perseptuelle fenomenene eller bedragene forekommer også i optiske illusjoner.

Et annet kjent faktum er at McGurk-effekten, med hensyn til audiovisuell persepsjon, avtar i løpet av utviklingen. For eksempel, siden den delen av hjernen som omhandler auditiv informasjon utvikler seg tidligere enn den som omhandler visuell persepsjon, stoler barn mer på lyder enn voksne.

Derfor er barn mindre utsatt for forvirringen av den aktuelle effekten. Det vil si at i løpet av veksten varierer måten sensorisk informasjon behandles på.

Noen av de påvirkende faktorene er også visuelle distraksjoner, fortrolighet og stavelsesstruktur. Noen sykdommer kan også spille en negativ rolle, slik som afasi, Alzheimers og spesifikke språklidelser.

Til slutt er det et annet merkelig aspekt ved McGurk-effekten i språk. Forekomsten varierer i henhold til språket som analyseres.

Det visuelle og det auditive arbeider sammen

Gjennom studiet av hjernen er det mulig å vite at de visuelle og auditive systemene utviklet seg hånd i hånd for å lette utviklingen av tale. Utover dets betydning i seg selv, er det visuelle systemet en viktig alliert og formidler av det auditive systemet, som samarbeider om forståelsen av meldinger.

Det hjelper for eksempel med å gjenkjenne lyder som kan være vanskelig å skille. Det lar oss også fullføre informasjonen som mottas, og gir større sikkerhet og tillit i forhold til det vi hører.

De auditive og visuelle systemene jobber sammen som et team. Den ene styrker og støtter handlingen til den andre.

Viktigheten av å vite hvordan hjernen fungerer er nøkkelen til å forbedre bruken av den, og for å kunne kommunisere og tilpasse seg visse kontekster, og for å takle fenomener som påvirker persepsjonen, som aldring.