Hva er McGurk-effekten?

McGurk-effekten er et prinsipp som er involvert i forståelsen av menneskelig tale. Essensen av effekten er at visuelle signaler spiller en viktig rolle i lytterens forståelse av det talte ordet. Mennesker er avhengige av munn og ansiktsform, så vel som å høre for å forstå en talers mening; i mangel av denne informasjonen, er miscommunication mer sannsynlig. Effekten ble først dokumentert av forskerne Harry McGurk og John MacDonald i 1976. Den kalles noen ganger McGurk-MacDonald-effekten.

McGurk-effekten var tydelig for noen mennesker lenge før den faktisk ble navngitt. Døve og tunghørte har kommunisert med leppelesning i århundrer. En erfaren leppeleser henter det meste av en høyttalers mening ved å se på bevegelser i munnen og i ansiktet. Logopeder og forskere som studerer dette fenomenet innså snart at det gjaldt også personer med normal hørsel. Det vil si at alle mennesker ubevisst øver på en form for leppelesning i løpet av hverdagens samtale.

McGurk-effekten observeres lett. I en normal samtale ser lytteren på ansikts høyttaleren. Hvis lytteren ser bort, krever det større konsentrasjon å følge foredragsholderens ord, og noen setninger kan være nødvendig å gjenta. Når talerens ansikt er synlig, vil lytteren avhenge av ansikts- og munnbevegelser, samt konteksten og intensjonen til høyttaleren for å forstå talen fullt ut. Dette konseptet, universelt for alle talte språk, er godt kjent for verdens døve samfunn og spiller også en rolle i tegnspråk.

Forskere kan demonstrere McGurk-effekten grundigere med talesimulatorer. Disse programmene projiserer et bilde av et menneskelig ansikt som er koordinert med forhåndsprogrammerte talesetninger. De kan også programmeres, i motsetning til menneskelige høyttalere, for å ta den visuelle formen til en annen lyd enn den som snakkes. Når dette skjer, vil sannsynligvis lytterne oppfatte en tredje lyd helt. Dette er blitt observert selv når lytterne vet hva simulatoren gjør, noe som antyder at McGurk-effekten er forankret dypt i den menneskelige bevisstheten.

McGurk-effekten har vært gjenstand for studier av dataspesialister som jobber med programvare for stemmegjenkjenning. Det ser ut til at slike programmer må ta McGurk-effekten i betraktning for å forstå de enorme nyansene i menneskelig tale. Programmer i utvikling vil bruke et lite kamera for å observere en persons ansiktsbevegelser når han eller hun utfører en kommando. Datamaskinen vil deretter integrere denne informasjonen med den innspilte lyden for en mer nøyaktig forståelse av kommandoen som snakkes.