Bandora McGurk: çima çavên te dikarin bandorê li tiştên ku hûn dibihîzin?

Dema ku tu pêre xirab bi dublaj filmên biyanî ev e, pir bi hêsanî dibînin ku dengên bi ku ji devê wan ji aktorên durist ma bi tevgerên lip xwe bikirina ne.

Bi gotineke din, heta dema ku çav û guhê xwe bi di heman demê de di dema fîlm alikarî bike, mejiyê me dike, divê karekî pir baş pêkanîna, bala hevcotî tevgerên lip û dengan.

bandora McGurk çi ye

Lê di mejî de jî dikarin nexape, bê. Di xwe bi xapandineke balkêş tê zanîn ku bandora McGurk, çavdêriya tevgerên lip mirovan dikarin di mêjiyê me bixapîne, da ku guhdariya dengê xelet.

bandora McGurk diqewime dema, a şerê di navbera axaftina dîtbarî de hene, ku ev e, ku tevgera ji dev û lêvên yekî, û axaftina bihîst temsîlkirin digre, ew kesê ku dibihîze. Û ew dikare ji bo ku têgihiştina peyameke bi temamî cuda bibe.

A xebata bikaranîna komputerê model

Di lêkolîneke nû, neuroscientists ji "Baylor" College of Medicine li Houston hewl da ku pêşniyar daxuyaniyekî jimaran ji sedemên bandora McGurk. Ew li gor encamên di 16 Sibatê de li kovara PLoS Computational Biyolojî weşandin pêşvebirin a model dibe ku karibin bi awakî rast pêşbînîkirin, dema ku bandora McGurk divê an divê li mirov pêk ne bû.

Tesîra xwenîşandaneke McGurk bikaranîn, di xebatê de, beşdaran hat xwestin ku dev ji çavên te girtî dema ku guhdariya a video ew kesê ku dide, çêkirina wî dengê "ba-ba-ba". Piştre, beşdar hat xwestin ku tu çavên wan vekî û binêrin li devê kesekî li video, lê tu deng. efektên dîtbarî tevlêbûnê nerî mîna ko ji zilam re got: "ha-ha-ha." Li dawiyê qonaxa ji ezmûna video heman dişibî bû, lê vê carê deng li ser hat kirin û ji partiya wî teklîf binêre. Sensitive ji bo gelê bandora McGurk re ragehandin, ku cara sisiyan ji wan deng "da-da-da," ku ew bi tu îşaretek tuwanayî an dîtbarî de, tê dîtin ku berê qebûl nakin, bihîst.

Ev dibe ji ber ku di mejî de hewl dide ku biryar çi be, di nerîna wî, dengê xwe nêzî tiştên ku ew bi çavan dibîne. Dema ku beşdar kenalên çavên wî dîsa, û zanyar dengê video dişibî, ew dîsa bihîstibû, wek dengê original "ba-ba-ba".

Tesîra yekem di ezmûna di 1976 de ji aliyê psîkologê Harry Mc gurk û John MacDonald kirin, qal kirin. Wî da xuyakirin, ku agahî û dîtbarî de ne, ji aliyê tevgerên ji devê, dikarin bandorê bikin û hedî di rê de mirovekî difikire ku ew dibihîze.

îloziyona dîsa

Baylor "" bandora McGurk - lêkolînê co-author John Magnotti, xwendekarê doktorayê di beşê neurosurgery di got: - e bi hêz e, bi xapandineke pir-hesteyî ". - The mejî kesanên axaftina dengî û dîtbarî û şêweyên wan ji bo afirandina tiştekî nû ".

, Got: Magnotti Dema ku gelê têkiliyê rû bi rû ne, di mejî de ku di çalakiyên kompleks (dergistî), wek ku ew hewl dide ku bi biryarê çawa bi hev re motion lip bi dengên axaftina ku bihîstin bi.

Di vê xebatê de, lêkolîneran hewl da ku fêm bike ka çima mêjî baştir karibin hinek syllables bi şiroveyên bi deng e, ku kardike bihîstin e, lê yên din ne.

encamê Marcolini

Ji bo fêmkirina vê, ew li ser fikra xwe ya model, tê zanîn ku di encamê de Marcolini, an pêvajoya ku mejiyê mirovan biryar dide gelo axaftina dengî û dîtbarî dengan ji aliyê heman çavkanî çêkirin wergirtine. , Got: Magnotti din lêkolînerên a model pêş ku alîkarîya pêşbînîkirin, dema ku dikarin tesîreke McGurk biqewime, lê vê xebatê nû ya pêşî di nava têkiliya sedem-bandor in û hesaba ka wan e. Faktoring di analîzên Marcolini li Dibe ku ji bo şaşitî û modela nû li gorî yên berê, ku her weha ji bo xêzkirina bi xapandina bûn baştirkirina.

Ji bo piştraskirina ji bo şaşitî û pêşbîniyên modela xwe, ku lêkolînerên 60 beşdarên leşker û ji wan re got, da ku guhdariya çend axaftina dengî û dîtbarî de ji axaftina yek. Hingê, beşdaran xwestin ku biryarê bi çi cûreyê dengê wan bihîst :. "Ba", "da" û "ga"

encamên xwe nîşan da ku modela pêş hevkêş nikare pêşbînî bike, gava ku piraniya beşdaran di ezmûna wê bandora McGurk biceribîne. Lê belê, weke ku di hesabekî ji wan tê hêvîkirin, ku ew kesên ku bi hesan bi vê parvekirin Magnotti bûn ne hate binavkirin.

Balkêş e, gava ku ji ceribandinê heman bi xwendekaran li Çîn, bi Dewletên Yekbûyî pêk hat, ew hatiye eşkerekirin, ku bandora McGurk kar zimanên din.

sepanê bikêr yên modelên komputerê tê bikaranîn

Magnotti got ku, li gorî wî, modela dibe pêş ji bo vê xebatê dikare bi bikaranîna pratîk be. Ji bo nimûne, ev model dikarin bibin ji bo şîrketên ku komputerên ku alîkariya nasandin, yên mîna Google Home an Amazon Echo ava kêrhatî.

Eger ev teknolojiya kamerayan in, lê ew kesên ku di tevgera ji lêvên integrasyonê, ew dibêjin ku, ji bo baştirkirina ji bo şaşitî û sîstemên naskirina axaftina xwe.

Ev model jî dibe ku zarok bi çîpên cochlear alîkarî, ji bo başkirina rewşa têgihiştina mekanîzma ji aliyê lêkolînerên weke dîtbarî de ew tesîrê li çi yek dibihîze, got: Magnotti.