McGurk効果は何ですか？

McGurk効果は、人間のスピーチの理解に関与する原則です。効果の本質は、視覚的な手がかりが、話された言葉をリスナーの理解において重要な役割を果たすことです。人々は口と顔の形に依存し、スピーカーの意味を理解するために聞くことができます。この情報がない場合、誤解が可能性が高くなります。この効果は、1976年に研究者のハリー・マクガークとジョン・マクドナルドによって最初に文書化されました。それは時々マクガーク・マクドナルド効果と呼ばれます。聴覚障害者で頑固な人々は、何世紀にもわたって唇の読書によってコミュニケーションをとってきました。経験豊富なリップリーダーは、口と顔の動きを見ることで、スピーカーの意味のほとんどを拾います。この現象を研究している音声療法士と研究者は、すぐにそれが正常な聴覚を持つ個人にも適用されることに気付きました。つまり、すべての人々は無意識のうちに毎日の間に唇の読み物の形を実践しています会話。

McGurk効果は簡単に観察できます。通常の会話では、リスナーはスピーカーの顔を見ます。リスナーが目をそらした場合、スピーカーの言葉に従うには集中力が高まり、いくつかの文章を繰り返す必要がある場合があります。スピーカーの顔が見える場合、リスナーは、スピーチを完全に理解するために、スピーカーのコンテキストと意図だけでなく、顔と口の動き、および意図に依存します。この概念は、すべての話された言語に普遍的であり、世界の聴覚障害者コミュニティによく知られており、手話でも役割を果たしています。

研究者は、コンピューターの音声シミュレータにより、McGurk効果をより徹底的に示すことができます。これらのプログラムは、事前にプログラムされた話し言葉と調整された人間の顔のイメージを予測しています。また、人間のスピーカーとは異なり、話されているものとは異なる音の視覚的な形をとるようにプログラムすることもできます。このhaPPENS、リスナーは3番目のサウンドを完全に知覚する可能性があります。これは、リスナーがシミュレーターが何をしているかを知っている場合でも観察されており、マクガーク効果が人間の意識の奥深くに根付いていることを示唆しています。

McGurk効果は、音声認識ソフトウェアに取り組んでいるコンピュータースペシャリストによる研究の対象となっています。人間のスピーチの膨大なニュアンスを完全に理解するためには、そのようなプログラムはMcGurk効果を考慮しなければならないようです。開発中のプログラムは、小さなカメラを使用して、人がコマンドを発するときに人の顔の動きを観察します。その後、コンピューターはこの情報を記録されたサウンドと統合して、話されているコマンドをより正確に理解します。