McGurk etkisi

McGurk etkisi, işitme ve görme duyuları arasındaki etkileşimin konuşma algısı üzerindeki etkisini gösteren algısal bir olgudur. Buna göre, bir sesin işitsel bileşeni ile başka bir sesin görsel bileşeninin eşleşmesi, farklı üçüncü bir sesin algılanmasına neden olur. Konuşan kişiden gelen görsel bilgi (dudak hareketleri), sesin duyuluş biçimini etkiler. Bu durum, dublaj yapılmış filmlere alışkın insanlar üzerinde çok etkili değildir. Çünkü dublaj oyuncuların dudak hareketlerini, yani görsel bilgiyi, önemsiz sayarak izleyicinin işitsel bilgiye odaklanmasını sağlar.Boersma, Paul (2011). "A constraint-based explanation of the McGurk effect" (PDF). Retrieved19 Ekim 2013. Eğer kişi düşük ses kaliteli işitsel bir bilgiyle, yüksek görüntü kaliteli görsel bir bilgiye aynı anda maruz kalırsa McGurk etkisi yaşamaya daha yatkındır. Ayrıca görsel ve işitsel bilgiyi sentezleme kabiliyeti de kişilerin McGurk etkisi yaşayıp yaşamayacağı konusunda belirleyicidir. Duyusal sentez beceresi yüksek olan kişilerde bu etkinin görülme ihtimali oldukça yüksektir. Bunların dışında insanlar beyin hasarı ve birtakım rahatsızlıkları da içine alan birçok faktöre bağlı olarak bu etkiyi farklı şekillerde tecrübe ederler. == Arka plan == McGurk etkisinden ilk kez 1976 yılında Herry McGurk ve John MacDonald tarafından yazılan "Hearing Lips and Seeing Voices" (Dudakları Duymak ve Sesleri Görmek) adlı makalede bahsedilmiştir. Bu etki McGurk ve asistanı MacDonald, çocukların farklı gelişim evrelerinde dili nasıl algıladıklarına dair bir çalışma yaparken, bir videonun içinde konuşulandan farklı bir fonemle dublajlanması ile şans eseri keşfedilmiştir. Video geri sarıldığında, her iki araştırmacı da ağızdan çıkan veya dublajlanandansa üçüncü bir farklı fonem duydular."Haskins Laboratories"> Görsel ve işitsel bilgilerden farklı olarak algılanan bu üçüncü ses, ara ses olarak tanımlanır. Örneğin, konuşmacının görsel olarak yani dudak hareketleriyle ‘ga-ga’ hecelerini söylediği ama hoparlörden ‘ba-ba’ sesinin geldiği bir video izlendiğinde deneğin algıladığı ses ‘da-da’ olur. McGurk ve MacDonald bunun ‘b’ ve ‘g’ seslerinin ortak, işitsel ve görsel özelliklerinden kaynaklandığına inanmıştır. ‘ba’ işitseli ile ‘ga’ görselinin füzyonu sonucunda oluşan ‘da’ sesi ve ‘ga’ işitseli ile ‘ba’ görselinin kombinasyonu sonucunda oluşan ‘bga’ sesi birbiri ile alakasız görsel-işitsel uyaranlara yanıt olarak gözlemlenen iki çeşit yanılsamadır. Bu durum, beynin gelen bilgiler hakkında en iyi tahminle bir bilinçlilik durumu sağlama çabası olarak açıklanır.O’Shea, M. (2005). The Brain: A Very Short Introduction. Oxford University Press Gözden ve kulaktan gelen bilgilerin birbiri ile çelişmesi durumunda, görsel bilgiler beyin üzerinde daha büyük bir etkiye sahiptir ve bu etki sonucunda füzyon ve kombinasyon yanıtları oluşturulur. McGurk etkisi şu şekilde özetlenebilir: Bakarsan ‘da’, bakmazsan ‘ba’ olur. Görme, insanlar için temel (birincil) bir duyu iken, konuşma algısı birden fazla duyudan gelen, özellikle duyma ve görme duyularından gelen, bilgileri içeren çok yönlü bir algılamadır. McGurk etkisi fonetik işlem sırasında ortaya çıkar çünkü işitsel ve görsel bilginin birleşmesi, konuşmayı algılama sürecinin başında gerçekleşir. McGurk etkisi bir kişinin algısı üzerinde küçük bir etkiye sahip gibi görünen fakat oldukça güçlü bir etkidir. Bu durum bir kez fark edildikten sonra ortadan kalkan bazı optik yanılsamalardan farklıdır. Üzerinde yirmi yılı aşkın süredir çalışma yapan insanlar dahi bu etkinin gerçekleştiğinin farkında olduğunu bile bile McGurk etkisini tecrübe edebilirler.Rosenblum, L. D. (2010). See what I'm saying: The extraordinary powers of our five senses. New York, NY: W. W. Norton & Company Inc. Yalnızca konuşma-okuma durumundan, söylenenlerin çoğunu tanımlayabilen insanlar haricinde, çoğu insan sadece görsel sinyallerden gelen konuşmayı ayırt etmede oldukça sınırlı bir kapasiteye sahiptir. Gürültülü bir ortamda, görsel konuşmanın işitsel konuşmanın anlaşılabilirliğini arttırma gibi bir kabiliyeti vardır. Görsel ve işitsel bilgi uyumsuz bir şekilde eşleştirildiğinde, görülen konuşma iyi duyulabilir seslerin algılanmasını dahi değiştirebilir. Normalde konuşma algısı işitsel bir süreç gibi düşünülür fakat bilgi kullanımımız anlık, otomatik ve büyük ölçüde bilinçsizdir. Dolasıyla doğru olarak kabul edilen şeylerin aksine konuşma sadece bizim duyduğumuz bir şey değildir. Konuşma bütün seslerin beraber çalışmasıyla algılanır (görme, dokunma ve yüz hareketini dinleme). Beyin algıladığının farklı duyusal katkılarının genellikle farkında değildir. Dolasıyla beynin konuşmayı tanımlaması gerektiğinde, gelen bilgiyi duyduğunu mu yoksa gördüğünü mü ayırt edemez. McGurk etkisi tanık ifadeleri ile ilgili olarak da incelenmiştir. Wareham ve Wright’ın 2005'teki çalışmasına göre, tutarsız görsel bilgi, konuşulan telaffuzun algısını değiştirebilir; bu da aslında McGurk etkisinin günlük hayata birçok tesirinin var olduğunu gösterir. Hecelerle sınırı değildir; sözcüklerin tamamında da gerçekleşebilir ve insanlar farkında olmadan, günlük etkileşimlerini etkileyebilir. Bu alandaki araştırmalar sadece teorik sorular hakkında bilgi sunmaz. Ayrıca konuşma parçalrın görsel ve sessel bütünleşmesiyle alakalı sorunları olan kişiler için tanı ve tedavi çıkarımları da sağlar. == İç etkenler == === Hasar === Her iki beyin yarım küresi de McGurk etkisi ile ilgilidir. Görsel veya işitsel olarak algılanan konuşma bilgilerini bütünleştirmek için ikisi birlikte çalışır. Yüzleri, sağ ve kelimeleri, sol yarım küre sayesinde algılayan sağlak bireylerin McGurk tepkisi vermesi daha olasıdır. Kallozotomi yapılmış, yani iki yarım küreyi birbirine bağlayan korpus kallozumu kesilmiş insanlarda da McGurk etkisi görülmektedir.1\. Baynes, K.; Fummell, M.; Fowler, C. (1994). "Hemispheric contributions to the integration of visual and auditory information in speech perception". Perception and Psychophysics 55 (6): 633-641. doi:10.3758/bf03211678. Fakat bu ihtimal oldukça düşüktür. Beyninin sol yarım küresinde doku bozulması yaşayan insanlarda görsel özellikler, konuşma ve dil tedavisi için önemli bir rol oynamaktadır.1\. Schmid, G.; Thielmann, A.; Ziegler, W. (2009). "The influence of visual and auditory information on the perception of speech and non-speech oral movements in patients with left hemisphere lesions". Clinical Linguistics and Phonetics 23 (3): 208-221. doi:10.1080/02699200802399913. Bu kişiler, normal kimselere oranla daha fazla McGurk etkisi göstermektedir. Görsel bilgiler, bu bireylerin konuşma algısını önemli ölçüde etkilemektedir. Eğer sol yarım küredeki hasar, görsellerin konuşma algısını etkilediği bölümdeyse, bu kişiler McGurk illüzyonuna karşı olan hassasiyetlerini kaybederler. Sağ yarım küresi zarar görmüş insanlar, her ne kadar McGurk etkisini göstermek için hala bilgileri bütünleştirebiliyor olsalar da, bu kişilerin hem yalnız görsel hem de görsel ve işitsel bütünleştirme görevlerinde bir bozulma gerçekleşir. İşitsel mesaj içerik açısından noksan fakat iyi işitilebilir olduğunda, görsel uyarıcı yalnızca performansı güçlendirmek için kullanıldığı takdirde bütünleştirme görülür.1\. Nicholson, K.; Baum, S.; Cuddy, L.; Munhall, K. (2002). "A case of impaired auditory and visual speech prosody perception after right hemisphere damage".Neurocase 8: 314-322. doi:10.1093/neucas/8.4.314. Ayrıca, McGurk etkisi, beyninin sağ yarım küresi zarar görmüş insanlarda da normal gruplar kadar etkili değildir. === Hastalıklar === ==== Disleksi ==== Disleksik, yani okuma güçlüğü çeken bireyler kendileriyle aynı kronolojik yaştaki normal grup bireylere göre daha az McGurk etkisi gösterirler. Fakat genç bireylerle yaşlı bireyler grup olarak karşılaştırıldıklarında eş miktarda etki göstermişlerdir. Disleksik bireyler füzyon cevaplarda farklılık göstermezken özellikle kombinasyon cevaplarda farklılık sergilerle.Bastien-Toniazzo, M.; Stroumza, A.; Cavé, C. (2009). "Audio-visual perception and integration in developmental dyslexia: An exploratory study using the McGurk effect". Current Psychology Letters 25 (3): 2-14. McGurk etkisinin az olması, disleksisi olan bireylerin ünsüz harfleri üretme ve algılamada yaşadığı zorluklardan kaynaklanıyor olabilir. ==== Özel dil bozukluğu ==== Özel dil bozukluğu olan çocuklar normale göre belirgin bir şekilde daha az McGurk etkisi sergiler.Norrix, L.; Plante, E.; Vance, R.; Boliek, C. (2007). "Auditory-visual integration for speech by children with and without specific language impairment". Journal of Speech, Language, and Hearing Research 50: 1639-1651. doi:10.1044/1092-4388(2007/111). Bu çocuklar konuşma algısında daha az görsel bilgi kullanırlar veya mafsallı jestlere karşı daha az dikkate sahiptirler fakat yalnızca işitsel olan belirtilere karşı herhangi bir algılama bozuklukları yoktur. ==== Otistik spektrum bozukluğu ==== Otistik spektrum bozukluğu olan çocuklar diğerlerine göre belirgin bir şekilde daha az McGurk etkisi yaşarlar.1\. Mongillo, E.; Irwin, J.; Whalen, D.; Klaiman, C. (2008). "Audiovisual processing in children with and without autism spectrum disorders". Journal of Autism and Developmental Disorders 38: 1349-1358. doi:10.1007/s10803-007-0521-y. Eğer insan olmayan bir uyarıcıyla karşı karşıya kalırlarsa (örneğin zıplayan bir tenis topunun görüntüsü ile zıplayan bir plaj topunun sesi), bu durumda otistik spektrum bozukluğu olmayan çocuklarla benzer ölçüde McGurk etkisi sergilerler. Daha küçük yaşta olan otistik spektrum bozukluğu olan çocuklar McGurk etkisini daha çok yaşarlar ve bu etki yaşın ilerlemesiyle birlikte azalır.1\. Taylor, N.; Isaac, C.; Milne, E. (2010). "A comparison of the development of audiovisual integration in children with autism spectrum disorders and typically developing children". Journal of Autism and Developmental Disorders 40: 1403-1411. doi:10.1007/s10803-010-1000-4. Yani onlar büyüdükçe gösterdikleri McGurk etkisi otistik spektrum bozukluğu olmayan çocuklara daha da yaklaşır. Aynı zamanda otistik spektrum bozukluğu olan çocuklarda McGurk etkisinin daha az olmasının, konuşmanın görsel ve işitsel entegrasyonundaki problemlerden değil, görsel ve işitsel bileşenlerin her ikisini de tanımlamadaki bozukluktan kaynaklı olduğu fikri orataya komuştur.1\. Williams, J. H. G.; Massarob, D. W.; Peela, N. J.; Bosselerb, A.; Suddendorfc, T. (2004). "Visual-auditory integration during speech imitation in autism" . Research in Developmental Disabilities 25: 559-575. doi:10.1016/j.ridd.2004.01.008. ==== Dil öğrenme bozuklukları ==== Dil öğrenme yetersizliği olan yetişkinler, diğer yetişkinlere göre çok daha az McGurk etkisi gösterir. Bu kişiler görsel bilgiden diğer insanlar kadar etkilenmezler. Bu yüzden zayıf dil becerisi olan kişiler daha az McGurk etkisi göstermiş olacaktr. Bu popülasyonda etkinin düşük olmasının bir nedeni de, beynin ön-arka bölgelerindeki veya sağ-sol loblarındaki aktivitelerin uyuşmazlığı olabilir.1\. Norrix, L.; Plante, E.; Vance, R. (2006). "Auditory-visual speech integration by adults with and without language-learning disabilities". Journal of Communication Disorders 39: 22-36. doi:10.1016/j.jcomdis.2005.05.003. ==== Alzheimer ==== Alzheimer hastaları, diğer insanlara göre daha az McGurk etkisi gösterirler. Küçülmüş bir korpus kallozum, sık sık loblar arasında bir bağlantı kopukluğu gösterebilir. Alzheimer hastalarındaki görsel uyarıcının daha az etkilenmesi daha az McGurk etkisi göstermelerinin bir diğer sebebidir.1\. Delbeuck, X.; Collette, F.; Van der Linden, M. (2007). "Is Alzheimer's disease a disconnection syndrome? Evidence from a crossmodal audio-visual illusory experiment". Neuropsychologia 45: 3315-3323.doi:10.1016/j.neuropsychologia.2007.05.001. ==== Şizofreni ==== McGurk etkisi şizofren bireylerde normal bireylerde olduğu kadar belirgin değildir. Ayrıca yetişkinlerde de önemli ölçüde bir farklılık göstermez. Şizofreni görsel-işitsel bütünleştirmenin gelişimini yavaşlatır ve gelişimin en üst noktaya ulaşmasına izin vermez. Fakat herhangi bir alçalma gözlenmez. Konuşmaları algılarken, şizofrenlerin görsel ipuçlarından çok işitsel ipuçlarına güvenmeleri daha muhtemeldir.1\. Pearl, D.; Yodashkin-Porat, D.; Nachum, K.; Valevski, A.; Aizenberg, D.; Sigler, M.; Weizman, A.; Kikinzon, L. (2009). "Differences in audiovisual integration, as measured by McGurk phenomenon, among adult and adolescent patients with schizophrenia and age- matched healthy control groups". Comprehensive Psychiatry50: 186-192. doi:10.1016/j.comppsych.2008.06.004. ==== Söz yitimi ==== Söz yitimi hastalığı olan insanlar tüm koşullarda bozulmuş bir konuşma algısı gösterir (sadece görsel, sadece işitsel ve işitsel-görsel) ve dolayısıyla bu kişilerde küçük bir McGurk etkisi gözlemlenmiştir. Söz yitimi hastaları en çok sadece görsel uyarıcı durumunda zorlanır; bu durum onların konuşma algısında işitsel uyarıcıları daha çok kullandıklarını gösterir.1\. Youse, K.; Cienkowski, K.; Coelho, C. (2004). "Auditory-visual speech perception in an adult with aphasia". Brain Injury 18 (8): 825-834.doi:10.1080/02699000410001671784. == Dış etkenler == === Çapraz seslendirme === Sesli harf kategorisindeki uyuşmazlık füzyon yanıtları için McGurk etkisinin büyüklüğünü önemli ölçüde azaltmıştır.1\. Green, K. P.; Gerdeman, A. (1995). "Cross-modal discrepancies in coarticulation and the integration of speech information: The McGurk effect with mismatched vowels". Journal of Experimental Psychology: Human Perception and Performance 21 (6): 1409-1426. doi:10.1037/0096-1523.21.6.1409. /a/ harfi olarak işitilen sembollerin görsel olarak /i/ harfi gibi telaffuz edilmesinin bu durumun tam tersine göre daha uyumlu olduğu görülmüştür. Bu sonuç, /a/ sesinin geniş bir söyleyiş yelpazesine sahip olması ve bu yelpazenin /i/ sesi için daha sınırlı olmasından kaynaklanabilir, böylece katılımcıların uyarıcılar arasındaki uyuşmazlıkları tespit etmesi daha kolay hale gelir. /i/ harfinin içeriği en güçlü etkiyi sağlarken /a/ orta derecede bir etki sağlamış ve /u/ neredeyse hiçbir etkiye sahip olmamıştır.1\. Walker, S.; Bruce, V.; O'Malley, C. (1995). "Facial identity and facial speech processing: Familiar faces and voices in the McGurk effect". Perception & Psychophysics 57 (8): 1124-1133. doi:10.3758/bf03208369. === Ağız görünürlüğü === McGurk etkisi ağızın sağ tarafı görünür olduğunda daha güçlüdür. İnsanlar konuşmacının ağzının sağ tarafından sol tarafa ve tüm ağza kıyasla daha çok görsel bilgi alma eğilimindedirler.1\. Nicholls, M.; Searle, D.; Bradshaw, J. (2004). "Read my lips: Asymmetries in the visual expression and perception of speech revealed through the McGurk effect".Psychological Science 15 (2): 138-141. doi:10.1111/j.0963-7214.2004.01502011.x. Bu yukarıda yarım küre bölümünde ele alınan yarım küresel dikkat faktörleriyle ilişkilidir. === Görsel dikkat dağıtıcılar === Dinleyicinin baktığı görsel bir dikkat dağıtıcı mevcut olduğunda McGurk etkisi daha zayıftır.1\. Tiippana, K.; Andersen, T. S.; Sams, M. (2004). "Visual attention modulates audiovisual speech perception". European Journal of Cognitive Psychology 16 (3): 457-472. doi:10.1080/09541440340000268. Görsel dikkat işitsel-görsel konuşma algısını hafifleştirir. Dikkat dağılmasının başka bir şekli de konuşmacının hareketidir. Eğer konuşmacının yüzü/kafası hareketsizse güçlü bir McGurk etkisi ortaya çıkar.1\. Irwin, J. R.; Whalen, D. H.; Fowler, C. A. (2006). "A sex difference in visual influence on heard speech". Perception and Psychophysics 68 (4): 582-592.doi:10.3758/bf03208760. === Hece yapısı === McGurk etkisi konuşmanın olmadığı bir ortamda da olabilir.1\. Brancazio, L.; Best, C. T.; Fowler, C. A. (2006). "Visual influences on perception of speech and nonspeech vocal-tract events". Language and Speech 49(1): 21-53. doi:10.1177/00238309060490010301. Fonolojik anlam McGurk etkisinin ortaya çıkması için gerekli bir koşul değildir fakat o, etkinin gücünü arttırır. === Cinsiyet === Kadınlar erkeklerden daha güçlü bir McGurk etkisi gösterir. Kısa süreli görsel bir uyarıcıda, görselin işitsel konuşma üzerindeki etkisi kadınlarda erkeklerden önemli ölçüde daha fazladır ama tam bir uyarıcıda bu fark belirgin değildir. Cinsiyete ilişkin başka bir durum da uyarıcı olarak erkek yüzleri ve sesleri ile kadın yüzleri ve seslerinin karşılaştırılması meselesidir. Ancak bu iki durumda da McGurk etkisinin gücünde bir farklılık yoktur. Eğer bir erkek yüzüne bir kadın sesiyle dublaj yapılırsa veya tam tersi durumda, McGurk etkisinin gücünde yine de bir farklılık yoktur.1\. Green, K.; Kuhl, P.; Meltzoff, A.; Stevens, E. (1991). "Integrating speech information across talkers, gender, and sensory modality: Female faces and male voices in the McGurk effect". Perception and Psychophysics 50 (6): 524-536.doi:10.3758/bf03207536. Duyulan sesin görülen yüzden gelmediğini bilmek -cinsiyetler farklı olsa bile- McGurk etkisini ortadan kaldırmaz. === Aşinalık === Konuşmacıların yüzlerine aşina olanlar McGurk etkisine karşı konuşmacıların yüzlerine aşina olmayanlara göre daha az hassastır. Calvert, Gemma.; Spence, Charles; Stein, Barry E. (2004). The handbook of multisensory processes. Cambridge, Mass.: MIT Press. ISBN 978-0-262-03321-3. OCLC 54677752. Bunun yanı sıra ses aşinalığına ilişkin bir farklılık yoktur. === Beklenti === Anlamsal örtüşme McGurk yanılsaması üzerinde dikkate değer bir etkiye sahip olmuştur. Etki anlamsal olarak örtüşmeyen koşullara kıyasla anlamsal olarak örtüşen koşullarda daha sık deneyimlenir ve daha net olarak değerlendirilir. Bir kişi belli bir görsel veya işitsel görünümü ona zemin hazırlayan anlamsal bilgiyi baz alarak beklediğinde McGurk etkisi büyük ölçüde artmıştır.1\. Windmann, S (2004). "Effects of sentence context and expectation on the McGurk illusion". Journal of Memory and Language 50 (1): 212-230.doi:10.1016/j.jml.2003.10.001. === Öz etki === McGurk etkisi dinleyici ayrıca konuşmacı veya sesi üreten kişi olduğunda da gözlemlenebilir. Kendinize aynada bakarken ve görsel uyarıcıları, başka bir işitsel uyarıcıyı dinlerken telaffuz edince güçlü bir McGurk etkisi gözlenebilir. Dinleyicinin işitsel uyarıcıyı, başka bir kişi çelişen görsel el, kol hakareti yaparken yumuşak bir şekilde söylediği koşulda da McGurk etkisi güçsüz olmasına rağmen görülebilir.1\. Sams, M.; Mottonen, R.; Sihvonen, T. (2005). "Seeing and hearing others and oneself talk". Cognitive Brain Research 23 (1): 429-435.doi:10.1016/j.cogbrainres.2004.11.006. === Geçici eşzamanlılık === Geçici eşzamanlılık McGurk etkisinin mevcut olması için gerekli değildir. Katılımcılar işitsel uyarıcılar görsel uyarıcıları 180 milisaniye(McGurk etkisinin zayıflamaya başladığı nokta) geciktirdiğinde bile işitsel uyarıcılar tarafından güçlü bir şekilde etkilenmişlerdir.1\. Munhall, K.; Gribble, P.; Sacco, L.; Ward, M. (1996). "Temporal constraints on the McGurk effect". Perception and Psychophysics 58 (3): 351-362.doi:10.3758/bf03206811. İşitsel uyarıcılar görsel uyarıcılardan önce geldiğinde eşzamanlılığın olmayışı durumunda daha az dayanma payı vardı. McGurk etkisini büyük ölçüde güçsüzleştirmek için işitsel uyarıcıların görsel uyarıcılardan 60 milisaniye daha önce gelmesi veya görsel uyarıcıları 240 milisaniye geciktirmesi gerekmiştir. === Fiziksel faaliyet yanıltması === McGurk etkisine göre dikkat, dokunsal bir faaliyete bölündüğünde büyük ölçüde azalır.1\. Alsius, A.; Navarra, J.; Soto-Faraco, S. (2007). "Attention to touch weakens audiovisual speech integration". Experimental Brain Research 183 (1): 399-404.doi:10.1007/s00221-007-1110-1. Dokunma, görme ve işitme gibi duyusal bir algıdır. Dolayısıyla dokunmaya verilen dikkatin artması işitsel ve görsel duyulara olan dikkati azaltır. === Sabit bakış === Gözler konuşma algısındaki işitsel ve görsel bilgiyi birleştirmek için sabitlenmeye ihtiyaç duymazlar. Ayrıca McGurk etkisinde dinleyiciler, konuşmacının yüzünde odaklanma yerine göre bir farklılık gözlenmemektedir.1\. Paré, M.; Richler, C.; Hove, M.; Munhall, K. (2003). "Gaze behavior in audiovisual speech perception: The influence on ocular fixations on the McGurk effect". Perception and Psychophysics 65 (4): 533-567. doi:10.3758/bf03194582. Dinleyici konuşmacının yüzünden başka bir yere odaklandığında da bu etki ortaya çıkmaz. Bu etkinin anlamsız olması için, dinleyicilerin bakışı konuşmacının ağzından en az 60 derece sapmalıdır. == Diğer diller == Farklı dile sahip insanlar konuşma algısındaki görsel bilginin doğruluğuna inanırlar. Fakat McGurk etkisi dilden dile farklılık göstermektedir. Felemenkçe, İngilizce, İspanyolca, Almanca ve İtalyanca gibi dillerde McGurk etkisi daha güçlüyken; Japonca ve Çincede daha zayıf bir etkiye sahiptir.1\. Bavo, R.; Ciorba, A.; Prosser, S.; Martini, A. (2009). "The McGurk phenomenon in Italian listeners". Acta Otorhinolaryngologica Italica 29 (4): 203-208. McGurk etkisiyle ilgili araştırmalar daha çok İngilizce ve Japonca dilleri arasında yürütülmüştür. Buna göre McGurk etkisi Japon dinleyicilerde İngilizce dinleyicilere oranla daha azdır. .1\. Hisanaga, S., Sekiyama, K., Igasaki, T., Murayama, N. (2009). Audiovisual speech perception in Japanese and English: Inter-language differences examined by event-related potentials. Retrieved from http://www.isca-speech.org/archive_open/avsp09/papers/av09_038.pdf 1\. Wu, J. (2009). Speech perception and the McGurk effect: A cross cultural study using event-related potentials. Dissertation1\. Gelder, B., Bertelson, P., Vroomen, J., Chin Chen, H. (1995). Inter-language differences in the McGurk effect for Dutch and Cantonese listeners. Retrieved fromhttp://www.isca- speech.org/archive/eurospeech_1995/e95_1699.html Japonlarda göz kontağının kültürel olarak daha çok pratik edilmesi McGurk etkisi üzerinde bir etkiye sahip olabilir. Aynı zamanda Japoncanın dilsel ve hecesel yapısının da bir etkisi olabilir. Japonlar gibi aynı zamanda Çinli dinleyiciler de görsel ipuçlarına daha az duyarlıdır ve Çinli dinleyiciler İngiliz dinleyicilere göre daha düşük bir etkiye sahiptirler.1\. Sekiyama, K (1997). "Cultural and linguistic factors in audiovisual speech processing: The McGurk effect in Chinese subjects". Perception and Psychophysics 59 (1): 73-80. doi:10.3758/bf03206849. Çalışmalara göre Japon çocukların altı yaşından sonra görsel etkiye karşı gelişimlerinde herhangi bir artış gözlenmezken İngiliz çocuklarda bu artış gözlenir. Ayrıca, Japonlar İngiliz dinleyicilere göre görsel ve işitsel uyarıcılardaki uyuşmazlığı daha iyi ayırt edebilirler.1\. Sekiyama, K.; Burnham, D. (2008). "Impact of language on development of auditory-visual speech perception". Developmental Science 11 (2): 306-320.doi:10.1111/j.1467-7687.2008.00677.x. Bunun altındaki sebep Japoncada ünsüz harf kümesinin olmayışıdır. Konuşmanın anlaşılamayacak kadar gürültülü olduğu bir ortamda McGurk etkisi insanlara eşit bir şekilde uygulandığında, farklı dillere sahip olan insanlar görsel uyarıcılara başvururlar.1\. Sekiyama, K., Tohkura, Y. (1991). McGurk effect in non-English listeners: Few visual effects for Japanese subjects hearing Japanese syllables of high auditory intelligibility. Journal of Acoustical Society of America, 90 (4, Pt 1), 1797-1805 Bu durumda farklı dillerdeki konuşmayı algılayan kişilerde McGurk etkisinin görüldüğü ölçülmüştür. == Duyma bozuklukları == Deneyler duyma güçlüğü çeken bireylerde ve koklear implanta sahip olan kişilerde de yürütülmüştür. Bu bireyler konuşmadaki görsel bilgiyi işitsel bilgiye göre kullanmaya daha çok meyillidir. Normal duyuya sahip bireylere göre hece sayısı birden fazla olmadıkça bu etki bir farklılık göstermemektedir. McGurk etkisine baktığımızda, işitsel çift dudaksıl ünsüzler (b, m ve p gibi) görsel damaksıl ünsüzlere (k ve g gibi) dublaj edildiğinde koklear implant kullanıcıları ve normal duyuya sahip bireyler aynı cevabı ürettiler.1\. Rouger, J.; Fraysse, B.; Deguine, O.; Barone, P. (2008). "McGurk effects in cochlear-implanted deaf subjects". Brain Research 1188: 87-99.doi:10.1016/j.brainres.2007.10.049. Fakat işitsel dişsil ünsüzler (t, d, n ve l gibi) görsel çift dudaksıl ünsüzlere (b, m ve p gibi) dublaj edildiğinde cevaplar oldukça farklılık gösterdi. İşitme bozukluğu olan bireyler ve koklear implant kullanan bireylerde McGurk etkisi gözlemlense de bazı açılardan birbirinden farklılık gösterir. == Bebekler == Bebeklerin görsel-işitsel uyarıcılara olan dikkatini ölçerek, McGurk etkisiyle tutarlı olan tepkiler bulunabilir. 1\. Bristow, D.; Dehaene-Lambertz, G.; Mattout, J.; Soares, C.; Gliga, T.; Baillet, S.; Mangin, J. F. (2009). "Hearing faces: How the infant brain matches the face it sees with the speech it hears". Journal of Cognitive Neuroscience 21 (5): 905-921.doi:10.1162/jocn.2009.21076. Dakikalar önce doğmuş bebeklerden tutun da birkaç günlük bebeklere kadar, yetişkinlerin yüz ifadeleri bebekler tarafından taklit edilebilir. Doğumdan sonraki haftalarda bebekler dudak hareketlerini ve konuşmadaki sesleri ayırt edebilir. Bu noktada, işitsel ve görsel bütünleştirme olabilir fakat bu uzman bir seviyede değildir.1\. Woodhouse, L.; Hickson, L.; Dodd, B. (2009). "Review of visual speech perception by hearing and hearing-impaired people: Clinical implications".International Journal of Language & Communication Disorders 44 (3): 253-270.doi:10.1080/13682820802090281. McGurk etkisinin ilk belirtisi dört aylık bebeklerde gözlemlense de beş aylık bebeklerde bu belirtiler daha fazladır. 1\. Kushnerenko, E.; Teinonen, T.; Volein, A.; Csibra, G. (2008). "Electrophysiological evidence of illusory audiovisual speech percept in human infants". Proceedings of the National Academy of Sciences of the United States of America 105 (32): 11442-11445. doi:10.1073/pnas.0804275105. Uyarıcıya alışma sürecinin ardından uyarıcı değişimindeki (-ba sesi/-va görüntüsü ile -da sesi/-va görüntüsü) tepkiler McGurk etkisinin açık bir göstergesidir. McGurk etkisinin gücü çocukluktan yetişkinliğe doğru artış gösteren gelişimsel bir özelliktir.1\. Rosenblum, L. D.; Schmuckler, M. A.; Johnson, J. A. (1997). "The McGurk effect in infants". Perception & Psychophysics 59 (3): 347-357.doi:10.3758/bf03211902.1\. Burnham, D.; Dodd, B. (2004). "Auditory- Visual Speech Integration by Prelinguistic Infants: Perception of an Emergent Consonant in the McGurk Effect".Developmental Psychobiology 45 (4): 204-220. doi:10.1002/dev.20032. == Kaynakça == == Bibliyografya == * McGurk, H.; MacDonald, J. (1976). Hearing lips and seeing voices. Nature 264 (5588): 746-748. doi:10.1038/264746a0. PMID 1012311. * Wright, Daniel; Wareham, Gary (2005). "Mixing sound and vision: The interaction of auditory and visual information for earwitnesses of a crime scene". Legal and Criminological Psychology 10 (1): 103-108. doi:10.1348/135532504x15240. == Dış bağlantılar == * A constraint-based explanation of the McGurk effect a write up of the McGurk effect by Paul Boersma of University of Amsterdam. PDF available from academic webpage of author. *Try The McGurk Effect! - Horizon: Is Seeing Believing? - BBC Two *McGurk Effect (with explanation) Kategori:Algı