İşitsel-Görsel Entegrasyon: Konuşma Algısında Beynin Multisensör Yaklaşımı

“İnsan yalnızca kulağıyla mı duyar?”

Bu soru ilk bakışta oldukça basit görünse de son otuz yılda işitsel sinirbilim alanında yapılan çalışmalar bu soruya verilen cevabı önemli ölçüde değiştirmiştir. Uzun yıllar boyunca konuşma algısı büyük ölçüde işitsel sistemin bir çıktısı olarak değerlendirilmiş ve başarılı bir iletişimin temel belirleyicisinin işitsel sinyalin kalitesi olduğu kabul edilmiştir. Ancak günümüzde biliyoruz ki konuşmayı anlamak, yalnızca kulağın değil; görsel sistemin, dikkat mekanizmalarının, çalışma belleğinin ve multisensör beyin ağlarının birlikte çalışmasıyla mümkün olan karmaşık bir süreçtir.

Özellikle son yıllarda işitsel-görsel entegrasyon üzerine yapılan çalışmalar, konuşmacının dudak hareketleri, yüz ifadeleri ve artikülasyon hareketlerinden elde edilen görsel ipuçlarının konuşmanın anlaşılmasında önemli bir rol oynadığını ortaya koymuştur. İşitsel bilgi ile görsel bilginin milisaniyeler içerisinde bütünleştirilmesi yalnızca konuşmanın doğruluğunu artırmakla kalmamakta aynı zamanda dinleme eforunu azaltmakta, işitsel bilginin yetersiz kaldığı durumlarda konuşmanın daha doğru yorumlanmasına yardımcı olmakta ve iletişimin sürdürülebilirliğine katkı sağlamaktadır. Bu nedenle işitsel-görsel entegrasyon, günümüzde yalnızca deneysel psikolojinin değil; odyoloji, nörobilim ve konuşma algısı araştırmalarının da önemli çalışma alanlarından biri haline gelmiştir.

Klinik açıdan değerlendirildiğinde, bu alandaki bilgi birikimi odyoloji pratiği açısından önemli çıkarımlar sunmaktadır. İşitme kaybı olan bireylerde ve özellikle koklear implant kullanıcılarında konuşmayı anlamayı yalnızca odyogram sonuçlarıyla açıklamak artık yeterli değildir. Benzer işitsel performansa sahip iki bireyin günlük iletişim başarısının farklı olmasının nedenlerinden biri, multisensör bilgiyi kullanma becerilerindeki farklılık olabilir. Bu nedenle işitsel rehabilitasyon süreçlerinde multisensör işlemleme mekanizmalarının dikkate alınması giderek daha fazla önem kazanmaktadır.

Bu yazıda, işitsel-görsel entegrasyonun nörobiyolojik temelleri, konuşma algısındaki rolü ve odyoloji pratiğine olası yansımaları güncel literatür ışığında ele alınacaktır.

Beynimiz Konuşmayı Nasıl Birleştiriyor?

Günlük yaşamda çevremizi tek bir duyumuz aracılığıyla algıladığımızı düşünsek de gerçekte beynimiz sürekli olarak farklı duyusal kaynaklardan gelen bilgileri eş zamanlı biçimde işlemektedir. Karşıdan karşıya geçerken yaklaşan aracın sesini duymamız, hareketini görmemiz ve hızını tahmin etmemiz; bir kişinin yalnızca ses tonundan değil yüz ifadesinden de duygusunu anlayabilmemiz ya da kalabalık bir restoranda konuşmacının dudak hareketlerine yönelerek iletişimi sürdürebilmemiz bu sürecin doğal örnekleridir.

Bu mekanizma multisensör entegrasyon olarak tanımlanmaktadır. En basit ifadeyle multisensör entegrasyon, farklı duyusal sistemlerden gelen bilgilerin tek ve anlamlı bir algısal temsil oluşturacak şekilde birleştirilmesidir. Bu süreç sayesinde çevresel olaylar daha hızlı fark edilir, karar verme doğruluğu artar ve davranışsal yanıtlar daha etkin hale gelir. Özellikle belirsiz ya da gürültülü koşullarda bir duyudan elde edilen eksik bilgi, diğer duyusal modalitelerden gelen ipuçlarıyla tamamlanabilir.

Konuşma algısı ise multisensör entegrasyonun en başarılı örneklerinden biridir. Konuşma sırasında konuşmacının dudak hareketleri, yüz ifadeleri ve diğer görsel konuşma ipuçları işitsel sinyale sürekli olarak eşlik eder. Beyin bu iki bilgi kaynağını birbirinden bağımsız değerlendirmez, aksine bunları bütünleştirerek tek bir konuşma algısı oluşturur. Bu nedenle konuşmayı anlamak, düşündüğümüzden çok daha fazla multisensör bir süreçtir.

İşitsel-Görsel Entegrasyon Neden Odyologları İlgilendiriyor?

Yakın zamana kadar konuşmayı anlama performansı büyük ölçüde işitsel eşikler, konuşmayı ayırt etme skorları ve işitsel işlemleme becerileri üzerinden yorumlanıyordu. Ancak günümüzde aynı odyograma sahip iki bireyin günlük iletişim performansının belirgin biçimde farklı olabildiği bilinmektedir. Bu durum, konuşma algısını belirleyen değişkenlerin yalnızca işitsel sistemle sınırlı olmadığını göstermektedir.

Özellikle koklear implant kullanıcıları bu durumun en iyi örneklerinden biridir. Elektriksel uyarım, doğal işitmeye göre daha sınırlı spektral ve zamansal bilgi sunmaktadır. Buna rağmen birçok kullanıcı günlük yaşamda beklenenden daha başarılı iletişim kurabilmektedir. Bunun önemli nedenlerinden biri, görsel konuşma ipuçlarından etkin biçimde yararlanabilmeleridir. Dudak okuma ve görsel konuşma ipuçlarının etkin kullanımı, eksik işitsel bilginin telafi edilmesine katkı sağlayarak konuşmanın anlaşılmasını kolaylaştırmaktadır.

Klinik açıdan bakıldığında, bu bilgiler yalnızca multisensör işlemlemenin nasıl gerçekleştiğini açıklamakla kalmamakta, aynı zamanda odyolojik değerlendirme ve rehabilitasyon süreçlerine yeni bir bakış açısı kazandırmaktadır. Konuşmayı anlamadaki güçlüğü yalnızca işitsel eşikler veya konuşmayı ayırt etme skorları ile açıklamak her zaman mümkün değildir. Görsel konuşma ipuçlarından yararlanma becerisi de bireyin gerçek yaşam iletişim performansını etkileyen önemli değişkenlerden biridir. Bu nedenle işitsel-görsel entegrasyonun değerlendirilmesi, özellikle işitme kaybı olan bireylerde konuşma algısını daha kapsamlı biçimde anlamaya katkı sağlayabilir.

Beyindeki Ağlar: Entegrasyon Tek Bir Merkezde Gerçekleşmiyor

İşitsel-görsel entegrasyonun nörobiyolojisi uzun yıllardır araştırılmaktadır. Güncel nörogörüntüleme çalışmaları, bu sürecin tek bir anatomik merkezde gerçekleşmediğini; kortikal ve subkortikal birçok yapının eş zamanlı etkileşimiyle yürütüldüğünü göstermektedir.

Başlangıçta işitsel ve görsel bilgilerin yalnızca yüksek düzey ilişkilendirme alanlarında bütünleştirildiği düşünülürken, günümüzde bu entegrasyonun duyusal korteksler, talamus ve süperior kolikulus gibi subkortikal yapıları da içeren çoklu nöral ağlar aracılığıyla gerçekleştiği kabul edilmektedir. Bununla birlikte, süperior temporal korteks işitsel-görsel entegrasyonda en tutarlı biçimde aktive olan bölgelerden biri olarak öne çıkmaktadır. Özellikle süperior temporal sulkus (STS), konuşmaya ilişkin işitsel ve görsel bilgilerin bütünleştirilmesinde kritik rol oynayan yapılar arasında kabul edilmektedir.

Bu bulgular, işitsel-görsel entegrasyonun tek bir anatomik merkezde gerçekleşen sabit bir süreç olmadığını; uyaranın özellikleri, dikkat ve görev gereksinimlerine göre farklı beyin ağlarının katkı sağladığı dinamik bir işlemleme mekanizması olduğunu göstermektedir.

McGurk Etkisi: Beynin En İlginç Yanılsamalarından Biri

İşitsel-görsel entegrasyonun en bilinen örneklerinden biri McGurk etkisidir. İşitsel olarak /ba/ hecesi sunulurken, eş zamanlı olarak /ga/ artikülasyonunun izletildiği durumda birçok kişi gerçekte sunulmayan /da/ hecesini algılar.

Bu durum, beynin işitsel ve görsel bilgileri ayrı ayrı değerlendirmediğini, yeni ve bütünleşik bir algısal temsil oluşturduğunu göstermektedir. Günümüzde McGurk paradigması yalnızca deneysel psikoloji araştırmalarında değil, koklear implant kullanıcıları, yaşlı bireyler ve çeşitli nörolojik gruplarda multisensör entegrasyonun değerlendirilmesinde de yaygın olarak kullanılmaktadır.

İşitsel-Görsel Entegrasyona Yönelik Güncel Bir Araştırma

Ülkemizde de işitsel-görsel entegrasyona yönelik araştırmalar giderek artmaktadır. Doktora çalışmam kapsamında yürüttüğümüz ve yakın zamanda yayımlanan araştırmada, yetişkin normal işiten bireyler ile prelingual ve postlingual koklear implant kullanıcılarında işitsel-görsel entegrasyon McGurk paradigması kullanılarak davranışsal olarak değerlendirildi. Bunun yanı sıra, işitsel-görsel entegrasyon performansının işitsel kortikal işlemleme ile ilişkisini inceleyebilmek amacıyla Akustik Değişim Kompleksi (ADK) yanıtları da kaydedildi. Böylece davranışsal değerlendirmeler, objektif elektrofizyolojik ölçümlerle desteklenerek iki yöntem arasındaki olası ilişki araştırıldı.

Çalışmanın bulguları, normal işiten bireylerin işitsel ve işitsel-görsel konuşma algısı görevlerinde koklear implant kullanıcılarına göre daha yüksek performans gösterdiğini ortaya koydu. Ayrıca prelingual koklear implant kullanıcılarında ADK latansları ile işitsel konuşma algısı performansı arasında anlamlı ilişkiler saptandı. Buna karşın ADK yanıtlarının McGurk performansıyla doğrudan ilişkili olmadığı görüldü. Bu sonuçlar, ADK’nin multisensör entegrasyonun doğrudan bir göstergesinden ziyade, işitsel ayırt etme kapasitesini yansıtan tamamlayıcı bir elektrofizyolojik ölçüm olabileceğini düşündürmektedir.

Sonuç

İşitsel-görsel entegrasyon üzerine yürütülen çalışmalar, konuşma algısının yalnızca periferik işitsel sistemin bir ürünü olmadığını; görsel konuşma ipuçları, bilişsel süreçler ve multisensör beyin ağlarının ortak çalışmasıyla şekillenen dinamik bir süreç olduğunu göstermektedir. Bu bilgi birikimi, işitme kaybı olan bireylerin değerlendirilmesinden koklear implant rehabilitasyonuna, yaşlı bireylerin iletişim stratejilerinden yeni objektif değerlendirme yöntemlerinin geliştirilmesine kadar birçok klinik alana önemli katkılar sağlamaktadır.

Odyoloji pratiğinde konuşmayı anlamayı yalnızca odyogram veya konuşmayı ayırt etme skorları üzerinden değerlendirmek her zaman yeterli olmayabilir. Özellikle gürültülü dinleme ortamlarında bireyin görsel konuşma ipuçlarından nasıl yararlandığını anlamak, iletişim güçlüklerinin daha doğru yorumlanmasına katkı sağlayabilir. İşitsel-görsel entegrasyona ilişkin güncel çalışmaların artmasıyla birlikte, bu bilgi birikiminin odyolojik değerlendirme ve rehabilitasyon yaklaşımlarına daha fazla yansıması beklenmektedir.

Yazar

Dr. Ahsen Kartal Özcan

Odyolog · Odyoloji PhD

Odyoloji lisans ve yüksek lisans eğitimini İstanbul Aydın Üniversitesi’nde tamamladı; doktorasını Marmara Üniversitesi Odyoloji ve Konuşma Bozuklukları programında, koklear implant kullanıcılarında bellek işlevi, dinleme eforu ve multisensör entegrasyonu konu alan teziyle 2026’da aldı. 2020’den bu yana Sağlık Bilimleri Üniversitesi Hamidiye Sağlık Bilimleri Fakültesi Odyoloji Bölümü’nde araştırma görevlisi olarak görev yapıyor. Çalışmaları işitsel-görsel entegrasyon, koklear implant, işitsel elektrofizyoloji ve vestibüler değerlendirme üzerine odaklanıyor; makaleleri International Journal of Audiology, Ear and Hearing, American Journal of Audiology ve European Archives of Oto-Rhino-Laryngology gibi dergilerde yayımlandı.