Beyin Sinyallerini Anında Konuşmaya Çeviren Teknoloji

BEĞENDİM

ABONE OL

News

0

UC Berkeley ve UC San Francisco’dan araştırmacılar, ağır felç geçiren bireyler için neredeyse doğal konuşmayı geri kazandıran bir sistem geliştirerek beyin-bilgisayar arayüzü (BCI) teknolojisinde çığır açtılar. Bu yenilikçi yöntem, konuşma nöroprotezlerindeki temel bir sorunu çözmeye odaklanıyor: Konuşma teşebbüsleri ile kanıların sese dönüştürülmesi arasındaki gecikmenin ortadan kaldırılması.

Nature Neuroscience mecmuasında yayınlanan bu teknoloji, beyin sinyallerini neredeyse anında konuşulan sözlere çevirmek için yapay zeka (Aİ) kullanıyor. Gerçek zamanlı olarak duyulabilir konuşmaya aktarılan beyin aktiviteleri, konuşmayı daha doğal ve akıcı hale getirerek duraklama olmadan daima bir ifade akışı sağlıyor. Bu öncü çalışma, Ulusal Sağlık Enstitüleri (NIH) bünyesindeki Ulusal Sağırlık ve Diğer İletişim Bozuklukları Enstitüsü (NIDCD) tarafından destekleniyor.

Alexa ve Siri gibi cihazlarda kullanılan algoritmalara benzer bir yapıya sahip olan bu sistem, sinyalleri çözerek konuşma oluşturan bir akış sunuyor. Çeşitli aygıtlarla uyumlu olan teknoloji, hem invaziv olmayan sensörlerle yüz kası aktivitesini ölçebiliyor hem de beynin yüzeyine veya içine yerleştirilen elektrotlarla daha karmaşık sistemleri destekleyebiliyor. Doktora öğrencisi ve çalışmanın ortak yazarı Kaylo Littlejohn’a göre algoritma, güvenilir sinyallere erişim sağlandığında farklı beyin izleme düzeneklerine kolayca uyum sağlayabiliyor.

Nasıl çalışıyor?

Bu nöroprotez, beynin motor korteksinde konuşmayı kontrol eden sinirsel aktiviteleri algılayarak sözlere dönüştürüyor. Bu süreç, birey bir düşünce oluşturduğunda ve ses kaslarını hareket ettirmeye hazırlandığında devreye giriyor. Sistemin eğitimi için araştırmacılar, iştirakçinin sessizce cümleler söylemeye çalıştığı anlarda beyin aktivitelerini kaydetti. Yapay zeka modelleri, eksik ses ayrıntılarını doldurarak konuşma çıktısını oluşturdu. Ayrıca ekip, iştirakçinin yaralanmadan önceki sesini referans alarak çıktının tanıdık ve kişisel olmasını sağladı. Önceki teknolojiler, tam cümlelerin çözümlenmesinde 8 saniyelik bir gecikmeye sahipken, bu yeni yöntem 1 saniyeden kısa sürede duyulabilir konuşma oluşturabiliyor. Bu hız ve doğruluk, sistemin gerçek zamanlı konuşma üretiminde üstün bir performans sergilediğini kanıtlıyor.

Araştırmacılar, sistemi test etmek için NATO fonetik alfabesindeki (“Alfa”, “Bravo” gibi) nadir sözleri sentezlediler ve bu sözler, eğitim verilerinin bir parçası olmadığı halde başarılı sonuçlar elde edildi. Bu durum, teknolojinin daha geniş bir kelime dağarcığında kullanılabileceğini gösteriyor.

Gelecek vizyonu

Araştırma ekibi, gelecekte konuşmanın duygusal tonunu ve ifade gücünü artırmayı hedefliyor. Çıkışı daha gerçekçi hale getirmek için perde, ses seviyesi ve duygusal değişiklikleri yansıtacak şekilde sistemi geliştirmeyi amaçlıyorlar. Bu teknoloji, daha fazla uygunlaştırma ile konuşma yetisini kaybetmiş bireyler için iletişim seçeneklerini önemli ölçüde genişletebilir ve hayat kalitesini artırabilir.

Diğer Teknoloji Haberleri İçin Tıklayın / Bursa Haber – Bursa Gündem – Bursa Gündem Haber – Bursa Haberleri – Bursa Son Dakika 

Bizi İnstagram’da Takip Edebilirsiniz / @BursaGündemHaber

Bizi X’de Takip Edebilirsiniz / @BursaGündemHbr

Bizi Facebook’da Takip Edebilirsiniz / @BursaGündemHaber

Bizi Youtube’da Takip Edebilirsiniz / @BursaGündemHaber

Bizi Linkedin’de Takip Edebilirsiniz / @BursaGündemHaber