EchoSpeech: Ağız ve Dudak Hareketlerini Okuyan Gözlük

Cornell Üniversitesi’ndeki araştırmacılar, EchoSpeech adlı akıllı gözlükle ağız ve dudak hareketlerini algılayarak sesli komutları gerçekleştirebilmeyi mümkün kıldı. Bu inovasyon, ses telleleri veya sessiz konuşma gerektiren ortamlarda iletişimi kolaylaştırırken, batarya ömrünü de artırıyor.

Buse Görmüş

A⁺

A^-

Cornell Üniversitesi’ndeki araştırmacılar, akustik algılama ve yapay zeka teknolojilerini bir araya getirerek geliştirdikleri EchoSpeech adlı akıllı gözlükle ağız ve dudak hareketlerini okuyabiliyor ve kullanıcıların sesli komutlarını gerçekleştirebilmesine olanak sağlıyor. Bu yenilikçi teknoloji, sadece birkaç dakikalık kullanıcı eğitimi verisiyle çalışabilen bir derin öğrenme algoritması kullanıyor.

EchoSpeech, yüzün önüne yerleştirilen ve kalem silgisinden daha küçük olan çift mikrofon ve hoparlörlerle donatılmış bir sonar sistemidir. Ses dalgalarını gönderip alan bu sistem, ağız ve dudak hareketlerini algılayarak sesli komutları sürekli olarak tanıyabiliyor ve akıllı telefon veya diğer cihazlarda çeşitli işlemleri gerçekleştirebiliyor. Araştırmacılar, EchoSpeech’in yaklaşık %95 doğrulukla komutları gerçek zamanlı olarak tanıyabildiğini belirtiyor.

Bu yeni teknoloji, çeşitli kullanım alanlarına sahip olabilir. Ses telleleri veya ses çıkaramayan bireyler için, sessiz konuşma teknolojisi sayesinde ağız ve dudak hareketleriyle sesli komutları kullanarak işlemlerini gerçekleştirebilirler. Ayrıca, kütüphane gibi sessiz olması gereken ortamlarda veya başkalarıyla iletişim kurmanın uygun olmadığı durumlarda, akıllı telefon aracılığıyla iletişim kurmak için kullanılabilir.

EchoSpeech, aynı zamanda çizim programlarıyla kullanılabilecek bir kalemle eşleştirilebilir. Bu sayede, klavye ve fareye ihtiyaç duymadan sessizce çizim yapma imkanı sağlar. Giyilebilir video kameralara olan ihtiyacı ortadan kaldıran akustik algılama teknolojisi, ses verilerinin işlenmesi için daha az bant genişliği gerektirir ve verilerin buluta yüklenmesi yerine yerel olarak akıllı telefonda işlenmesini sağlayarak gizliliğe önem verir.

Ayrıca, EchoSpeech’in batarya ömrünü de artırdığı belirtiliyor. Kameralara göre daha düşük güç tüketimi gerektiren akustik algılama teknolojisi sayesinde, gözlüklerin batarya ömrü 30 dakikadan 10 saate kadar çıkabiliyor.