Google DeepMind, işaret dili yapay zekasını kullanıcılarla buluşturuyor

Yapay zeka, sesli dilleri işleme konusunda son yıllarda büyük ilerlemeler kaydetse de, dünya genelindeki 70 milyondan fazla işitme engelli bireyin kullandığı 200'den fazla işaret dili bu gelişmelerden yeterince faydalanamadı. Şimdiye kadar laboratuvar ortamında kalan işaret dili yapay zekası, Google DeepMind'ın geliştirdiği yeni bir modelle nihayet son kullanıcılara ulaşıyor.

Google DeepMind, 'SL2T' adını verdiği çok dilli işaret dilinden metne çeviri modelini tanıttı. Bu model, başlangıçta Amerikan İşaret Dili (ASL) için Gboard ve Live Transcribe uygulamalarına entegre edilerek Pixel 11 kullanıcılarının hizmetine sunuldu. İşitme engelli kullanıcılar, bu özellik sayesinde telefonlarına yazmak yerine işaret diliyle komut verebilecek, mesaj yazabilecek veya Gemini'ye sorular sorabilecekler. Test kullanıcılarına göre, ASL ile işaret etmek, İngilizce yazmaktan daha hızlı, doğal ve keyifli bir deneyim sunuyor.

İşaret dillerinin karmaşık yapısı ve beden hareketleriyle anlam ifade etmesi, bu alandaki yapay zeka çalışmalarını zorlu kılıyordu. SL2T, işaretçinin vücudundaki kilit noktaları izleyerek bu hareketleri metne dönüştürüyor. Model, 50'den fazla işaret dilinde 100.000 saatin üzerinde veriyle eğitildi ve bu sayede tek dilli modellere göre daha iyi performans gösteriyor. Kullanıcı gizliliğini korumak amacıyla, kamera görüntüsü yerine sadece geometrik koordinatlar sunucuya gönderiliyor.

Google DeepMind, bu projeyi işitme engelli topluluklarla birlikte geliştirmeye büyük önem verdi. İşitme Engelliler Yapay Zeka Danışma Komitesi (AISLAC) kurularak, teknolojinin geliştirme süreçlerine doğrudan toplulukların katılımı sağlandı. SL2T, akademik ve endüstriyel alandaki onlarca yıllık araştırmanın bir ürünü olsa da, Google'ın vizyonu bu teknolojiyi daha fazla işaret diline yaymak ve dijital erişimde tam eşitliği sağlamak.