Microsoft, canlı yayınlardaki konuşmaları gerçek zamanlı olarak değiştirerek konuşmacıların sözlerini ağız hareketlerini düzenleyebilen yapay zekâ sistemi için patent başvurusu yaptı. Sistem, yapay zekâ ajanları aracılığıyla belirli kelimeleri kaldırmayı veya yenileriyle değiştirmeyi, ardından ses görüntüyü düzenlenen konuşmaya uyumlu hâle getirmeyi hedefliyor. Teknoloji; canlı çeviri, dolgu sözcüklerinin temizlenmesi rahatsız edici ifadelerin filtrelenmesi gibi kullanım alanları sunsa kişiselleştirilmiş içerik manipülasyonu dezenformasyon risklerini gündeme getiriyor.

Microsoft’un Yapay Zekâ Patenti Canlı Konuşmaları Nasıl Değiştirecek?

Microsoft’un patent başvurusu, canlı etkinliklerin video veya artırılmış gerçeklik sunumlarını neredeyse gerçek zamanlı olarak yapay zekâyla düzenlemeyi amaçlayan sistemi tanımlıyor. Patent takip platformu Patentlyze tarafından gündeme getirilen tasarıma göre yapay zekâ ajanları, konuşmadaki belirli ifadeleri tespit ederek kullanıcı tercihleri veya önceden tanımlanan kurallar doğrultusunda değiştirebilecek.

Sistem, yalnızca ses kaydını düzenlemekle sınırlı kalmayacak. Yazılım, konuşmacının yüzünü ağız hareketlerini değiştirilen kelimelerle eşleştirerek görüntüdeki dudak senkronizasyonunu korumaya çalışacak. Algoritma ayrıca kaldırılan veya değiştirilen kelimelerin hemen öncesindeki sonrasındaki ses görüntüyü düzenleyerek geçişlerin doğal görünmesini hedefleyecek.

Gerçek zamanlı video düzenleme yaklaşımı, geleneksel dublaj sonradan yapılan görüntü kurgusundan farklı kullanım modeli ortaya koyuyor. İzleyiciler, canlı konuşmayı olduğu gibi dinlemek yerine kendi tercihlerine göre değiştirilmiş sürümünü takip edebilecek. Microsoft’un patentinde tarif edilen sistemin hangi ürünlerde kullanılacağı veya ticari hizmete dönüşüp dönüşmeyeceği ise henüz açıklanmış değil.

Microsoft’un tarif ettiği yapay zekâ sistemi, farklı dillerdeki canlı yayınların izleyicinin tercih ettiği dilde hem duyulmasını hem görsel açıdan uyumlu hâle getirilmesini sağlayabilecek. Böyle uygulama, konuşmacının sözlerini çevrilmiş ifadelerle eşleştirerek canlı etkinliklerin dil engelini azaltmayı amaçlıyor.

Patent başvurusunda başka düzenleme seçenekleri yer alıyor. Sistem, konuşma sırasında kullanılan “ıı” “eee” gibi dolgu sözcüklerini kaldırabilecek; kekemelikleri, telaffuz hatalarını veya konuşma akışındaki bazı aksaklıkları düzenleyebilecek. özellikler, özellikle sunumlar, eğitim yayınları televizyon programları açısından daha akıcı izleme deneyimi oluşturma amacı taşıyor.

Ancak patentteki kapsam, konuşma hatalarının düzeltilmesinden daha ileriye uzanıyor. Yazılımın kişiye özgü sözcükleri, yerel ağızlara ait ifadeleri, argo kullanımları veya belirli deyimleri değiştirebileceği belirtiliyor. Sistem ayrıca yanlış kullanılan, yanlış telaffuz edilen, saldırgan, duyarsız ya uygunsuz kabul edilen kelimeleri kaldırabilecek; bunların yerine kullanılacak ifadeleri internet araması üzerinden belirleyebilecek.

yaklaşım, içerik filtrelemeyi kişisel tercihlere göre canlı konuşmanın kendisini yeniden yazan araca dönüştürebilir. Örneğin ABD’nin güney bölgelerinde kullanılan “y’all” gibi bölgesel ifadelerin kaldırılması, konuşmacının dil özelliklerini izleyicinin tercihine göre değiştirebilir. Böylece teknoloji, yalnızca anlaşılmayı kolaylaştıran çeviri aracı olmaktan çıkarak konuşmanın üslubuna kültürel özelliklerine müdahale eden sisteme dönüşebilir.

Yapay zekâ destekli sahte görüntülerin deepfake içeriklerin yaygınlaştığı dönemde, canlı yayınları izleyiciye özel biçimde değiştiren sistemler yeni güven sorunları doğurabilir. konuşmacının sözleri yayının akışı sırasında değiştirilirse izleyici, duyduğu ifadenin gerçekten söylenip söylenmediğini veya hangi bölümün yazılım tarafından düzenlendiğini ayırt etmekte zorlanabilir.

Kişiselleştirilmiş içerik filtreleme, izleyicilerin rahatsız edici veya istemedikleri ifadeleri duymamasını sağlayabilir. Ancak aynı özellik, insanların farklı görüşlerle, bölgesel dil özellikleriyle veya alışılmadık düşüncelerle karşılaşmasını azaltabilir. Özellikle haber yayınları, siyasi konuşmalar kamusal tartışmalar söz konusu olduğunda otomatik düzenlemeler, izleyicinin olayları değerlendirmek için ihtiyaç duyduğu bağlamı değiştirebilir.

Patentteki sistemin orijinal canlı video ses kayıtlarını, gerçeği temsil eden referans veriler olarak saklayabileceği belirtiliyor. Orijinal kaydın korunması, düzenlenmiş içerikle gerçek konuşma arasındaki farkın sonradan incelenmesine yardımcı olabilir. Bununla birlikte patent metni, izleyicilerin hangi ifadelerin değiştirildiğini nasıl anlayacağına veya düzenlenmiş görüntülerin nasıl işaretleneceğine ilişkin kesin uygulama standardı ortaya koymuyor.

Microsoft, patent başvurusu hakkında yöneltilen yorum talebine ilişkin metinde herhangi açıklama yapmıyor. Patent başvurusu tek başına sistemin geliştirildiğini, kullanıma sunulacağını veya belirli ürüne entegre edileceğini göstermiyor.

Microsoft’un patentinde tarif edilen teknoloji, derslerden sunumlara, ödül törenlerinden yarışma programlarına canlı spor karşılaşmalarına kadar farklı yayın türlerinde kullanılabilecek şekilde ele alınıyor. Sistem, izleyicinin tercih ettiği dili veya içerik filtresini uygularken konuşmacının görüntüsünü değiştirebildiği için canlı yayın kavramının sınırlarını yeniden gündeme getiriyor.

Geleneksel yayıncılıkta dublaj, altyazı kurgu gibi yöntemler izleyicinin içeriği nasıl deneyimlediğini uzun süredir etkiliyor. Gerçek zamanlı yapay zekâ düzenlemesi ise müdahaleleri her izleyici için ayrı ayrı gerçekleştirebilecek yaklaşım sunuyor. ayrım, aynı etkinliği izleyen iki kişinin konuşmacının farklı sözlerini duymasına veya farklı görüntüler görmesine yol açabilir.

Teknolojinin etkisi, çeviri erişilebilirlik gibi yararlı kullanım alanlarının yanında şeffaflık, içerik bütünlüğü kullanıcı denetimi gibi ölçütlerle değerlendirilecek. Özellikle haberler canlı kamusal etkinliklerde orijinal kayıtların korunması, yapılan değişikliklerin açıklanması izleyicinin düzenlenmiş içerik hakkında bilgilendirilmesi, güvenin sürdürülmesinde belirleyici rol oynayacak.