Meta AI dudak senkronizasyonlu çevirilere ve Judi Dench ve John Cena gibi ünlü seslere kavuşuyor

Meta’nın yapay zeka asistanı Meta AI, yeni bir ses moduna kavuşuyor.

Çarşamba sabahı Menlo Park’ta düzenlenen Meta Connect 2024 geliştirici konferansında Meta, Meta AI’nın artık Instagram, Messenger, WhatsApp ve Facebook’taki soruları yüksek sesle yanıtlayabildiğini duyurdu. Awkwafina, Dame Judi Dench, John Cena, Keegan-Michael Key ve Kristen Bell gibi ünlülerin yapay zeka klonları da dahil olmak üzere çok sayıda ses arasından seçim yapabilirsiniz.

Yeni Meta AI ses özelliği, OpenAI’nin ChatGPT için sunduğu gelişmiş ses modundan farklı değil; bu mod daha anlamlıdır ve kişinin sesindeki duygusal tonları yakalayabilmektedir. Bunun yerine, yapay zeka yanıt vermeden önce konuşmayı yazıya döken ve yanıtı yüksek sesle okumak için yapay bir ses kullanan, Google’ın yakın zamanda başlattığı Gemini Live’a benzer.

Metanın iddiası üst düzey yeteneklerin yerini almaktır; The Wall Street Journal’a göre, Ünlüleri kullanmak milyonlar ödedi. Bizi şüpheci hale getirin, ancak kendimiz deneyene kadar kararımızı saklı tutacağız.

Diğer Meta AI güncellemelerinin yanı sıra, asistan artık deneyimi sağlayan temel AI modellerinde yapılan iyileştirmelerle görüntüleri analiz edebiliyor. Desteklendiği alanlarda örneğin gördüğünüz bir çiçeğin resmini paylaşıp Meta AI’nin ne tür olduğunu sorabilirsiniz. Veya bir yemeğin fotoğrafını yükleyin ve nasıl yapılacağına ilişkin talimatlar isteyin. (Ara sıra yanlış cevaplar alacağınızı unutmayın.)

Meta ayrıca Instagram videolarındaki sesleri otomatik olarak çevirmek için bir AI çeviri aracı çalıştırdığını da iddia ediyor. Araç, yaratıcının konuşmasını dublajlıyor ve otomatik olarak dudak senkronizasyonu yapıyor, sesi başka bir dilde simüle ediyor ve dudak hareketlerinin eşleşmesini sağlıyor.

Meta, Latin Amerika’daki bazı içerik oluşturucuların videolarının İngilizce ve İspanyolca ile sınırlı olduğu, Instagram ve Facebook’taki Reels çevirilerinin “küçük testleri” ile başladığını söylüyor.