Fish Audio Drama 3, yapay zekâ seslerinin cümle ortasında duygu değiştirmesine olanak tanıyor

Fish Audio, yapay zekâyla üretilen diyalogların birinin senaryo okumasından ziyade gerçek bir performans gibi duyulmasını sağlamak üzere tasarlanan metinden konuşmaya dönüştürme modeli Drama 3'ü kullanıma sundu. 13 Ekim'de yayımlanan model, içerik üreticilerinin gündelik dille duyguları, tempoyu ve seslendirme tarzını kontrol etmesine olanak tanıyor.

Kullanıcılar, temel ses ön ayarlarına bel bağlamak yerine talimatları doğrudan senaryolarına ekleyebiliyor. Bir karakter sakin bir şekilde konuşmaya başlayabilir, giderek öfkelenebilir ve bir cümleyi fısıldayarak bitirebilir; üstelik ayrı kayıtlar arasında geçiş yapmaya gerek kalmadan. Artık sentetik oyuncuların bile yönetmenin talimatlarına uyması gerekiyor.

Drama 3 ayrıca çok karakterli konuşmaları ve 83 dili destekliyor. Talimatlar tek tek kelimelere veya metin bölümlerine uygulanabiliyor; böylece içerik üreticileri, senaryonun geri kalanını değiştirmeden belirli ifadeleri vurgulayabiliyor.

Fish Audio'ya göre model, Artificial Analysis'in Pronunciation Robustness kıyaslama testinde %93,2 doğruluk oranına ulaştı; önceki sürüm S2.1 Pro'da bu oran %88,1'di. Ancak telaffuz doğruluğu, duyguları inandırıcı biçimde yansıtan performansları mutlaka garanti etmiyor.

Şirket ayrıca iki gelişmiş düzenleme aracı geliştiriyor. Interactive Editing, kullanıcıların ek talimatlarla performanslara ince ayar yapmasına olanak tanıyacak; Audio Inpainting ise kayıtların tamamını yeniden oluşturmadan tek tek kelimeleri değiştirmek için tasarlanıyor. Her iki araç da hâlâ yalnızca davetle katılım sağlanan sınırlı test aşamasında.

Drama 3'e Fish Audio'nun web sitesi, mobil uygulamaları ve API'si üzerinden erişilebiliyor. Model ağırlıkları da indirilebiliyor, ancak ticari kullanım lisans kısıtlamalarına tabi.

12 Kasım'a kadar API erişimi, normalde 50 dolar olan ücrete kıyasla %80 indirimle milyon karakter başına 10 dolar olarak sunuluyor. Promosyon dönemi boyunca yeni içerik üreticisi aboneliklerinde de %50 indirim uygulanıyor.