动察 Beating tarafından yapılan takibe göre, Alibaba Cloud, macOS istemcisi ile Huawei, Xiaomi, vivo gibi mobil uygulama mağazalarında soğuk başlatma yaparak yeni AI sesli giriş yöntemi CosyVoice'u piyasaya sürdü. Şu anda sınırlı süreli ücretsiz deneme aşamasında. Giriş yönteminin adı, Alibaba'nın ses büyük modeli CosyVoice'dan geliyor; alt yapısında ise Tongyi Qianwen büyük modeli kullanılarak anlamsal çözümleme yapılıyor ve tam senaryo sesli giriş sağlanıyor.
Giriş yöntemi arayüzü son derece sade olup yalnızca silme, yeni satır, @ ve boşluk olmak üzere 4 fiziksel tuşu barındırıyor; yazı yazmak için sistem klavyesine geçiş yapmak gerekiyor. Tongyi Qianwen büyük modelinin anlama yeteneği sayesinde, sesli giriş "hmm, ah" gibi sözlü dolgu kelimelerini otomatik olarak temizleyebiliyor ve "hayır, şöyle değiştir..." gibi sözlü düzeltmeleri tanıyabiliyor. Paralel içerikleri otomatik olarak numaralı listelere veya tablolara dönüştürmenin yanı sıra, giriş yöntemi Şanghay lehçesi, Kantonca, Siçuan lehçesi gibi yerel ağızları gerçek zamanlı olarak standart Mandarin Çincesine çevirebiliyor ve manuel olarak profesyonel kelimelerin içe aktarılmasını destekleyen bir sıcak kelime özelliği ile donatılmış.
İstemci tarafında iki uç arasında işlev farklılıkları bulunuyor; macOS tarafına özel "Video Algılama Güçlendirme" özelliği mevcut. Bu özellik etkinleştirildiğinde, sistem sesli giriş sırasında otomatik olarak ekran görüntüsü alıp yüklüyor ve ekran bağlamını algılayarak daha hassas anlamsal transkripsiyon sağlıyor; ancak bu durum gizlilik dengesi konusunda talepler doğuruyor. Yatay karşılaştırma yapıldığında, CosyVoice erken geliştirme aşamasında olup, ekosistem entegrasyonu ve kararlılık açısından WeChat ve Doubao giriş yöntemlerine kıyasla hâlâ geride kalıyor ve transkripsiyon sırasında aşırı sözlü ifade temizleme sorunu yaşanıyor.
