DeepL AI Labs

Mixhalo'nun DeepL platformuna entegrasyonu, sadece gerçek zamanlı konuşmadan konuşmaya çeviri alanında büyük ölçekli yeni yetenekler eklemekle kalmadı. Bu, Ses alanında geliştirebileceğimiz çözümlerin kapsamını da dönüştürüyor. Ses iletiminin hızını kontrol edebildiğinizde ve bunu bir kısıtlama olmaktan çıkardığınızda, daha önce imkansız olan şeyler hızla bir ürün yol haritasına dönüşebilir.

Ekiplerimiz birlikte, her tür deneyim ve etkileşim için kullanılabilen bir konuşulan dil katmanı oluşturuyor. DeepL Voice API aracılığıyla, dünyanın her yerindeki yenilikçilere her türlü müşteri ve hedef kitle yolculuğuna canlı, gerçek zamanlı, çok dilli ses entegre etme olanağı sunuyorlar.

Buna, bir golü veya bir touchdown'ı anlatan bir futbol yorumcusunun tüm duygularını yakalamak, sağlık hizmetleri ortamlarında ana dili İngilizce olmayan kişilerin izolasyon hissini ortadan kaldıran anında erişilebilir ses deneyimleri, stres ve hayal kırıklığını ortadan kaldırmak için özenle tasarlanmış müşteri destek çağrı deneyimleri ve insan tercümanların yapabileceğinden çok daha hızlı bir şekilde gerçekleştirilen sözlü çeviri sunan çok dilli canlı etkinlik deneyimleri dahildir.

Gerçek zamanlı, çok dilli ses için temel unsurlar

Mixhalo’nun kurucu ortağı Vik Singh ve DeepL Voice Bölümü Başkanı Leo Doin, çok dilli ses için gecikmeyi azaltma zorluğuna birbirini tamamlayan iki yönden yaklaşıyor. Mixhalo, müzik sektöründe doğdu; bir davulcunun snare davuluna vurduğu sesi, ses dalgalarının kendisinin ulaşabileceğinden daha hızlı bir şekilde binlerce hayranla dolu bir stadyuma aktarıyordu. DeepL’in dil modelleri, farklı API’lere aktarım yapmadan uçtan uca gerçek zamanlı ses çevirisini gerçekleştirebiliyor ve çeviri gecikmesini mümkün olan en düşük seviyeye indiriyor.

Duygusal düzeyde etki yaratan çevrilmiş ses deneyimleri tasarlamak

Özel ses yakalama daemon'ları, özel ağ protokolleri, gerçek zamanlı hata algılama, oynatma hızı için optimize edilmiş ses motorları: tüm bu teknik yenilikler, canlı ses çevirisi için daha optimize edilmiş bir deneyim tasarlamak üzere zaman ve alan yaratır. Dil zekasını da eklediğinizde, çevirinin en uygun zamanını ve farklı gramer yapılarına sahip dilleri nasıl senkronize edeceğini bilen modeller sayesinde bu optimizasyon anında gerçekleşebilir.

İdeal canlı çeviri deneyimi, çevrilmiş sesin anında çalınması anlamına gelmez. Bu, her dilin nasıl işlediğini derinlemesine anlayan yapay zeka aracılığıyla oynatmayı akıllıca ayarlamakla ilgilidir.

Tüm bunlar çağrı merkezleri için canlı sözlü tercümede bir araya gelir. Bu, DeepL Voice API'nin en güçlü uygulamalarından biridir. Vik ve Mixhalo ekibi, müşterilerin destek temsilcileriyle her zaman bir bağ hissetmelerini ve çevirinin, kendilerinin dinlendiği hissini asla bozmaması için bu sistemi geliştiriyor.

Hiçbir insanın yetişemeyeceği hızda çevrilen canlı etkinlikler

DeepL ve Mixhalo'nun bir araya gelmesinin belki de en büyük etkisi, canlı etkinliklerde hissedilecek: Binlerce katılımcı ve yüzlerce konuşmacının yer aldığı konferanslarda, herkes, etkinlik mekanı genelinde cihazlarına aktarılan ses yayını aracılığıyla, fikirlerini paylaşabilecek ve oturumları tercih ettikleri dilde takip edebilecek.

Gerçek zamanlı, çok dilli bir Ses katmanının değeri, işte bu tür senaryolarda gerçekten ortaya çıkıyor. Son derece düşük gecikmeli ses sayesinde katılımcılar, salon içinde dolaşırken istedikleri konuşmacıyı dinleyebilirler. Oturumları odadayken olmasalar bile takip edebilirler. Canlı, anlık sözlü tercüme, her katılımcının en iyi anladığı dili, tüm duygular ve örtük ifadelerle birlikte duyması anlamına gelir. Ayrıca, her konuşmacının fikirlerini, bunları oluşturduğu dilde paylaşabileceği anlamına da gelir.

Ancak belki de en çarpıcı olanı, tüm bunların gerçekleşme hızı olacaktır. DeepL’in yapay zeka modellerinin, canlı etkinlik tercümanlarının önceden hazırlık yapmasıyla hemen hemen aynı şekilde, açılış konuşmaları, panel tartışmaları ve diğer konuşmacı oturumlarındaki bağlamı yakalayıp işleyebilmesi için yenilikçi yöntemler geliştiriyoruz. Bunu yapay zekanın daha yüksek işlem hızıyla birleştirdiğimizde, insan çevirmenlerin yapabileceğinden çok daha hızlı bir şekilde canlı, sözlü çeviriler üretebiliyoruz. Bu, çok dilli içerik deneyiminin nasıl olması gerektiğine dair beklentileri yeniden şekillendirecek. Bu, fütüristik, hatta sihirli bir his uyandıracak. Ve sözlü iletişimin işleyişine dair beklentileri değiştirmeye başlayacak.

Mixhalo ve DeepL’in planları hakkında daha fazla bilgiyi bu blog yazısında bulabilirsiniz.

Paylaş

Bağlantıda kalın

En son yapay zeka yeniliklerimizin ön izlemesini görün.