Yapay zeka geliştiricisi HeyGen, İngilizce konuşan birinin videosunu kendi sesi ve dudak hareketleriyle hem Fransızca hem Almanca’ya çevirdiği bir videoyla hizmetini tanıttı

Yapay zeka girişimi HeyGen, beş dakikaya kadar uzunluktaki videoları farklı dillere çevirebilen bir araç tanıttı. Yazılım aynı zamanda videodaki kişinin sesini de kopyalayarak dudak hareketlerini buna göre ayarlıyor. Twitter kullanıcısı Jon Finger tarafından yapılan bir testte çeviri, yoğun bir caddenin arka plan gürültüsüne rağmen kusursuz bir şekilde çalıştı. Düzenlenen videoda dikkat dağıtıcı sesler filtrelenir. Farklı bir dildeki sentetik ses, hala biraz robotik veya mekanik gibi gelse de, orijinali çok andırıyor. Tonlamanın ne kadar sadık bir şekilde yeniden üretildiği de dikkat çekicidir. Dudak hareketlerinin yapay zeka tarafından değiştirildiği gerçeği çıplak gözle zar zor görülebiliyor. HeyGen video parçasında başka bir ayarlama daha yapıyor çünkü çeviriden sonra yüz orijinal klipte olduğundan çok daha parlak görünüyor.