AI Google
może od teraz
tłumaczyć twoją mowę, zachowując przy tym również twój głos.
Naukowcy opracowali
sieć neuronową, tak aby mapowała "wzorce głosu" z jednego języka na inny.
Efekty nie są jeszcze doskonałe.
AI Google przetwarza sygnał dźwiękowy przychodzący bezpośrednio w sygnał dźwiękowy wychodzący bez żadnych działań pośrednich. Dzięki temu w odróżnieniu od tradycyjnych systemów tłumaczeń, które najpierw przetwarzają dźwięk w tekst, tłumaczą go, a później przetwarzają go w dźwięk, nie traci po drodze cech oryginalnego głosu użytkownika.
Nowy system, nazwany translatotronem, składa się z trzech komponentów.
Pierwszy komponent wykorzystuje sieć neuronową do mapowania spektrogramu dźwięku języka przychodzącego, na spektrogram dźwięku języka wychodzącego. Drugi komponent przekształca spektrogram w falę dźwiękową, którą można odtwarzać. Trzeci komponent nakłada oryginalny głos na ostateczny dźwięk.