Компания Google анонсировала в своем блоге переводчик, который сможет напрямую переводить речь с одного языка на другой, сохраняя голос и тембр речи говорящего.
С помощью разработанного алгоритма нейросеть с долгой краткосрочной памятью будет принимать голосовой ввод и обрабатывать его как спектрограмму, а затем генерировать на этой основе новую спектрограмму на целевом языке. При этом переведенная речь будет звучать голосом самого говорящего, но останется еще немного "роботизированной".
Google отказалась от перевода речи в текст с помощью Google Translate и ее озвучивания, так как такой метод приводит к большому количеству речевых ошибок. Благодаря использованию новой технологии в результате получается более быстрый перевод с меньшей вероятностью потери какого-либо фрагмента речи.