ИИ-инструмент Localize переводит аудио на разные языки, сохраняя голос автора
Resemble AI разработала ИИ-инструмент Localize. Он переводит речь на разные языки, сохраняя оригинальный голос автора, сообщает Engadget.
Что случилось
Компания Resemble AI заявила, что ее инструмент Localize может переводить речь на другие языки, сохраняя голос автора. Инструмент полезен для фильмов, игр, аудиокниг, корпоративных видео и других форматов.
Например, если бы он переводил аудиодорожку из фильма «Дюна», зрители смогли бы слышать голос Тимоти Шаламе в немецкой или итальянской версиях. А когда-нибудь, возможно, и в украинской.
С помощью инструмента ютуберы также смогут озвучивать видео своим голосом на разных языках. Это значит, что их поклонникам больше не нужно будет использовать субтитры. Колл-центры также смогут создавать чат-ботов, поддерживающих несколько языков.
На данный момент Localize может перевести речь на английский, французский, немецкий, голландский, итальянский и испанский языки. В ближайшем будущем планируется добавить также корейский, японский и мандаринский.
Resemble AI сообщает, что Localize может переводить записи, точно передавая значения слов. Он учитывает разговорные выражения и грамматические структуры региона и языка. Хотя из-за специфических нюансов в некоторых языках носителям все же придется сверять перевод.
Основной недостаток технологии в том, что из-за нее актеры дубляжа могут потерять работу. Однако если Localize будет работать, как обещано, это позволит криэйторам с легкостью делиться своим контентом с большим количеством поклонников.
Google также работает над подобной технологией, но о ней мало известно с момента публикации статьи о системе Translatotron в прошлом году.