Этот новый инструмент для дублирования с помощью искусственного интеллекта может переводить аудио, сохраняя голос спикера

Этот новый инструмент на основе искусственного интеллекта позволяет дублировать аудио с сохранением голоса оригинального диктора

Женщина с микрофоном

Если вы когда-либо смотрели фильм или шоу, переведенные, вы знаете, насколько ненатурально это чувствуется. Часто голос оратора не меняется среди разных персонажей или их речь и фразы совсем не соответствуют. Новая функция AI Dubbing от ElevenLab предназначена для решения этой проблемы.

Во вторник ElevenLabs представили новую функцию AI Dubbing, которая может переводить устный контент на другой язык, сохраняя голос, речевые модели, эмоции и интонации оригинального оратора.

Также: Ген AI – угроза рабочим местам? Наоборот, люди станут в выигрыше

Функция AI Dubbing позволяет зрителям из разных стран наслаждаться своими любимыми контентом на родном языке всего за несколько минут.

Функция AI Dubbing объединяет многоязыковый синтез речи, клонирование голоса, обработку текста и аудио, что позволяет сохранить природу оригинального контента при создании перевода, согласно компании.

В пресс-релизе генеральный директор и сооснователь ElevenLabs, Мати Станисевски, поделился своим отрицательным опытом просмотра переведенного контента в детстве и тем, как новая технология может стать решением.

“В детстве в Польше мы смотрели фильмы на английском языке, переведенные всего одним диктором. Значит, у всех актеров был один и тот же голос. Это забирает так много магии из опыта”, – сказал Станисевски.

“Выход AI Dubbing – это наш самый значимый шаг к преодолению языковых барьеров контента. Это поможет зрителям наслаждаться любым содержимым, независимо от их языка”, – добавил Станисевски.

Также: ИИ и данные: Совершенствование гиперперсонализации для развития банка будущего

Функция AI Dubbing поддерживает более 20 языков, которые в настоящее время поддерживаются моделью Eleven Multilingual v2 model.

Полный список включает английский, японский, китайский, немецкий, хинди, французский, корейский, португальский, итальянский, испанский, индонезийский, голландский, турецкий, филиппинский, польский, шведский, болгарский, румынский, арабский, чешский, греческий, финский, хорватский, малайский, словацкий, датский, тамильский и украинский.

AI Dubbing доступна для всех пользователей начиная сегодня, и стоимость зависит от количества персонажей, которых требуется озвучить.