Стартап ElevenLabs, який створює універсальну машину для дубляжу зі штучним інтелектом, додав підтримку понад 20 мов. Серед них українська, польська, гінді, португальська, іспанська, японська та арабська.

Компанія Disney випускає свої фільми англійською мовою, після чого дублює їх на 46 мов світу, пише Engadget. Це масштабне завдання, для виконання якого у Disney є цілий підрозділ — Disney Character Voices International Inc.

І це не те саме, що повернути Кріса Пратта до студії звукозапису, щоб він озвучив свої репліки у «Вартових Галактики 3» ісландською чи українською — кожна версія звучить дещо по-різному, враховуючи місцевих акторів.

Наприклад, українські глядачі в кінотеатрах чують голос Володимира Остапчука, а не самого Пратта. Втім, технології ШІ-дубляжу від компанії ElevenLabs скоро можуть так точно відтворити голос Пратта, ніби він не один рік вивчав українську.

ElevenLabs — це стартап у сфері штучного інтелекту, який пропонує послугу клонування голосу, що дозволяє підписникам генерувати майже ідентичні голоси за допомогою штучного інтелекту на основі завантажених аудіо-зразків тривалістю кілька хвилин. Не дивно, що як тільки функція була випущена в бета-версії, її одразу ж почали використовувати, щоб видавати себе за знаменитостей, іноді навіть без їхнього попереднього відома та згоди.

Нова функція ШІ-дубляжу робить по суті те ж саме — більш ніж 20 мовами, включаючи хінді, португальську, іспанську, японську, українську, польську та арабську, — але легально і з дозволу. Цей інструмент призначений для використання медіакомпаніями, освітянами та інтернет-впливовими особами, які не мають всіх грошей світу, як Disney, для фінансування своїх зусиль з глобальної адаптації.

ElevenLabs стверджує, що система зможе не лише перекладати «розмовний контент на іншу мову за лічені хвилини», але й генерувати новий розмовний діалог цільовою мовою, використовуючи власний голос актора. Або, принаймні, згенеровану штучним інтелектом репліку. Як повідомляється, система навіть здатна зберігати «емоції та інтонації» існуючого діалогу і переносити їх у згенерований переклад.

«Це допоможе аудиторії насолоджуватися будь-яким контентом, який вони хочуть, незалежно від мови, якою вони говорять, — сказав генеральний директор ElevenLabs Маті Станішевський. «І це означатиме, що творці контенту зможуть легко та автентично отримати доступ до набагато більшої аудиторії в усьому світі».

Источник: dev.ua