Яцек Дилаг/Unsplash
Стартап ElevenLabs разработал сервис на основе искусственного интеллекта, который может дублировать видео на 20 языков, сохраняя при этом голоса актеров.
Что известно
ElevenLabs — это стартап, предлагающий услугу клонирования голоса с помощью искусственного интеллекта на основе загруженных образцов звука. Новая функция дубляжа делает, по сути, то же самое: анализирует речь актеров видео и клонирует их голоса. Затем ИИ генерирует новый саундтрек на выбранном языке в том же стиле.
Инструмент поддерживает более 20 языков, включая хинди, португальский, испанский, японский, украинский, польский и арабский.
По данным компании, инструмент ориентирован на медиакомпании, преподавателей и создателей контента. Однако на создание дубляжа им необходимо иметь разрешение правообладателей.
ElevenLabs утверждает, что система сможет не только переводить контент, но и генерировать новые диалоги на целевом языке, используя собственный голос актера. Система также способна сохранять эмоции и интонации.