Главная → Статьи → Бесплатный дубляж видео
Бесплатный дубляж видео: что обычно не пишут в новостях
Раз в месяц где-нибудь появляется новость: вышел открытый инструмент, который переводит видео на другой язык и озвучивает его голосом говорящего. Это правда работает. Но в новостях не пишут о двух вещах, из-за которых у большинства читателей ничего не получится.

О чём статья
Из чего собран дубляж
Дубляж выглядит как одно действие, а внутри это конвейер из шести шагов. Понимать их полезно: становится видно, где именно всё упирается.
- Распознать речь — получить текст того, что сказано, с привязкой ко времени.
- Разделить по говорящим — понять, где сменился человек.
- Перевести текст — и уложить перевод в тот же хронометраж, иначе озвучка разъедется с картинкой.
- Снять голос с фонограммы — отделить речь от музыки и шумов, чтобы фон остался.
- Озвучить перевод — синтезом речи, при желании голосом исходного говорящего.
- Собрать обратно — свести новую дорожку с картинкой и фоном.
Из шести шагов четыре давно доступны и работают на обычном компьютере. Проблемы начинаются на пятом, когда речь заходит о клонировании голоса.
Первое: нужна видеокарта
Все открытые проекты дубляжа, которые мне попадались, требуют видеокарты NVIDIA. Причём не любой: у некоторых прямо в описании указана минимальная серия, и она не самая старая.
Это значит, что на офисном ноутбуке со встроенной графикой инструмент не заработает вообще. Не «медленно» — никак. Тут важно не перепутать: распознавание речи и перевод без видеокарты идут прекрасно, а вот клонирование голоса нет.
В заголовке новости при этом будет написано «бесплатно и локально», и формально это не ложь. Просто бесплатно для того, у кого уже есть игровой компьютер.
Второе: лицензия
Вещь ещё менее очевидная и более неприятная.
Большинство открытых проектов клонирования голоса построены вокруг одних и тех же моделей синтеза речи. А у самых популярных из них лицензия разрешает только некоммерческое использование.
Разница практическая: попробовать дома на своём ролике — пожалуйста. Озвучить ролик клиенту за деньги — уже нарушение условий, даже если сам инструмент вы не платили ни копейки.
Это стоит проверять до того, как строить на инструменте рабочий процесс. Условия лежат в описании проекта, обычно в файле с названием license.
Чужой голос и право
Отдельный слой, который к технике отношения не имеет.
Клонировать голос конкретного человека без его разрешения не стоит. Технически возможно — и на этом рассуждения обычно заканчиваются, хотя начинаться должны здесь.
Свой голос, голос с письменного согласия, синтезированный голос без прототипа — безопасные варианты. Голос диктора из чужого ролика, известного человека или коллеги без спроса — нет.
Что реально доступно без видеокарты
Если убрать из конвейера клонирование голоса, остаётся вполне рабочая схема, которая идёт на обычном компьютере:
- распознать речь и получить субтитры с таймингом;
- перевести субтитры на нужный язык;
- озвучить перевод обычным синтезированным голосом;
- собрать дорожку с видео.
Голос будет не тот же, что у говорящего. Зато всё работает на том, что уже есть, лицензия чистая, и вопросов с чужим голосом не возникает вовсе.
Для обучающих материалов, инструкций и служебных роликов этого достаточно. Для художественного дубляжа — нет, но для него и клонирование не спасёт: там нужна актёрская работа, а не технология.
Коротко
- Дубляж это конвейер из шести шагов, четыре из них давно работают на обычном компьютере.
- Клонирование голоса требует видеокарты NVIDIA, и не любой.
- Популярные модели синтеза голоса разрешают только некоммерческое использование.
- Чужой голос без разрешения копировать не стоит.
- Перевод субтитров плюс обычная синтезированная озвучка работают без видеокарты и без юридических вопросов.
«Капсай» делает такие задачи прямо на вашем компьютере. Без интернета, без подписки, без отправки файлов на чужие серверы.
Скачать и проверить на своём железе можно бесплатно, до покупки.