Перевести видео на русский нейросетью: субтитры и озвучка

Что получишь

Своё видео на английском, немецком или любом другом языке, которое теперь понимают русскоязычные зрители. С русскими субтитрами файлом .srt и с русской озвучкой поверх оригинала.

Перевод делает нейросеть, ты сверяешь. Озвучка твоим голосом, живым или его копией, которую ты сделала сама.

И ясность, какие видео так переводить можно, а за какие лучше не браться совсем.

Сначала про права

Переводим только своё видео. Или видео, на которое у тебя есть право: автор разрешил письменно, это запись твоего вебинара, заказчик попросил перевести его ролик.

Чужие ролики с YouTube для перезалива к себе не переводим. Даже с пометкой «перевод мой», даже со ссылкой на автора. Видео принадлежит тому, кто его снял, а перевод и новая озвучка это переработка, на неё тоже нужно разрешение. Сами площадки такое ловят: YouTube в справке по автодубляжу прямо пишет, что видео с контентом, защищённым авторским правом, под функцию могут не подойти. А зрители узнают ролик и пишут автору.

Озвучку голосом другого человека тоже не делаем. Ни клоном голоса блогера, ни клоном голоса знакомого без его согласия. Свой голос можно, об этом ниже.

Хочется посмотреть зарубежное видео самой, для себя? Это другое дело, для этого есть кнопка в Яндекс Браузере, в конце урока.

Что нужно до старта

• Видео и, если оно не целиком твоё, разрешение автора
• Текст оригинала с таймкодами, файл .srt. Как его получить, разобрано в уроке по слову СУБТИТРЫ: там три бесплатных места, где нейросеть распознаёт речь, и одно из них работает без интернета
• ГигаЧат или Алиса AI для перевода. Оба работают из России без VPN. У ГигаЧата в его статье про перевод сказано, что переводить можно бесплатно, на сайте или в боте в Телеграме
• Микрофон телефона для озвучки своим голосом. Или урок по слову ОЗВУЧКА, если хочешь, чтобы читал твой нейроголос
• Любая монтажка, где можно положить второй звук поверх видео

Шаги

Шаг 1. Достань текст оригинала

Распознай речь на языке оригинала по уроку СУБТИТРЫ и сохрани файл .srt. Там внутри номера строк, время и текст, это и нужно.

Проверь оригинал до перевода. Если распознавалка ошиблась в английском слове, перевод ошибётся вслед за ней. Особенно имена, названия, цифры.

Если у тебя есть сценарий ролика на исходном языке, считай, что повезло: сверка займёт пять минут.

Шаг 2. Переведи субтитры

Открой файл .srt Блокнотом и скопируй текст целиком. В ГигаЧате или Алисе вставь:

Ниже субтитры видео в формате .srt на [английском].
Переведи их на русский.

Правила:
- номера строк и время не трогай вообще, переводи только текст
- одна строка оригинала - одна строка перевода, ничего не склеивай и не дели
- строки короткие, чтобы читались за то же время: если русский выходит длиннее, сокращай, смысл сохраняй
- разговорный русский, как говорят люди, без канцелярита
- имена людей, названия сайтов и программ оставь как в оригинале
- числа и единицы переводи точно, ничего не округляй
- верни весь файл .srt целиком, без пояснений внутри

После файла отдельно напиши список: какие места ты перевела не дословно и почему.

Если ролик длинный, переводи кусками по 50-80 строк и пиши после каждого «продолжай со строки ...». Так нейросеть не потеряет нумерацию.

Можно загрузить и файлом. Алиса принимает TXT, ГигаЧат TXT до 1 МБ, а .srt это тот же текст. Если сайт не берёт файл с окончанием .srt, переименуй копию в .txt.

Шаг 3. Сверь перевод

Нейросеть переводит гладко, и в этом подвох: ошибку в гладком тексте не видно.

Дай перевод на проверку второй нейросети. Если переводила в ГигаЧате, проверяй в Алисе, и наоборот:

Вот оригинал субтитров на [английском] и их перевод на русский. Номера строк совпадают.

Проверь перевод по строкам:
- где смысл искажён или потерян
- где числа, даты, имена не совпадают с оригиналом
- где перевод звучит не по-русски

Ничего не переписывай. Выпиши только номера строк, что не так и как лучше.

Оригинал:
[вставь]

Перевод:
[вставь]

Пройди по списку и реши сама по каждой строке. Последнее слово за тобой.

И ещё раз отдельно глазами: все числа, имена, названия. Это минута, а ошибка в цене или в дате портит весь ролик.

Шаг 4. Поставь русские субтитры

Сохрани перевод Блокнотом как новый файл, например rolik-ru.srt, кодировка UTF-8.

Дальше как в уроке СУБТИТРЫ: загружаешь файл на площадку отдельной дорожкой или вшиваешь в видео. Для коротких роликов лучше вшить, многие смотрят без звука.

Если на этом остановиться, у тебя уже переведённый ролик. Озвучка дальше по желанию.

Шаг 5. Подготовь текст для озвучки

Субтитры читают глазами, озвучку слушают ушами. Текст для голоса лучше сделать отдельно:

Вот русские субтитры моего видео с таймкодами.
Сделай из них текст для закадровой озвучки.

- разбей на фразы так, чтобы каждая укладывалась в своё время по таймкодам
- если фраза не влезает по времени, сократи её, смысл сохрани
- пиши так, как говорят вслух: короткие предложения, без скобок и сокращений
- числа пиши словами, как их надо произнести
- в начале каждой фразы оставь время начала из субтитров

Субтитры:
[вставь rolik-ru.srt]

Время в начале фразы нужно, чтобы при записи и монтаже понимать, куда класть каждый кусок.

Шаг 6. Озвучь своим голосом

Вариант 1, живой голос. Самый простой и честный. Включи видео без звука, читай фразы по времени и записывай на телефон диктофоном. Кусками, по одной-две минуты. Ошиблась, перечитай только этот кусок.

Пиши в тихой комнате, не в ванной и не на кухне с кафелем, там эхо. Телефон держи на расстоянии ладони от лица.

Вариант 2, твой нейроголос. Если не хочется читать самой, сделай копию своего голоса и пусть читает она. Как это сделать бесплатно и что можно делать с таким голосом, разобрано в уроке по слову ОЗВУЧКА. Только свой голос.

Шаг 7. Собери в монтажке

1. Положи видео на дорожку
2. Звук оригинала сделай тише, чтобы он едва слышался фоном. Так зритель понимает, что это перевод, и слышит живую интонацию
3. Положи русскую озвучку второй дорожкой, сдвигая куски под время из шага 5
4. Добавь русские субтитры, если вшиваешь
5. Посмотри ролик целиком хотя бы раз без перерыва

Если ролик чужой, но с разрешением, укажи в описании автора и что перевод сделан с его согласия.

Второй путь: автоматический дубляж

Есть сервисы, которые сами распознают речь, переводят и озвучивают. Результат всё равно надо проверять по шагу 3.

• Автодубляж YouTube. Для своего канала. YouTube сам делает звуковые дорожки на других языках. В таблице языков в справке YouTube английское видео дублируется в том числе на русский, а русское на английский. Языки в настройке не выбираются: YouTube решает сам по языку оригинала. Какие дорожки он сделал для конкретного ролика, видно в Творческой студии на странице Языки. Справка предупреждает, что новые языки появляются на каналах в разное время, так что русский у тебя может появиться позже. Включается в Творческой студии: Настройки, Канал, вкладка Расширенные настройки, блок Автодубляж, галочка Включить автоматический дубляж. Под ней вторая галочка, Проверять дубляж вручную перед публикацией. Ставь обе: без проверки дорожка выйдет к зрителям сразу, со всеми ошибками перевода. Под второй галочкой выбор из двух: Проверять дубляж на все языки или только на экспериментальные языки. По умолчанию может стоять второе, YouTube поясняет, что в переводах на экспериментальные языки ошибки вероятнее. Переключи на все языки, тогда ни одна дорожка не уйдёт без твоего взгляда. Если блока «Автодубляж» у тебя нет, значит, на твоём канале функцию ещё не включили

Это для твоих собственных роликов. Права на чужое видео от автоматического дубляжа не появляются.

Если просто хочешь посмотреть зарубежное видео

Здесь речь про просмотр для себя. В Яндекс Браузере у видео на YouTube, VK Видео, Rutube, Дзене и ещё нескольких сайтах есть кнопка «Перевести и озвучить». По странице Яндекса нейросеть сама определяет язык ролика и переводит на русский. Видео при этом остаётся там, где было, ты его просто смотришь с переводом.

На самом YouTube можно и без браузера Яндекса: если у видео есть субтитры, справа внизу плеера Настройки, Субтитры, Перевести и выбрать русский. Говорят по-английски, а внизу идут русские строки. Так переводятся субтитры, которые у ролика уже есть.

Записывать такой перевод и выкладывать у себя нельзя по той же причине, что в разделе про права.

Где обычно ломается

Перевод съехал по времени. Нейросеть склеила две строки или поменяла таймкоды. Сравни количество строк в оригинале и переводе. Если не совпадает, переводи заново, кусками поменьше, с напоминанием «номера строк и время не трогай».

Русские субтитры не успеваешь прочитать. Русский выходит длиннее английского. Попроси нейросеть: «сократи каждую строку так, чтобы было не больше двух коротких строк на экране».

Озвучка не влезает в видео. Фраза длиннее, чем человек в кадре говорит. Сократи текст в шаге 5. Ускорять голос больше чем чуть-чуть не стоит, его становится трудно слушать.

Имена и термины переведены. «Mr. Stone» стал «господином Камнем». Допиши в просьбу список имён и терминов, которые нельзя переводить.

Площадка заблокировала ролик. Почти всегда это значит, что в нём чужое: видео, музыка, кусок фильма. Когда видео твоё и музыка своя или свободная, поводов для блокировки по правам почти не остаётся.

Что дальше

Когда перевод, субтитры и озвучка собираются по шагам, следующая мысль обычно: а можно, чтобы большую часть ролика делала нейросеть сама, от текста до готового видео? Это «Ролик из текста на автомате». Там весь путь от сценария до публикации, и твоя работа сводится к проверке

Источники

1. https://giga.chat/help/articles/ai-for-translation
2. https://giga.chat/help/articles/work-with-docs
3. https://alice.yandex.ru/support/ru/assistant/chat/files
4. https://browser.yandex.ru/c/video-translation
5. https://support.google.com/youtube/answer/15569972

Ещё уроки