Что умеет этот инструмент и чего не умеет
Эта страница превращает речь из видео в субтитры на другом языке. Сначала модель распознавания речи Whisper записывает, что было сказано, с временем для каждой строки. Затем модель перевода OPUS-MT переводит каждую строку. Можно показывать только перевод или оба языка сразу в виде двуязычных субтитров.
Учтите два момента:
- Это машинный перевод. Текст никто не проверяет. Обычно результата достаточно, чтобы понять лекцию, интервью или видео о товаре, но имена, шутки, сленг и технические термины могут быть переведены неверно. Прочитайте строки перед публикацией: в списке их легко исправить.
- Голос не меняется. Инструмент создаёт субтитры. Он не дублирует видео и не создаёт новый голос на другом языке.
Всё работает на вашем компьютере
Большинство онлайн-переводчиков загружают видео на сервер. Здесь и модель распознавания речи, и модель перевода скачиваются в браузер и работают прямо в нём. Видео и его текст не покидают устройство, а это важно для встреч, занятий, интервью и неопубликованных работ. После первого визита модели сохраняются в браузере, и следующее видео обрабатывается гораздо быстрее.
При первом запуске один раз скачиваются две модели: распознавания речи («Быстрая» — 41 MB, «Точная» — 77 MB или «Лучшая» — 249 MB, выбирается в настройках распознавания речи) и перевода, примерно 110–140 MB. Если перевод идёт через английский, нужны две модели перевода. На обычном компьютере обработка занимает от одной до трёх длительностей видео. Если ваша видеокарта поддерживает WebGPU, её можно выбрать в списке «Запускать на», хотя процессор обычно работает быстрее.
Какие языки можно переводить
Речь распознаётся на 99 языках, а язык определяется автоматически. Перевод работает между английским и примерно двумя десятками языков, остальные пары переводятся через английский в два шага.
| С языка | На язык | Как |
|---|---|---|
| Китайский | Английский | Прямая модель |
| Английский | Китайский | Прямая модель |
| Китайский | Немецкий, французский, испанский, русский, вьетнамский, арабский и другие | Через английский, в два шага |
| Японский, корейский, большинство европейских языков | Английский | Отдельная прямая модель для каждого языка |
| Любой язык | Японский, тайский, турецкий, греческий, польский | Общая модель, результат грубее |
В поле «Перевести на» страница показывает размер загрузки для выбранной пары и предупреждает, если используется общая модель. Корейский можно переводить на другие языки, но как язык перевода он пока недоступен.
Китайские видео и китайские субтитры
- Точность: для китайской речи выберите «Лучшая» в настройках распознавания речи. Она ошибается заметно реже, чем меньшие модели, но требует быстрого компьютера.
- Упрощённые иероглифы: Whisper иногда пишет традиционными иероглифами. Параметр «Писать китайский упрощёнными иероглифами» в тех же настройках включён по умолчанию и преобразует их.
- Пунктуация: в китайских переводах используются китайские знаки препинания, например ， и 。
- Длина строки: при переносе строк китайские, японские и корейские иероглифы считаются за два символа, поэтому субтитры не получаются слишком широкими.
Двуязычные субтитры
Двуязычные субтитры показывают оригинальную строку и её перевод вместе, одну над другой. Их любят для изучения языков и для видео, которые будут смотреть носители двух языков. Выберите «Оба» в разделе «Показывать» и отметьте «Перевод сверху», если переведённая строка должна идти первой. В скачиваемом файле можно выбрать «Оригинал», «Перевод» или «Двуязычный текст» в формате SRT, VTT или TXT.
Проверка и исправление результата
Время каждой строки приблизительное, обычно с точностью около секунды. В списке строк можно править текст и перевод, менять время начала и конца, разделять и объединять строки, а также сдвигать все строки раньше или позже кнопкой «Сдвинуть все». Уже есть субтитры? Нажмите «Импорт SRT / VTT», а затем «Перевести субтитры», чтобы перевести готовый файл без повторного распознавания речи.
Когда текст готов, выберите стиль, например «Классический белый», «Плашка» или «TikTok жирный», и встройте субтитры в видео MP4, WebM, MOV или MKV либо скачайте только файл субтитров для YouTube и других плееров. Чтобы сделать субтитры только на языке оригинала, воспользуйтесь инструментом «Добавить субтитры». Если запись длинная, сначала вырежьте нужный фрагмент с помощью «Обрезать видео», а готовый файл можно уменьшить с помощью «Сжать видео».