Плагин OBS для голосового перевода в реальном времени: Как дублировать свой стрим

У OBS есть плагины для всего. Есть плагины для оповещений, плагины для переходов между сценами, плагины для виртуальных камер, плагины для аудиофильтров.

Для перевода большинство стримеров сначала обращаются к плагинам на основе субтитров. LocalVocal. Polyglot OBS. Они работают. Они показывают текст на экране.

Но плагины для субтитров и плагины для голосового перевода — это разные продукты. Это руководство охватывает именно голосовой перевод: что он выводит, как он работает в OBS и как его настроить.

Чем голосовой перевод отличается от плагинов для субтитров

Плагины для субтитров берут ваш голос, пропускают его через систему распознавания речи и отображают переведенный текст на экране. Ваши зрители читают перевод.

Плагины для голосового перевода делают нечто иное. Они берут ваш голос, обрабатывают его через движок перевода и синтеза речи и выводят новую звуковую дорожку на другом языке. Ваши зрители слышат перевод.

Это различие имеет большее значение, чем может показаться.

Носители любого языка не смотрят игровые стримы, читая субтитры. Они слушают. Если вы добавите английские субтитры к французскому стриму, некоторые англоязычные зрители попробуют. Большинство уйдут через несколько минут. Чтение во время просмотра геймплея — это работа.

Если вы дадите тем же англоязычным зрителям аудиопоток, который звучит как английский, они останутся. Стрим для них — просто стрим. На их языке.

Как работает плагин StreamFluent для OBS

StreamFluent — это плагин для дублирования голоса в реальном времени для OBS Studio. Он устанавливается как любой другой плагин OBS и интегрируется непосредственно в ваш микшер.

После установки:

• Новые аудиоисточники автоматически появляются в вашем микшере OBS. Они помечены как "SF Dub. English" или "SF Dub. Spanish" или на любом другом языке, который вы настроите.
• Каждый источник представляет собой версию вашего микрофонного входа, дублированную в реальном времени.
• Вы добавляете этот источник в отдельную сцену или направляете его на второй выход стрима.
• Облако обрабатывает ваш голос и возвращает дублированный звук с задержкой менее 1 секунды.

Ваш основной стрим остается без изменений. Вы по-прежнему звучите точно так же, как и на своем основном канале. Дублированный звук поступает только в то место назначения, которое вы настроите.

Пошаговая установка

1. Загрузите плагин. Перейдите на streamfluent.ai и загрузите плагин OBS для вашей операционной системы.

2. Переместите его в папку плагинов OBS. В Windows: C:\Program Files\obs-studio\obs-plugins\64bit. На Mac: ~/Library/Application Support/obs-studio/plugins.

3. Перезапустите OBS Studio. Плагин загружается при запуске.

4. Новые источники появляются автоматически. На панели "Источники" вы увидите аудиоисточники StreamFluent для каждого настроенного языка.

5. Настройте языковую пару. Откройте панель настроек StreamFluent в OBS. Установите исходный язык и один или несколько целевых языков.

6. Направьте дублированный звук. Добавьте источник дублированного звука ко второму выходу стрима в настройках OBS. Этот выход указывает на ваш канал на втором языке на Twitch, YouTube или любом другом RTMP-назначении.

Общее время настройки: около 10 минут для первой конфигурации.

Что переводится

StreamFluent переводит ваш голосовой ввод. В частности:

• Ваш микрофон. Все, что вы говорите, обрабатывается.
• Не игровой звук. Звуковые эффекты, музыка, внутриигровые диалоги остаются на исходном языке на дублированном канале.
• Не системный звук. Фоновая музыка вашего стрима остается без изменений.

Это сделано намеренно. Игровой звук на другом языке дезориентировал бы зрителей. Ваш комментарий — это то, что нуждается в переводе. Звук игры одинаков для всех.

Если вы произносите игровую реплику на английском, а ваш стрим дублируется на испанский, ваш голос произносит ее на испанском. Звук игры воспроизводится на исходном языке под ним.

Задержка и качество

Цифры:

• Сквозная задержка: Менее 1 секунды.
• Языки: 32.
• Нагрузка на ЦП: Менее 2%. Вся тяжелая обработка происходит в облаке.
• Клонирование голоса: Доступно на уровне Pro. Дублированный голос обучается на коротком образце вашего голоса. Он звучит как вы, а не как стандартный движок преобразования текста в речь.
• Совместимость с OBS: Работает с OBS Studio 28 и выше, а также со Streamlabs OBS.

Показатель менее 2% загрузки ЦП важен для стриминговых машин, которые и так сильно нагружены. Плагины для субтитров, такие как LocalVocal, запускают Whisper локально, что может значительно увеличить использование ЦП на более слабых машинах. StreamFluent переносит всю нагрузку.

Частые вопросы

Работает ли он на Mac, Windows и Linux? Да. Плагин доступен для всех трех систем. Mac и Windows наиболее протестированы. Поддержка Linux доступна, но новее.

Могу ли я использовать его в Streamlabs OBS? Да. Streamlabs OBS поддерживает стандартные плагины OBS. Путь установки немного отличается, но плагин работает так же.

Сколько ЦП он использует? Менее 2% на вашей локальной машине. Обработка перевода происходит в облачной инфраструктуре StreamFluent, а не на вашем компьютере.

Что, если я также хочу субтитры? Запустите LocalVocal вместе со StreamFluent. LocalVocal обрабатывает субтитры на вашем основном стриме. StreamFluent обрабатывает дублированный звук на вашем втором канале. Оба работают одновременно без конфликтов.

Что произойдет, если соединение прервется? Источник дублированного звука на втором канале замолчит. Ваш основной стрим не пострадает. Плагин автоматически переподключится при восстановлении соединения.

Могу ли я дублировать на несколько языков одновременно? Да. Настройте несколько целевых языков в настройках StreamFluent. Каждый язык получает свой собственный аудиоисточник в вашем микшере OBS. Направляйте каждый из них на отдельный выход стрима.

Попробуйте StreamFluent бесплатно. 3 часа включены, кредитная карта не требуется.