StreamFluentStreamFluent
ドキュメント

StreamFluentドキュメント

ライブストリーム用のリアルタイムAI音声ダビングを設定するために必要なすべて。あなたの言語でストリームし、すべての視聴者にリーチしましょう。

クイックスタート

OBS プラグインを使用して、5 分以内に最初の吹き替えストリームを実行します。

ステップ1

アカウントを作成する

メールまたはソーシャルログイン(Google、Twitch、Kick)で streamfluent.ai にサインアップします。すぐにダッシュボードに移動します。

ステップ2

OBS プラグインをインストールする

OBS プラグインページから OS 用のプラグインをダウンロードします。OBS プラグインフォルダーにインストール(または Windows でインストーラーを実行)し、OBS を再起動します。

ステップ3

ログインして設定する

OBS で [表示] → [ドック] → StreamFluent.ai を開きます。Google、Twitch、Kick、またはメールでログインします。オーディオソースを選択し、ターゲット言語を選択して、キャプションと音量の設定を調整します。

ステップ4

ライブ配信を開始

StreamFluentドックで「接続」をクリックします。接続されるとステータスドットが緑色に変わります。ダビングされたオーディオとキャプションソースをシーンに追加し、通常どおりOBSでストリーミングを開始します。

ヒント
OBS プラグインはオーディオのみを処理します。ビデオはストリーミングプラットフォームに直接送信されます。 RTMP リレーも、コピーするストリームキーも、追加のセットアップもありません。

仕組み

StreamFluentは、ストリーミング中にあなたの音声をリアルタイムで処理し、翻訳して他の言語に再音声化します。

OBS Plugin

おすすめ
あなたのマイクオーディオキャプチャ
PluginWebSocket
AIパイプラインSTT → 翻訳 → TTS
OBSミキサー吹き替えソース

OBSプラグインは、マイクの音声をキャプチャし、WebSocket接続を介してStreamFluentのAIパイプラインに送信します。あなたのスピーチは文字起こし、翻訳、そして再音声化され、吹き替えられた音声はOBS内のミキサーソースとして直接返されます。

あなたのビデオストリームは、StreamFluentのサーバーを経由せずに、直接あなたのプラットフォーム(Twitch、YouTube、Kickなど)に送信されます。音声のみがリモートで処理され、レイテンシーを低く抑え、ストリームの品質に影響を与えません。

RTMPリレー

代替手段
あなたのOBSオーディオ + ビデオ
RTMP取り込みストリームのデマルチプレックス
AIパイプラインSTT → 翻訳 → TTS
配信先言語ごとの出力

RTMPリレーを使用すると、ストリーミングソフトウェアをプラットフォームではなくStreamFluentの取り込みサーバーに向けることができます。私たちはあなたのフルストリームを受信し、AIパイプラインを通じてオーディオを処理し、設定された宛先に吹き替え版を配信します。

ビデオは再エンコードせずに転送されます。翻訳された各オーディオトラックは、元のビデオとリミックスされ、対応する宛先チャンネルにプッシュされます。

元のビデオはどちらの方法でも再エンコードされません。オーディオのみが処理され、ビデオ品質はソースと同一に保たれます。

AIダビング

AIダビングはStreamFluentの中核です。あなたの音声をストリーミング中に他の言語に変換するリアルタイム音声翻訳です。

吹き替えの仕組み

吹き替えがアクティブな場合、StreamFluentは3つの段階を実行します。音声認識はあなたの声をテキストに変換し、ニューラル翻訳はそれを各ターゲット言語に適応させ、音声合成はあなたが選択した音声プロファイルを使用して音声オーディオを生成します。

プロセス全体は1秒未満のレイテンシーで実行されます。吹き替えられたオーディオは、元のオーディオと一緒に配信されます。OBSプラグインを使用すると、個別に制御できる個別のミキサーソースとして表示されます。

吹き替えモード

ターゲット言語ごとに吹き替えの動作を制御できます:

モード動作
自動ターゲット言語がソース言語と異なる場合にダビングする(デフォルト)
オリジナルのみダビングせずに元のオーディオをパススルーする — ネイティブ言語の出力に便利
字幕のみダビングされたオーディオなし — 視聴者は翻訳されたキャプション付きであなたの元の声を聞く
ヒント
あなたの言語を部分的に理解している視聴者には、字幕のみモードを使用してください — 彼らは字幕を安全ネットとして、あなたの本当の声の信憑性を得ます。また、ダビングされた時間も少なくなります。

音声技術

StreamFluentは、プランに応じて3つのレベルの音声技術を提供しています。

ティア技術プラン
ベーシックTTS自然なイントネーションを持つデフォルトの男性または女性のAI音声すべてのプラン
カスタムボイスオプションの言語ごとのオーバーライドで28のプレミアムボイスから選択Basic+
音声クローン自分の声をクローン - 30秒のサンプルを録音し、すべての言語で自分の声でストリーミングPro+

音声の設定

  1. ダッシュボードのサイドバーにある「音声」に移動します
  2. 音声タイプを選択します:基本(男性/女性の切り替え)、カスタム(28種類の音声を参照)、または複製(自分の声をクローン)
  3. 音声クローンの場合:30秒のサンプルを録音またはアップロードします。ステータスが「未開始処理中準備完了
  4. 音声ページから、サポートされている任意の言語で自分の音声をプレビューします

音声設定

設定範囲説明
話す速度0.5倍 – 2.0倍吹き替え音声出力の速度
ピッチ調整-12~+12 st半音単位でピッチを上下にシフト
感情の維持オン/オフ吹き替え音声で感情的なトーンを維持 スケール

サポートされている言語

StreamFluentは、音声認識(ソース)と翻訳(ターゲット)の両方で32の言語をサポートしています。すべての言語は双方向で機能します。

サポートされているすべての言語は、ソース(あなたが話す言語)とターゲット(翻訳先の言語)の両方として機能します。

英語スペイン語日本語ポルトガル語フランス語ドイツ語韓国語中国語イタリア語ロシア語アラビア語ヒンディー語トルコ語オランダ語ポーランド語スウェーデン語デンマーク語ノルウェー語フィンランド語チェコ語ルーマニア語ハンガリー語ギリシャ語タイ語ベトナム語インドネシア語マレー語タガログ語ウクライナ語ブルガリア語クロアチア語スロバキア語

サポートされているプラットフォーム

StreamFluentは、主要なストリーミングプラットフォームすべてで動作します。

TwitchYouTubeKickRumble任意のRTMPエンドポイント
ヒント
日本語話者は、英語、スペイン語、韓国語の視聴者に向けて、英語話者が日本語、スペイン語、韓国語に向けて配信するのと同じくらい簡単に配信できます。すべての言語が完全に双方向です。

OBSプラグイン

OBSプラグインは、StreamFluentを使用する推奨される方法です。ローカルでオーディオをキャプチャし、AIパイプラインを介して処理し、ダビングされたオーディオをOBSミキサーに直接返します。

仕組み

このプラグインは、WebSocket経由でStreamFluentに接続します。マイクの音声は当社のサーバーに送信され、AIパイプライン(音声認識→翻訳→音声合成)を介して処理され、ダビングされた音声がOBSミキサーの仮想ソースとして返されます。

あなたのビデオストリームはプラットフォームに直接送信され、StreamFluentが触れることはありません。音声のみがリモートで処理されるため、ストリームの品質と安定性はまったく影響を受けません。

インストール

  1. OBS Pluginのセットアップページから、お使いのOS用のプラグインをダウンロードしてください
  2. プラグインをOBSプラグインフォルダにインストールするか(macOS/Linux)、インストーラを実行してください(Windows)
  3. OBS Studioを再起動してください

ログイン

OBSで「表示」→「ドック」→「StreamFluent.ai」を開きます。以下の方法で認証できます。

  • Google、Twitch、またはKick(OAuth)
  • メールアドレスとパスワード
  • ダッシュボード→設定のAPIキー

設定

ログイン後、ドックで直接ダビング設定を行います。

  • オーディオソース - キャプチャするマイク/オーディオ入力を選択します
  • ターゲット言語 - ダビングする言語を1つ以上選択します
  • キャプションスタイル - キャプションの切り替えと外観のカスタマイズ
  • 音量 — ダビングされたオーディオと元のオーディオのレベルを調整します

OBSソース

このプラグインは、OBSシーンに追加したターゲット言語ごとに仮想ソースを作成します:

StreamFluent Dub — [言語]

ターゲット言語のダビングされたオーディオトラック

StreamFluent Captions — [言語]

ターゲット言語のライブキャプションオーバーレイ

プラグインでライブ配信する

  1. StreamFluentドックで「接続」をクリックします — ステータスドットが緑色に変わります
  2. ダビングされたオーディオとキャプションソースをOBSシーンに追加します
  3. 通常どおりOBSでプラットフォームへのストリーミングを開始します
  4. ドックでトランスクリプションを監視して、オーディオが処理されていることを確認します
ヒント
OBSプラグインを使用すると、プラットフォームに直接ストリーミングできます。 RTMPリレーも、OBSにコピーするストリームキーも、必要な宛先設定もありません — ログインして開始するだけです。

Chrome拡張機能

StreamFluent Chrome拡張機能を使用すると、視聴者はあらゆるライブストリームをリアルタイムで自分の言語に吹き替えられた状態で視聴できます。

仕組み

この拡張機能は、Twitch、YouTube、Kick、Rumble、およびその他のストリーミングサイトで動作します。ストリームの音声をキャプチャし、StreamFluentのAIパイプラインを介して送信し、選択した言語で吹き替えられた音声を再生します。すべて1秒未満の遅延でリアルタイムで行われます。

インストール

  1. Chromeウェブストアにアクセスします(StreamFluentホームページのリンク)
  2. Chromeに追加をクリックし、インストールを確認します
  3. StreamFluentアイコンがブラウザのツールバーに表示されます

セットアップ

  1. サポートされているストリーミングサイトのツールバーにあるStreamFluentアイコンをクリックします
  2. StreamFluentアカウント(Google、Twitch、Kick、またはメール)でログインします
  3. ソース言語(ストリーマーが話している言語)を選択します
  4. ターゲット言語(聞きたい言語)を選択します
  5. 吹き替え音声の声を選択します
  6. 吹き替えを開始をクリックします

機能

吹き替え音声のオン/オフを個別に切り替え
ライブ字幕のオン/オフを個別に切り替え
1秒未満の遅延
Twitch、YouTube、Kick、Rumbleなどで動作
ヒント
ストリーム音声とスピーカー間のフィードバックを避けるため、拡張機能を使用する際はヘッドホンを使用してください。

RTMPリレー

RTMPリレーは、すべてのプランで利用可能な代替接続方法です。OBSプラグインを使用する代わりに、ストリーミングソフトウェアをStreamFluentのインジェストサーバーに向けることができます。オーディオを処理し、設定された宛先に吹き替えストリームを配信します。

仕組み

完全なRTMPストリーム(オーディオ+ビデオ)がStreamFluentのインジェストサーバーに送信されます。オーディオとビデオを分離します。ビデオは再エンコードせずに転送され、オーディオはAIパイプラインを介して処理されます。翻訳された各オーディオトラックは、元のビデオとリミックスされ、対応する宛先にプッシュされます。

OBS Studioの設定

  1. OBSを開く → 設定 → ストリーム → サービス:カスタム
  2. サーバーをrtmp://ingest.streamfluent.ai/liveに設定
  3. ダッシュボードからストリームキーを貼り付け
  4. ストリーミング開始をクリック
RTMPストリーム設定
config
Server:     rtmp://ingest.streamfluent.ai/live
Stream Key:  sk_live_xxxxxxxxxxxxxxxxxxxxxxxx

Streamlabs Desktopの設定

  1. Streamlabs Desktopを開く → 設定(歯車アイコン)→ ストリーム
  2. ストリームタイプをストリーミングサービスに設定
  3. サービスを選択:カスタム
  4. サーバーをrtmp://ingest.streamfluent.ai/liveに設定
  5. StreamFluentダッシュボードからストリームキーを貼り付けます
  6. 完了をクリックし、ライブを開始
ヒント
RTMPストリームキーはアカウントに固有のものです。ダッシュボードのストリーム設定ページで確認してください。決して公開しないでください。

配信先

RTMPリレーでは、StreamFluentダッシュボードで配信先を設定します。配信先とは、言語、プラットフォーム、ストリームキーの組み合わせのことです。

  1. ダッシュボードの配信先に移動
  2. 配信先を追加をクリック
  3. 吹き替えのターゲット言語を選択
  4. プラットフォームを選択(Twitch、YouTube、Kick、またはRumble)
  5. チャンネル名とストリームキーをプラットフォームから入力
  6. いつでも配信先を有効または無効にできます

ストリームキーの場所

Twitch: ダッシュボード → 設定 → ストリーム → プライマリーストリームキー

YouTube: YouTube Studio → ライブ配信 → ストリーム設定 → ストリームキー

Kick: ダッシュボード → 設定 → ストリームキー

Rumble: Rumble Studio → ストリーム設定 → ストリームURLとキー

追加できる宛先の数はプランによって異なります。Freeは1つ、Basicは1つ、Starterは最大2つ、Pro以上は無制限の宛先が可能です。

最終配信先

最終配信先は、翻訳されていない元のストリームをメインチャンネルに転送します。StreamFluent はエンコーダーとプラットフォームの間に位置し、翻訳されたバージョンは言語配信先に送信され、オリジナルはメインチャンネルに送信されます。

OBSStreamFluentメインチャンネル

プラットフォームに直接配信する代わりに、StreamFluent に配信します。翻訳先のオーディオを処理し、同時にオリジナルをメインチャンネルに中継します。

  1. ダッシュボードのストリーム設定に移動します
  2. 最終配信先をオンにします
  3. メインプラットフォーム(Twitch、YouTube、Kick、Rumble、またはカスタム RTMP URL)を選択します
  4. メインチャンネルのストリームキーを入力してください
ヒント
Final Destinationを有効にすると、StreamFluentのRTMPサーバーにストリーミングするだけで済みます。メインチャンネルとすべての翻訳先に同時に転送します。つまり、1つのストリーム入力で、複数のストリーム出力が可能です。
Final Destinationは、組み込みのプラットフォーム以外の宛先に対して、カスタムRTMP URLをサポートしています。有効なRTMPエンドポイントとストリームキーを入力してください。

ソース言語

ソース言語は、あなたが話す言語をStreamFluentに伝えます。これは、音声認識、翻訳方向、およびパススルー検出を駆動します。

ソース言語の設定

構成

OBSプラグインのドックまたはダッシュボードのストリーム設定(RTMPリレーの場合)でソース言語を設定します。これにより、StreamFluentにマイクの音声がどの言語であるかを伝え、パイプライン全体を駆動します。

  • 音声テキスト変換 — 認識エンジンはソース言語用に構成されています
  • 翻訳 — テキストはソース言語から各ターゲット言語に翻訳されます
  • パススルー — ソース言語と一致するターゲット言語は、ダビングを完全にスキップします

ユースケースの例

シナリオソース言語ターゲット言語
グローバルな視聴者にリーチする英語話者英語スペイン語、日本語、韓国語など
英語の視聴者にストリーミングする日本語話者日本語英語、韓国語、中国語
吹き替え版とオリジナル版のチャンネルを持つ韓国のストリーマー韓国語英語、日本語 + 韓国語(パススルー)
ヒント
サポートされている32の言語はすべて、ソースとターゲットの両方として機能します。日本語のスピーカーは、英語、スペイン語、韓国語の視聴者にストリーミングできます。英語のスピーカーが日本語、スペイン語、韓国語の視聴者にストリーミングするのと同じくらい簡単です。

オーディオ設定

出力で元のオーディオとダビングされたオーディオをどのようにミックスするかを制御します。

設定デフォルト説明
オリジナル音量20%ダビングされた出力における元の声の音量
吹き替え音量100%AIによる吹き替え音声出力の音量
オートダッキングオン吹き替え音声がアクティブなときに、オリジナル音声を自動的に下げます
ノイズリダクション音声認識前の音声プリプロセッシング。オプション:オフ、弱、強。よりクリーンな文字起こしのためにバックグラウンドノイズを低減します。
ヒント
元の音量を10〜20%に保ち、視聴者があなたの本当の声を聞いて信憑性を感じられるようにし、吹き替えトラックが重労働を行います。

キャプション/字幕

ライブ翻訳されたキャプションをストリームに追加します。キャプションはダビングとは独立して動作します。単独で、ダビングと一緒に、またはまったく使用しないこともできます。

キャプションを有効にする

構成

OBSプラグインのドックまたはダッシュボードのストリーム設定でキャプションを切り替えます。キャプションはすべてのプランで無制限です。

キャプション設定

設定オプション説明
位置下部中央/上部中央ビデオにキャプションが表示される場所
フォントサイズ16px – 48pxキャプションテキストのサイズ(デフォルトは38px)
背景色任意の16進数カラーキャプションボックスの背景色(デフォルトは黒)
背景の不透明度0.0 – 1.0キャプション背景の透明度(デフォルトは0.7)
フォントの色任意の16進数カラーキャプションテキストの色(デフォルトは白)
フォントNoto Sans CJK / その他キャプションのフォントファミリー
キャプションの言語翻訳済み / オリジナルキャプションを翻訳された言語で表示するか、ソース言語で表示するか

キャプション言語モード

キャプション言語の設定は、キャプションテキストが表示される言語を制御します。

モード動作おすすめ
翻訳済みキャプションは各ターゲット言語で表示されます。スペイン語の出力にはスペイン語のキャプションが表示され、日本語の出力には日本語のキャプションが表示されます。視聴者がすべて自分の言語で見ることができる、完全にローカライズされたストリーム
オリジナルキャプションはソース言語のままです。音声はダビングされますが、字幕は元のままです。言語を学習している視聴者向けのダビングされた音声+元の言語の字幕

一般的な組み合わせ

吹き替え音声 + 翻訳字幕

完全なローカリゼーション — 視聴者は自分の言語で聞いて読みます。

吹き替え音声 + オリジナル字幕

ダビングされた音声と元の字幕 — アニメスタイルのストリームや言語学習者に最適です。

元の音声+翻訳されたキャプション

翻訳された字幕付きのあなたの本当の声 — 本物の声を好む視聴者向け。

ヒント
キャプションとダビングは相性が抜群です。ダビングで元のキャプションモードを試して、視聴者がダビングされた音声を聞きながら元の言語で読み進めることができるアニメスタイルの体験を実現してください。

ライブ配信を開始する

設定が完了すると、StreamFluent でのライブ配信は数回クリックするだけです。

OBSプラグインを使用する場合

  1. 1StreamFluentドックで「接続」をクリックし、緑色のステータスドットが表示されるまで待ちます
  2. 2吹き替えられた音声とキャプションのソースがシーンにあることを確認します
  3. 3通常どおり、OBS でプラットフォームへのストリーミングを開始します
  4. 4ドックで文字起こしフィードを監視し、音声が処理されていることを確認します

RTMP リレーを使用

  1. 1OBS ストリームの出力先が StreamFluent の RTMP サーバーを指していることを確認します
  2. 2宛先がダッシュボードで設定されていることを確認します
  3. 3OBS で [ストリーミング開始] をクリックします
  4. 4ダッシュボードでライブモニターを開き、リアルタイムのステータスを確認します
ヒント
他の出力や元のブロードキャストに影響を与えることなく、ストリーム中に個々の言語を有効または無効にできます。

ライブモニター

ダッシュボードのライブモニターには、すべてのアクティブな言語出力、ライブトランスクリプション、および吹き替えられたオーディオを聞く機能のリアルタイムの概要が表示されます。

言語カード

アクティブな各言語は、ライブメトリックを含むカードとして表示されます。ストリームの途中で個々の言語を有効または無効にできます。

オーディオレベルリアルタイムVUメーター
視聴者数チャンネルごとのカウント
レイテンシーパイプラインの遅延
ヘルスパイプラインのステータス

ライブ文字起こしフィード

リアルタイムのトランスクリプションパネルには、StreamFluent が何を聞いて翻訳しているかが表示されます。中間(進行中)のテキストは、確定するまで薄いテキストで表示されます。

言語タブ

トランスクリプションフィードの上にあるタブバーを使用して、翻訳された言語を切り替えます。各タブには、あなたのスピーチがその言語にリアルタイムで翻訳されて表示されます。「オリジナル」タブには、翻訳されていないスピーチが表示されます。

利用可能な言語タブは、アクティブなターゲット言語と一致します。

TTSオーディオ再生

TTSボタンをクリックすると、選択した言語の吹き替えられたオーディオをブラウザで直接聞くことができます。これにより、ストリームを切り替えることなく、翻訳された視聴者が何を聞いているかを監視できます。

新しいトランスクリプションのチャンクが到着すると、オーディオクリップが再生されます。いつでもTTSをオフにして、再生をミュートできます。

ヒント
TTS再生を使用して、ストリーム中の翻訳品質をスポットチェックします。異なる言語タブを選択して、あなたの声がスペイン語、日本語、またはその他のアクティブな言語でどのように聞こえるかを確認してください。
警告
言語出力のヘルスが低下している場合は、ネットワーク接続とビットレートの設定を確認してください。

プランと利用制限

StreamFluentは使用量ベースの価格設定を使用しています。キャプションはすべてのプランで無制限です。各プランには、毎月割り当てられた吹き替え時間(分)が含まれています。無料プランには上限があり、有料プランでは従量制の超過料金が可能です。

リソース無料Basic($9.99/月)スターター(月額$27.99)Pro(月額$67.99)スケール(月額$249.99)
字幕込み無制限無制限無制限無制限無制限
吹き替え音声込み3時間10時間25時間80時間250時間
言語1最大2最大3最大715+
送信先 (RTMP)11最大2無制限無制限
超過した場合上限あり従量課金従量課金従量課金従量課金
吹き替えの超過$7.20/時間$7.20/時間$6.00/時間$4.80/時間
利用制限設定可能設定可能設定可能設定可能
キャプションのカスタマイズ
カスタムボイスTTS
マルチ配信先出力
RTMPリレー
音声クローン
優先サポート
正確な計測:ストリームのウォールクロック時間ではなく、実際の処理時間を計測します。ダビングされた分数は、言語ごとに再生されるTTSオーディオの秒数をカウントします。したがって、5つの言語を使用する10分のストリームは、50ダビング分になります。一般的な1時間のストリームでは、言語ごとに約15ダビング分を使用します。
ヒント
有料プランには、月間の超過料金を制限するための設定可能な利用制限が含まれています。「設定」→「月間利用制限」のダッシュボードで設定してください。

API概要

すべてのAPIルートは/api/にあり、JWT CookieまたはBearerトークンによる認証が必要です。

認証

リクエストヘッダー
http
Authorization: Bearer your_api_token_here

APIトークンは、ダッシュボード → 設定 → APIキーから取得してください。トークンはお客様のアカウントにスコープされ、いつでも再生成できます。

送信先

GET
/api/destinations

設定されたすべての送信先をリスト表示

POST
/api/destinations

新しい送信先を作成

PATCH
/api/destinations/:id

送信先を更新

DELETE
/api/destinations/:id

送信先を削除

音声プロファイル

GET
/api/voice

現在の音声プロファイルと設定を取得

PATCH
/api/voice

音声設定を更新

POST
/api/voice/upload

音声サンプルをアップロード

DELETE
/api/voice

音声プロファイルを削除

Stream Config

GET
/api/stream/config

ストリーム構成を取得

PUT
/api/stream/config

ストリーム構成を更新

POST
/api/stream/config/regenerate-key

新しいストリームキーを生成

Sessions

GET
/api/sessions

ストリームセッションをリスト表示(ページネーション)

GET
/api/sessions/:id

詳細を含む単一のセッションを取得

Usage

GET
/api/usage

当月の使用量を取得(キャプション時間、吹き替え時間、超過分)