Tilbage til bloggen

StreamFluent: Verdens første AI-stemmeoversættelse i realtid til livestreamere er nu live

S

StreamFluent

16. februar 202613 min læsning0 visninger
StreamFluent: Verdens første AI-stemmeoversættelse i realtid til livestreamere er nu live

Lige nu er en streamer i São Paulo i gang med et af de mest imponerende speedruns, internettet nogensinde har set, et sted på Twitch. Deres kommentarer er elektriske. Deres chat eksploderer. De har 8.000 samtidige seere, og hver eneste af dem taler portugisisk.

På den anden side af planeten vil et engelsktalende publikum på millioner aldrig vide, at denne streamer eksisterer. Ikke fordi indholdet ikke er godt nok. Ikke fordi gameplayet ikke er der. Men på grund af en enkelt, usynlig mur, der har defineret grænserne for online underholdning, siden det første webcam blev tændt: sprog.

I dag river vi den mur ned.

StreamFluent er verdens første real-time AI-stemmedubbing og undertekstplatform, der er bygget specifikt til live streamere. Du streamer én gang, på dit modersmål. StreamFluent lytter, transskriberer, oversætter og giver din stream en ny stemme – på op til 15+ sprog – hver leveret til sin egen kanal på Twitch, YouTube, Kick eller enhver RTMP-kompatibel platform.

Dette er ikke efterproduktionsdubbing. Dette er ikke undertekster, du tilføjer, efter en VOD er uploadet. Dette sker live, med en latenstid på under et sekund, mens du gamer, reagerer eller chatter med dit publikum.

Lad os forklare, hvordan vi kom hertil, hvad vi har bygget, og hvorfor vi mener, at dette ændrer alt for creators.


Problemet: Sprog er den sidste barriere inden for live streaming

Streamingindustrien har løst næsten alle andre distributionsproblemer. Du kan gå live fra dit soveværelse og nå seere på alle kontinenter. Platforme har globale CDN'er, der leverer video på millisekunder. Opdagelsesalgoritmer viser indhold til nye publikummer døgnet rundt. Betalingssystemer lader fans i Tokyo give drikkepenge til en creator i Toronto.

Men sprog? Sprog er stadig en hård mur.

Tænk over tallene. Der er omtrent 2,5 millioner aktive streamere alene på Twitch. Langt de fleste af dem streamer på et enkelt sprog. Engelsk dominerer de vestlige platforme, men de hurtigst voksende streamingfællesskaber er på spansk, portugisisk, japansk, koreansk og hindi. Disse publikummer er massive, engagerede og stort set isolerede fra hinanden.

En spansktalende streamer med utroligt gameplay og en magnetisk personlighed rammer et loft i det øjeblik, deres potentielle seer ikke taler spansk. Det samme gælder omvendt – en engelsk creator med et loyalt fællesskab på 50.000 har stort set ingen rækkevidde ind i det 500 millioner stærke japansktalende internet.

Dette er ikke et lille problem. Det er den største uudnyttede vækstmulighed i hele creator-økonomien. Og indtil nu har løsningerne enten været ikke-eksisterende eller latterligt upraktiske:

  • Manuel oversættelse? Du ville have brug for en menneskelig tolk på et stemmekald, live, for hver stream, på hvert sprog. Alene omkostningerne er uoverkommelige. Latensen gør det umuligt at se.
  • Undertekster efter stream? Bedre end ingenting for VOD'er, men de gør intet for live seertal – hvilket er der, hvor pengene, fællesskabet og momentum er.
  • Browserbaserede undertekstoverlays? Der findes en håndfuld værktøjer, men de håndterer kun tekstundertekster, kræver komplekse OBS plugin-opsætninger og løser ikke det grundlæggende problem: din stemme er stadig på ét sprog.

Streamingverdenen havde brug for noget helt nyt. Et system, der kunne behandle tale, oversætte den og syntetisere en ny stemme – alt i realtid, alt uden at streameren ændrer deres workflow.

Det er det, vi har bygget.


Hvad vi har bygget: Real-Time AI Dubbing til Live Streams

StreamFluent er en real-time AI-pipeline, der sidder mellem din streaming encoder (OBS Studio, Streamlabs eller enhver RTMP-kompatibel software) og dine destinationsplatforme. Her er, hvad der sker, når du går live:

  1. Du streamer normalt på dit modersmål. Intet ved din opsætning ændres, undtagen RTMP-destinations-URL'en i OBS.
  2. StreamFluent indtager din stream via vores RTMP-relæservere. Din video passerer igennem uændret – vi genkoder aldrig din video.
  3. Vores AI-pipeline behandler din lyd i realtid: talegenkendelse transskriberer, hvad du siger, maskinoversættelse konverterer det til dine målsprog, og neural tekst-til-tale syntetiserer et nyt lydspor for hvert sprog.
  4. Hver oversat stream leveres til sin egen destination – en separat Twitch-kanal, YouTube-stream eller Kick-kanal – komplet med det dubbede lydspor og valgfrie indbrændte undertekster.

Resultatet: du streamer én gang. Dit publikum ser med på femten sprog. Hver version lyder naturlig, forbliver synkroniseret og ankommer med en latenstid på under et sekund.

Lad os nedbryde hver del.

Talegenkendelse (STT)

Det første trin i pipelinen er automatisk talegenkendelse. StreamFluents STT-motor behandler din lyd i realtid og konverterer tale til tekst med høj nøjagtighed, selv i støjende gamingmiljøer. Vi har optimeret specifikt til streamingbrugstilfældet – hurtigtalende kommentarer, baggrundsspillyd, overlappende lyde og det generelle kaos i en live udsendelse.

Maskinoversættelse

Når vi har din transskription, konverterer vores oversættelseslag den til dine konfigurerede målsprog. Vi understøtter i øjeblikket 15 sprog: spansk, japansk, portugisisk, fransk, tysk, koreansk, kinesisk (mandarin), italiensk, russisk, arabisk, hindi, tyrkisk, hollandsk, polsk og thai – med flere på vej.

Oversættelsesmotoren er tunet til samtaleagtig, uformel tale – den måde streamere faktisk taler på – ikke det stive, formelle output, du ville få fra en generisk dokumentoversætter.

Neural tekst-til-tale (TTS)

Det er her, magien sker. StreamFluent viser ikke bare oversat tekst. Den taler den. Vores TTS-motor genererer en naturligt lydende stemme på målsproget, syntetiseret i realtid.

På vores Pro plan kan du oprette en tilpasset stemmemodel fra bare en 30 sekunders lydprøve. Systemet lærer karakteristikaene ved din stemme – tone, kadence, energi – og anvender dem på det oversatte output. Din spanske stream lyder som dig, der taler spansk, ikke en generisk robot.

På vores Business plan ruller vi fuld stemmereplikation med bevarelse af følelser ud – den dubbede stemme vil bære din spænding, frustration og humor på tværs af sprog. (Denne funktion er på vej snart, og tidlige testere har kaldt den "uhyggelig".)

Video Passthrough

En kritisk designbeslutning: vi genkoder aldrig din video. Din 1080p60 eller 4K stream passerer gennem vores relæservere bit-for-bit. Vi rører kun lydsporet (og brænder eventuelt undertekstoverlays ind). Dette betyder nul kvalitetstab, minimal tilføjet latenstid og ingen ekstra GPU-omkostninger i din ende.


Sådan fungerer det: Opsætning på under 2 minutter

Vi var besatte af at gøre StreamFluent latterligt let at sætte op. Der er ingen plugins at installere, ingen virtuelle lydkabler at konfigurere, ingen browserkilder at kæmpe med. Her er hele flowet:

Trin 1: Opret din konto

Tilmeld dig på streamfluent.ai med din e-mail, eller opret forbindelse direkte med din Twitch-, YouTube- eller Google-konto. Den gratis version er tilgængelig med det samme – intet kreditkort kræves.

Trin 2: Indstil din stemme

For Pro- og Business-brugere skal du optage en 30 sekunders stemmeprøve direkte i dashboardet. Vores system bruger dette til at opbygge din tilpassede stemmeprofil. Du kan justere talehastigheden (0,5x til 2,0x) og tonehøjden (-12 til +12 semitoner) for at finjustere, hvordan din dubbede stemme lyder.

Gratis versionsbrugere får adgang til vores standard TTS-stemmer af høj kvalitet – stadig naturligt lydende, bare ikke personliggjort til din specifikke stemme.

Trin 3: Tilføj dine destinationer

Det er her, du konfigurerer hvor hvert sprog skal hen. For hvert målsprog angiver du:

  • Sproget (f.eks. spansk, japansk)
  • Platformen (Twitch, YouTube, Kick eller enhver brugerdefineret RTMP-URL)
  • Streamnøglen til den kanal
  • Dubbingtilstanden: fuld AI-dubbing, kun undertekster eller begge dele

Du kan køre så mange destinationer, som din plan tillader – én på den gratis version, op til tre på Pro og ubegrænset på Business.

Trin 4: Tilslut OBS og gå live

Her er den del, der overrasker alle: du ændrer bare din stream-URL i OBS. Det er det.

Gå til OBS Studio → Indstillinger → Stream → vælg "Brugerdefineret..." → indsæt din StreamFluent RTMP-URL og streamnøgle. Disse genereres automatisk i dit dashboard.

Server: rtmp://ingest.streamfluent.ai/live
Streamnøgle: (din unikke nøgle fra dashboardet)

Tryk på "Start Streaming" i OBS. StreamFluent overtager derfra. Din originale stream går til din hovedkanal (hvis du har konfigureret en passthrough-destination), og hver oversat version går til sin respektive platformkanal.

Ingen plugins. Ingen virtuelle lyddrivere. Ingen browserkilder. Hvis din encoder kan outputte RTMP – og det kan stort set alle – fungerer den med StreamFluent.


Undertekster og dubbing: Fuld kontrol, pr. destination

En af de mest efterspurgte funktioner under vores beta var granulær kontrol over undertekster og dubbing på destinationsbasis. Forskellige publikummer har forskellige præferencer, og vi ønskede at give streamere fuld fleksibilitet.

Sådan fungerer det:

Dubbingtilstande

Hver destination kan indstilles til en af tre tilstande:

  • Auto Dub: Hvis destinationssproget er forskelligt fra dit kildesprog, anvendes fuld AI-stemmedubbing. Dette er standardindstillingen og den mest almindelige indstilling.
  • Kun undertekster: Din originale stemme bevares, men oversatte undertekster brændes ind i videoen. Fantastisk til publikummer, der foretrækker at høre den originale stemme, men har brug for oversættelseshjælp.
  • Kun original: Streamen passerer igennem uden dubbing og uden undertekster. Nyttigt til din "hjemme"-sprogsdestination.

Indbrændte undertekster

StreamFluents undertekstsystem gengiver oversat tekst direkte i videofeedet – ingen seer-sideudvidelse eller indstilling kræves. Alle, der ser med, ser underteksterne, uanset deres enhed eller platform.

Du kan tilpasse:

  • Position: Nederst i midten eller øverst i midten
  • Skriftstørrelse: 16px til 48px (standard 24px)
  • Sprog: Undertekster matcher destinationssproget

Undertekster fungerer uafhængigt af dubbing. Du kan køre kun undertekster på nogle destinationer og fuld dubbing på andre. Du kan endda køre begge dele – dubbet lyd med matchende undertekster – for maksimal tilgængelighed.

Lydmiksning

Når dubbing er aktiv, håndterer StreamFluent automatisk lydmiksning:

  • Original lydstyrke: Standard til 20% (din originale stemme bliver en subtil baggrund, der bevarer naturlige streamlyde)
  • Dubbede lydstyrke: Standard til 100%
  • Auto-ducking: Når den dubbede stemme taler, sænkes den originale lyd automatisk. Når der er stilhed (kun gameplay-lyd, ingen tale), kommer den originale lyd op igen.

Alle disse kan justeres pr. stream fra dashboardet.


Bygget til pålidelighed: Hvad sker der, når ting går galt

Live streaming er ubarmhjertig. Hvis noget går i stykker, er der ingen "fortryd". Vi har bygget StreamFluent med denne virkelighed i kernen af enhver arkitektonisk beslutning.

Latens-tilstande

Forskellige brugstilfælde kræver forskellige afvejninger mellem latenstid og kvalitet. StreamFluent tilbyder tre tilstande:

  • Ultra-lav latenstid (< 500ms): Til konkurrencedygtig gaming og hurtig interaktion. Tilgængelig på Business-planen.
  • Balanceret (< 1 sekund): Den anbefalede standard for de fleste streamere. Tilgængelig på Pro og Business.
  • Kvalitet (< 2 sekunder): Prioriterer oversættelsesnøjagtighed over hastighed. Bedst til tale-tungt indhold.

Fallback-adfærd

Hvis AI-pipelinen støder på et problem midt i streamen – et kortvarigt netværksproblem, en kortvarig behandlingsforsinkelse – crasher eller går StreamFluent ikke bare i stilhed. Du konfigurerer, hvad der sker:

  • Pass Through (standard): Den originale, ikke-oversatte lyd udsendes, indtil pipelinen er genoprettet. Dit publikum hører dig på dit modersmål et øjeblik, hvorefter dubbingen genoptages problemfrit.
  • Slå lyden fra: Det dubbede lydspor bliver kortvarigt lydløst. Nyttigt, hvis du hellere vil have stilhed end ikke-oversat lyd.
  • Vis overlay: En kort besked på skærmen angiver, at oversættelse er midlertidigt utilgængelig.

Live overvågningsdashboard

Mens du er live, giver StreamFluent-dashboardet dig et real-time kommandocenter:

  • Status pr. destination: Se, om hvert sprogoutput er sundt, sammen med seertal og latenstid
  • Lydniveauer: Visuelle målere for hver outputstream
  • Live transskriptionsfeed: Se transskriptionen i realtid på alle sprog, med faner til at skifte mellem dem
  • TTS-forhåndsvisning: Lyt til den dubbede lyd direkte i din browser for at verificere kvaliteten
  • Midt-stream-kontroller: Aktiver eller deaktiver individuelle destinationer uden at stoppe din stream

Visionen: En verden, hvor enhver streamer har et globalt publikum

Vi startede StreamFluent, fordi vi mener, at sprog ikke bør bestemme en creators loft.

Internettet skulle være grænseløst. Og på mange måder er det det – du kan se en stream fra hvor som helst i verden, øjeblikkeligt. Men "at se" og "at forstå" er to meget forskellige ting. En seer i Seoul kan teknisk set være i stand til at indlæse en brasiliansk Twitch-kanal, men hvis de ikke kan forstå et ord, der bliver sagt, vil de forlade den på få sekunder.

Dette skaber en usynlig adskillelse. Streamingverdenen er opdelt i sprogsiloer, og creators er fanget inde i dem. En strålende entertainer i Mexico City vil aldrig organisk nå det japanske marked. En koreansk varietystremer med 100.000 loyale følgere har ingen vej til det engelsktalende publikum, der er 10 gange større.

StreamFluent er broen.

Vi forestiller os en fremtid, hvor:

  • En streamer i Buenos Aires går live og underholder samtidig publikummer i Tokyo, Berlin, Mumbai og Los Angeles – alle hører streamen på deres eget sprog, i en stemme, der lyder som creators.
  • Sprog ikke længere er en variabel i opdagelsesalgoritmen. Indholdskvalitet er alt, der betyder noget.
  • Creator-middelklassen udvides globalt, fordi talent er jævnt fordelt på tværs af sprog, men muligheder ikke længere behøver at være det.
  • Flersprogede fællesskaber dannes omkring creators, med chat-oversættelse og interaktion på tværs af sprog som en indbygget funktion (ja, vi arbejder også på det).

Dette er en stor vision. Vi er der ikke endnu. Men med dagens lancering er fundamentet på plads.


Priser: Start gratis, skaler efterhånden som du vokser

Vi har designet StreamFluents priser til at være tilgængelige for creators på alle niveauer.

Gratis plan – $0/måned

  • 30 undertekstminutter og 15 dubbede minutter pr. måned
  • 1 målsprog
  • Standard TTS-stemmer
  • Fuld adgang til live overvågningsdashboardet
  • Intet kreditkort kræves

En typisk 1-times stream bruger cirka 30 minutters underteksttid og 35 minutters dubbingtid (vi måler faktisk talebehandlingstid, ikke vægurstid – så pauser, gameplay-kun segmenter og stilhed tæller ikke). Den gratis plan giver dig nok til at teste en fuld stream og opleve kvaliteten på første hånd.

Pro plan – $29/måned

  • 600 undertekstminutter og 300 dubbede minutter pr. måned (~20 timers streaming)
  • Op til 3 målsprog
  • Brugerdefineret stemmemodel fra en 30 sekunders prøve
  • RTMP-relædistribution til flere platforme
  • Lydmiksningskontroller
  • Konfigurerbar forbrugsgrænse for overforbrug
  • 14-dages gratis prøveperiode

Business plan – $79/måned

  • Ubegrænset undertekstminutter og 1.200 dubbede minutter pr. måned (~80 timers streaming)
  • Ubegrænset målsprog
  • Ultra-lav latenstilstand (< 500ms)
  • Avanceret stemmetuning
  • Stemmereplikation med bevarelse af følelser (kommer snart)
  • Prioriteret support

Enterprise – Brugerdefineret prisfastsættelse

  • Ubegrænset alt
  • Dedikeret relæinfrastruktur
  • Brugerdefineret API-integration
  • SLA-garantier
  • White-label-muligheder

Alle betalte planer bruger præcisionsmåling – vi tæller kun de sekunder, hvor vores AI faktisk arbejder. Hvis du lydløst gamer i 10 minutter, er det 0 undertekstminutter og 0 dubbede minutter. Du betaler for det, du bruger, og intet mere.

Betalte planer inkluderer også en konfigurerbar forbrugsgrænse, så du aldrig bliver overrasket over overforbrugsgebyrer. Indstil den til $0 for at stoppe hårdt ved dine inkluderede minutter, eller fjern loftet helt for uafbrudt streaming.


Prøv det i dag

StreamFluent er live. Den gratis version er tilgængelig lige nu på streamfluent.ai. Intet kreditkort. Ingen forpligtelse. Bare tilmeld dig, indsæt en RTMP-URL i OBS, og stream til verden.

Hvis du er en creator, der nogensinde har spekuleret på, hvordan dit publikum kunne se ud uden en sprogbarriere – er dette dit svar.

Hvis du er en seer, der nogensinde har klikket væk fra en utrolig stream, fordi du ikke kunne forstå sproget – er de dage talte.

Vi har bygget StreamFluent, fordi vi mener, at det bedste indhold skal vinde, uanset hvilket sprog det er på. Og fra i dag kan det det.

Din stemme. Alle sprog. Lad os komme i gang.

Start dubbing gratis →


StreamFluent understøtter Twitch, YouTube, Kick og enhver RTMP-kompatibel platform. I øjeblikket tilgængelig på 15 sprog, og der tilføjes regelmæssigt flere. Spørgsmål? Kontakt os på support@streamfluent.ai eller tjek vores dokumentation.

Comments

Not displayed publicly