Πρόσθετο OBS για Ζωντανή Μετάφραση Φωνής: Πώς να Κάνετε Ντουμπλάζ στο Stream σας σε Πραγματικό Χρόνο
Matt McElligott
OBS Plugin για Μετάφραση Φωνής σε Πραγματικό Χρόνο: Πώς να Κάνετε Dub στο Stream Σας
Το OBS έχει ένα plugin για τα πάντα. Υπάρχουν plugins για ειδοποιήσεις, plugins για μεταβάσεις σκηνών, plugins για εικονικές κάμερες, plugins για φίλτρα ήχου.
Για μετάφραση, οι περισσότεροι streamers καταφεύγουν πρώτα στα plugins που βασίζονται σε υπότιτλους. LocalVocal. Polyglot OBS. Δουλεύουν. Εμφανίζουν κείμενο στην οθόνη.
Αλλά τα plugins υπότιτλων και τα plugins μετάφρασης φωνής είναι διαφορετικά προϊόντα. Αυτός ο οδηγός καλύπτει την πραγματική μετάφραση φωνής: τι παράγει, πώς λειτουργεί στο OBS και πώς να το ρυθμίσετε.
Πώς η Μετάφραση Φωνής Διαφέρει από τα Plugins Υποτίτλων
Τα plugins υπότιτλων λαμβάνουν τη φωνή σας, την επεξεργάζονται μέσω αναγνώρισης ομιλίας και εμφανίζουν μεταφρασμένο κείμενο στην οθόνη. Οι θεατές σας διαβάζουν τη μετάφραση.
Τα plugins μετάφρασης φωνής κάνουν κάτι διαφορετικό. Λαμβάνουν τη φωνή σας, την επεξεργάζονται μέσω μιας μηχανής μετάφρασης και σύνθεσης ομιλίας και εξάγουν ένα νέο κομμάτι ήχου σε μια άλλη γλώσσα. Οι θεατές σας ακούνε τη μετάφραση.
Αυτή η διάκριση έχει μεγαλύτερη σημασία από ό,τι φαίνεται.
Οι φυσικοί ομιλητές οποιασδήποτε γλώσσας δεν παρακολουθούν gaming streams διαβάζοντας υπότιτλους. Ακούνε. Εάν βάλετε αγγλικούς υπότιτλους σε ένα γαλλικό stream, μερικοί Άγγλοι θεατές θα το δοκιμάσουν. Οι περισσότεροι θα φύγουν μετά από λίγα λεπτά. Το να διαβάζεις ενώ παρακολουθείς gameplay είναι δουλειά.
Εάν δώσετε στους ίδιους Άγγλους θεατές μια ροή ήχου που ακούγεται σαν αγγλικά, μένουν. Το stream είναι απλώς ένα stream για αυτούς. Στη γλώσσα τους.
Πώς Λειτουργεί το StreamFluent OBS Plugin
Το StreamFluent είναι ένα plugin ζωντανής μεταγλώττισης φωνής για το OBS Studio. Εγκαθίσταται όπως κάθε άλλο OBS plugin και ενσωματώνεται απευθείας στον μίκτη σας.
Μόλις εγκατασταθεί:
- Νέες πηγές ήχου εμφανίζονται αυτόματα στον μίκτη OBS. Επισημαίνονται ως "SF Dub. English" ή "SF Dub. Spanish" ή όποιες γλώσσες διαμορφώσετε.
- Κάθε πηγή είναι μια μεταγλωττισμένη έκδοση σε πραγματικό χρόνο της εισόδου του μικροφώνου σας.
- Προσθέτετε αυτήν την πηγή σε μια ξεχωριστή σκηνή ή τη δρομολογείτε σε μια δεύτερη έξοδο stream.
- Το cloud επεξεργάζεται τη φωνή σας και επιστρέφει μεταγλωττισμένο ήχο με καθυστέρηση μικρότερη του 1 δευτερολέπτου.
Το κύριο stream σας δεν επηρεάζεται. Ακούγεστε ακόμα ακριβώς όπως ο εαυτός σας στο κύριο κανάλι σας. Ο μεταγλωττισμένος ήχος πηγαίνει μόνο στον προορισμό που διαμορφώνετε.
Εγκατάσταση Βήμα προς Βήμα
-
Κατεβάστε το plugin. Μεταβείτε στο streamfluent.ai και κατεβάστε το OBS plugin για το λειτουργικό σας σύστημα.
-
Μετακινήστε το στον φάκελο plugins του OBS. Στα Windows:
C:\Program Files\obs-studio\obs-plugins\64bit. Σε Mac:~/Library/Application Support/obs-studio/plugins. -
Επανεκκινήστε το OBS Studio. Το plugin φορτώνει κατά την εκκίνηση.
-
Νέες πηγές εμφανίζονται αυτόματα. Στον πίνακα Πηγές, θα δείτε πηγές ήχου StreamFluent για κάθε διαμορφωμένη γλώσσα.
-
Διαμορφώστε το γλωσσικό σας ζεύγος. Ανοίξτε τον πίνακα ρυθμίσεων StreamFluent στο OBS. Ορίστε τη γλώσσα προέλευσης και μία ή περισσότερες γλώσσες προορισμού.
-
Δρομολογήστε τον μεταγλωττισμένο ήχο. Προσθέστε την πηγή μεταγλωττισμένου ήχου σε μια δεύτερη έξοδο stream στις Ρυθμίσεις OBS. Αυτή η έξοδος δείχνει στο κανάλι της δεύτερης γλώσσας σας στο Twitch, το YouTube ή οποιονδήποτε προορισμό RTMP.
Συνολικός χρόνος εγκατάστασης: περίπου 10 λεπτά για την πρώτη διαμόρφωση.
Τι Μεταφράζεται
Το StreamFluent μεταφράζει την εισαγωγή φωνής σας. Συγκεκριμένα:
- Το μικρόφωνό σας. Όλα όσα λέτε υποβάλλονται σε επεξεργασία.
- Όχι ήχος παιχνιδιού. Τα ηχητικά εφέ, η μουσική, οι διάλογοι εντός του παιχνιδιού παραμένουν στην αρχική γλώσσα στο μεταγλωττισμένο κανάλι.
- Όχι ήχος συστήματος. Η μουσική υπόκρουση από το stream σας παραμένει αμετάβλητη.
Αυτό είναι σκόπιμο. Ο ήχος του παιχνιδιού σε άλλη γλώσσα θα ήταν αποπροσανατολιστικός για τους θεατές. Τα σχόλιά σας είναι αυτά που χρειάζονται μετάφραση. Ο ήχος του παιχνιδιού ακούγεται το ίδιο για όλους.
Εάν πείτε μια φράση παιχνιδιού στα αγγλικά και το stream σας μεταγλωττίζεται στα ισπανικά, η φωνή σας το λέει στα ισπανικά. Ο ήχος του παιχνιδιού παίζει στην αρχική του γλώσσα από κάτω.
Καθυστέρηση και Ποιότητα
Οι αριθμοί:
- Καθυστέρηση από άκρο σε άκρο: Κάτω από 1 δευτερόλεπτο.
- Γλώσσες: 32.
- Επιβάρυνση CPU: Κάτω από 2%. Όλη η βαριά επεξεργασία γίνεται στο cloud.
- Κλωνοποίηση φωνής: Διαθέσιμο στο επίπεδο Pro. Η μεταγλωττισμένη φωνή εκπαιδεύεται σε ένα σύντομο δείγμα της φωνής σας. Ακούγεται σαν εσάς, όχι σαν μια γενική μηχανή μετατροπής κειμένου σε ομιλία.
- Συμβατότητα OBS: Λειτουργεί με OBS Studio 28 και άνω και Streamlabs OBS.
Το νούμερο κάτω από 2% CPU έχει σημασία σε μηχανές streaming που ήδη υπερθερμαίνονται. Τα plugins υπότιτλων όπως το LocalVocal εκτελούν το Whisper τοπικά, το οποίο μπορεί να αυξήσει σημαντικά τη χρήση της CPU σε ασθενέστερες μηχανές. Το StreamFluent εκφορτώνει τα πάντα.
Συχνές Ερωτήσεις
Λειτουργεί σε Mac, Windows και Linux; Ναι. Το plugin είναι διαθέσιμο και για τα τρία. Τα Mac και τα Windows είναι τα πιο δοκιμασμένα. Η υποστήριξη Linux είναι διαθέσιμη αλλά νεότερη.
Μπορώ να το χρησιμοποιήσω στο Streamlabs OBS; Ναι. Το Streamlabs OBS υποστηρίζει τυπικά OBS plugins. Η διαδρομή εγκατάστασης είναι ελαφρώς διαφορετική, αλλά το plugin λειτουργεί με τον ίδιο τρόπο.
Πόση CPU χρησιμοποιεί; Κάτω από 2% στην τοπική σας μηχανή. Η επεξεργασία μετάφρασης γίνεται στην υποδομή cloud του StreamFluent, όχι στον υπολογιστή σας.
Τι γίνεται αν θέλω και υπότιτλους; Εκτελέστε το LocalVocal παράλληλα με το StreamFluent. Το LocalVocal χειρίζεται τους υπότιτλους στο κύριο stream σας. Το StreamFluent χειρίζεται τον μεταγλωττισμένο ήχο στο δεύτερο κανάλι σας. Και τα δύο εκτελούνται ταυτόχρονα χωρίς σύγκρουση.
Τι συμβαίνει αν η σύνδεση διακοπεί; Η πηγή μεταγλωττισμένου ήχου σιωπά στο δεύτερο κανάλι. Το κύριο stream σας δεν επηρεάζεται. Το plugin επανασυνδέεται αυτόματα όταν αποκατασταθεί η σύνδεση.
Μπορώ να κάνω dub σε περισσότερες από μία γλώσσες ταυτόχρονα; Ναι. Διαμορφώστε πολλές γλώσσες προορισμού στις ρυθμίσεις StreamFluent. Κάθε γλώσσα αποκτά τη δική της πηγή ήχου στον μίκτη OBS. Δρομολογήστε κάθε μία σε μια διαφορετική έξοδο stream.
Δοκιμάστε το StreamFluent Δωρεάν. Περιλαμβάνονται 3 ώρες, χωρίς πιστωτική κάρτα.