Was macht Lange-Video-Sprache?
Stufe 7 des Langvideo-Workflows. Ausgabe: ein Ordner mit Audiodateien, eine pro gesprochener Zeile, jede benannt nach Szene und Sprecher. Oder die Entscheidung, dass das Video keine Sprache benötigt.
Eine Szene bedeutet ein Clip des Skripts (eine Einstellung, maximal 10 Sekunden), durchnummeriert in der Reihenfolge des Videos, wie in den vorherigen Stufen.
Bevor Sie beginnen
- Finden Sie das Projekt in
~/.long-video/projects/<slug>/. Erfordertvideo-script.mdmitstatus: approvedundfilm-style.md. - Laden Sie die Projektkonfiguration: Sprache, Sprachquelle und -anbieter (
audio.voiceover),providers.tts, Genehmigungsstufe, Budget. - Lesen Sie den Sprachmodus und die Stimmbeschreibungen aus
film-style.md. - Wenn
audio/odervoice-scripts/bereits existieren, fragen Sie: fortsetzen (auflisten, was erledigt ist) oder neu starten.
Schritt 1: Benötigt das Video Sprache?
Überlegen Sie es sich, bevor Sie fragen. Überprüfen Sie:
- den Sprachmodus in
film-style.md(Erzähler, Charaktere, gemischt), audio.voiceover.sourcein der Konfiguration (none,self-recorded,cloud-tts,local-tts),- wie viele Erzähl- oder Dialogzeilen das Skript enthält und in wie vielen Szenen.
Geben Sie dann eine Empfehlung mit Begründung und bitten Sie um Bestätigung. Beispiel: „Das Skript hat 142 Erzählzeilen in 96 von 104 Szenen, und die Konfiguration verwendet Cloud-Text-to-Speech. Ich empfehle ein Video mit Erzählung. Möchten Sie, dass ich die Stimmen erstelle?“
- Wenn das Skript keine gesprochenen Zeilen hat oder die Konfiguration keine Sprachausgabe vorsieht: empfehlen Sie, den Schritt zu überspringen, mit Begründung.
- Genehmigt. Fahren Sie mit Schritt 2 fort.
- Nicht benötigt. Setzen Sie
"voice_mode": "none"und"stage": "voice-skipped"inproject.json. Sagen Sie, dass die späteren Stufen nur Musik und Effekte verwenden werden. Stoppen. - Stimmt der Empfehlung nicht zu. Folgen Sie dem Benutzer. Aktualisieren Sie den Konfigurationshinweis, falls Sprache auf
nonegesetzt war und der Benutzer sie jetzt wünscht.
Erstellen Sie niemals ohne Bestätigung des Benutzers eine Stimme.
Schritt 2: Sprachbesetzung aufbauen
- Listen Sie jeden Sprecher auf: den Erzähler (falls vorhanden) und jeden Charakter mit Dialog. Zählen Sie die Zeilen für jeden.
- Nehmen Sie für jeden Sprecher die Stimmbeschreibung aus
film-style.md(Alter, Tonfall, Akzent, Geschwindigkeit). Fehlt eine Beschreibung, schlagen Sie eine aus der Charakterbeschreibung invisual-bible.mdvor und markieren Sie sie als „vorgeschlagen“. - Zeigen Sie die Besetzung als Tabelle an: Sprecher-ID, Anzahl der Zeilen, Stimmbeschreibung. Bitten Sie den Benutzer um Bestätigung oder Änderung.
- Sprecher-IDs:
narratoroder die Charakter-ID ohne das Präfixchar-(z. B. wirdchar-marazumara). Diese IDs werden in Dateinamen verwendet.
Schritt 3: Wählen, wie das Audio erstellt wird
Fragen Sie: „Soll Claude die Stimmen generieren, oder machen Sie sie selbst (aufnehmen oder Ihr eigenes Tool verwenden)?“
- Claude generiert. Gehen Sie zu Schritt 4.
- Ich mache sie. Gehen Sie zu Schritt 6.
- Beides. Schreiben Sie die Sprachskripte (Schritt 6) und generieren Sie auch (Schritt 4).
- Wenn
audio.voiceover.sourceself-recordedist, gehen Sie direkt zu Schritt 6.
Schritt 4: Sprachwerkzeug finden und Hörproben erstellen
Lesen Sie references/voice-generation.md. Kurz gesagt:
- Verwenden Sie die in der Konfiguration gespeicherte Methode (
providers.tts), falls vorhanden. Testen Sie sie. - Suchen Sie nach verbundenen Werkzeugen in dieser Sitzung, die Sprache generieren (ein ElevenLabs MCP oder ähnliches, oder Fähigkeiten mit Sprachwerkzeugen).
- Überprüfen Sie die Umgebungsvariablen für API-Schlüssel auf dem Gerät. Geben Sie nur „gesetzt“ oder „nicht gesetzt“ aus.
- Überprüfen Sie lokale Text-to-Speech-Werkzeuge.
- Wenn nichts gefunden wird, fragen Sie, ob der Benutzer einen API-Schlüssel (als Umgebungsvariable, niemals im Chat eingefügt), einen MCP-Server zum Verbinden oder eine Sprachseite im Browser hat. Oder gehen Sie zu Schritt 6.
Hörproben zuerst. Generieren Sie niemals das vollständige Audio, bevor der Benutzer die Stimmen genehmigt hat.
- Wählen Sie für jeden Sprecher eine Stimme, die zur Beschreibung passt. Listen Sie die Stimmen des Werkzeugs auf und wählen Sie daraus. Verwenden Sie niemals eine Stimmen-ID aus dem Gedächtnis. Wenn das Werkzeug eine neue Stimme aus einer Beschreibung entwerfen kann, bieten Sie das für schwer zu treffende Stimmen an.
- Erstellen Sie eine kurze Hörprobe pro Sprecher (5 bis 15 Sekunden). Verwenden Sie eine echte Zeile aus dem Skript, die dieser Sprecher sagt, in der konfigurierten Sprache. Für den Erzähler verwenden Sie die Eröffnungszeilen. Fügen Sie den Vortragshinweis ein, falls die Zeile einen hat.
- Speichern Sie die Hörproben in
audio/samples/alssample_<sprecher>.mp3. - Präsentieren Sie jede Hörprobe mit dem Sprecher, dem Stimmnamen und der Zeile. Bitten Sie den Benutzer um Genehmigung oder fordern Sie eine andere Stimme an. Wenn der Benutzer eine andere Stimme wünscht, erstellen Sie eine neue Hörprobe (einzeln, keine Batch-Wiederholungen). Wiederholen Sie, bis jeder Sprecher genehmigt ist.
- Notieren Sie die genehmigten Stimmen in
voice-cast.md(Sprecher, Stimmname, Stimmen-ID, Einstellungen, Hörprobedatei). Aktualisieren Sie die Stimmliste infilm-style.mdentsprechend.
Wiederholen Sie keinen Generierungsaufruf stillschweigend. Jeder Aufruf kann erneut Kosten verursachen.
Schritt 5: Zeilen generieren
- Lesen Sie
references/voice-script-format.md. Erstellen Sie die Zeilenliste aus dem Skript: ein Eintrag pro gesprochener Zeile, in Szenenreihenfolge. - Teilen Sie dem Benutzer die Anzahl der Zeilen, die gesamte Sprechzeit und die ungefähren Kosten mit. Fragen Sie vor dem Start. Bieten Sie an, mit einem Bereich zu beginnen, z. B. Szenen 1 bis 10.
- Testszene. Generieren Sie die erste Szene mit Sprache. Spielen Sie sie ab oder melden Sie ihre Dauer. Fragen Sie, ob die Auslieferung richtig ist. Korrigieren Sie zuerst die Einstellungen.
- Generieren Sie in Szenenreihenfolge mit den genehmigten Stimmen. Wenden Sie die Vortragshinweise an. Verwenden Sie die Aussprachehinweise aus der Zeilenliste.
- Speichern Sie jede Zeile als
audio/lines/szene-<NNN>_<sprecher>_<NN>.<erweiterung>. Überschreiben Sie niemals eine Datei ohne zu fragen. - Messen Sie nach jeder Datei ihre Dauer mit
ffprobe. Vergleichen Sie sie mit der Szenendauer im Skript (siehe das Format-Referenz für die Passungsregeln). Notieren Sie das Ergebnis. - Wenn eine Zeile nicht in ihre Szene passt, ändern Sie nicht die Wörter. Bieten Sie Optionen an: eine etwas schnellere Auslieferung (maximal 10 Prozent), eine längere Szene (immer noch innerhalb des 10-Sekunden-Limits) oder das Aufteilen der Zeile auf zwei Szenen mit Zustimmung des Benutzers.
- Auf einmal oder einzeln: Fragen Sie den Benutzer. Einzeln spielt das Ergebnis jeder Zeile ab, wartet auf Genehmigung oder eine Wiederholungsanfrage.
- Wenn das Werkzeug sein eigenes Audio in den Videoclips erstellt (Lippensynchronisation), fragen Sie, ob dieses Audio behalten oder diese Dateien verwendet werden sollen. Notieren Sie die Antwort in
audio/status.md.
Wenn die Generierung fehlschlägt oder der Benutzer ablehnt, fallen Sie für die verbleibenden Szenen auf Schritt 6 zurück.
Schritt 6: Sprachskripte für den Benutzer
- Erstellen Sie
audio/lines/für die fertigen Audiodateien undvoice-scripts/für die Zeilenlisten. Zeigen Sie die vollständigen Pfade an. - Schreiben Sie Stapeldateien von 20 Szenen (
szenen-001-020.md) undvoice-scripts/index.mdgemäß dem Format-Referenz. Jede Zeile enthält:- den zu speichernden Dateinamen:
audio/lines/szene-007_erzaehler_01.mp3 - den Sprecher und die Stimmbeschreibung
- den genauen Text, den Vortragshinweis und die Aussprachehinweise
- die Szenendauer, damit das Audio darauf überprüft werden kann
- den zu speichernden Dateinamen:
- Fragen Sie: auf einmal oder einzeln.
- Auf einmal. Zeigen Sie die Ordnerpfade und ein Beispiel an. Der Benutzer arbeitet die Stapeldateien durch.
- Einzeln. Zeigen Sie die erste Zeile mit ihrem Dateinamen an. Warten Sie, bis der Benutzer sagt, dass sie gespeichert ist. Überprüfen Sie, ob die Datei mit dem richtigen Namen existiert, und messen Sie ihre Dauer. Zeigen Sie dann die nächste Zeile an.
- Bieten Sie an, den Ordner jederzeit zu überprüfen: Vergleichen Sie Dateien mit dem Index und listen Sie fehlende, falsch benannte oder zu lange Audiodateien auf.
Schritt 7: Status und Abschluss
- Halten Sie
audio/status.mdaktuell mit der Tabelle aus dem Format-Referenz. Statuswerte:pending,done,needs-manual,skipped. - Aktualisieren Sie
project.json:"stage": "voice-prompts-done"nachdem die Zeilenlisten gespeichert sind, und"stage": "voice-done", wenn jede gesprochene Zeile eine Audiodatei hat und der Benutzer die Sammlung genehmigt. - Teilen Sie dem Benutzer die Pfade von
audio/undvoice-scripts/, die gesamte Sprechzeit im Verhältnis zur Videodauer und mit, was fehlt oder zu lang ist. - Bieten Sie an, das funktionierende Werkzeug in der Konfiguration (
providers.tts), Methode und Namen, zu speichern. - Bieten Sie an, mit
long-video-sound(Soundeffekte, Atmosphäre und Hintergrundmusik) fortzufahren. Starten Sie dies nur, wenn der Benutzer zustimmt. Starten Sie keine andere spätere Stufe, es sei denn, der Benutzer fragt danach und diese Stufe existiert.
Regeln
- Erstellen Sie niemals Stimmen ohne Bestätigung des Benutzers in Schritt 1.
- Generieren Sie niemals vollständiges Audio, bevor die Hörproben genehmigt sind.
- Ändern Sie niemals die Skriptwörter. Wenn eine Zeile nicht passt, fragen Sie zuerst.
- Verwenden Sie niemals eine Stimmen-ID, die nicht aus der eigenen Stimmenliste des Werkzeugs oder vom Benutzer stammt.
- Fragen Sie niemals nach API-Schlüsseln im Chat. Geben Sie niemals Passwörter ein oder lösen Sie CAPTCHAs in einem Browser.
- Wiederholen Sie keinen Generierungsaufruf stillschweigend. Jeder Aufruf kann erneut Kosten verursachen.
- Benennen Sie niemals eine Datei um, nachdem die Zeilenliste genehmigt ist.
- Halten Sie Chat-Nachrichten kurz. Platzieren Sie vollständige Zeilenlisten in Dateien.