Claude Video Studio
Claude erstellt Videos, indem es Code schreibt, der jedes Frame zeichnet: HTML, CSS und GSAP, gerendert zu MP4 mit HyperFrames. Es generiert keine Pixel wie Sora, Kling oder Veo. Wähle Stile, die Code gut zeichnen kann, und sei bei den anderen ehrlich.
0. Voraussetzungen – zuerst prüfen, nichts ohne Nachfrage installieren
Vor dem ersten Build python3 scripts/check_env.py [--project <Video-Verzeichnis>] ausführen. Es verwendet nur die Standardbibliothek
und installiert nichts. Es gibt aus, was jeder Workflow benötigt, was fehlt, den Installationsbefehl und die ungefähre Größe.
Zeige dem Benutzer die fehlenden Elemente für den gewünschten Workflow und frage, bevor du etwas installierst. Einige Elemente sind groß
(mediapipe mit OpenCV/jax ist etwa 600 MB, headless Chrome etwa 400 MB, Blender etwa 1 GB).
| Workflow | Benötigt | Installation (nur nach Zustimmung des Benutzers) |
|---|---|---|
| Pixel / Flat MV (Kern) | Python 3.9+, ffmpeg + ffprobe, Node 18+, HyperFrames Skills | brew install ffmpeg (oder apt) · npx skills add heygen-com/hyperframes -s '*' -a claude-code -y |
| Beat-Synchronisation von einem echten Song | HyperFrames' music-to-video Skill (dessen analyze-beatgrid.py) + librosa, soundfile, numpy | npx hyperframes skills update music-to-video (im Projekt) · pip install librosa soundfile numpy (~280 MB) |
Voice-Over, Neusynchronisation (redub.py) | edge-tts (+ soundfile für redub) | pip install edge-tts soundfile (~10 MB; benötigt Netzwerk während der Synthese) |
| 2D-Bewegungsübertragung | numpy, scipy, Pillow; ffmpeg mit libvpx-vp9 | pip install -r requirements-2d.txt (~150 MB) |
| 2D-Lippen-/Iris-Prüfungen | mediapipe 0.10.14 (legacy FaceMesh API; Python 3.9–3.12) | pip install -r requirements-face.txt (~600 MB); mediapipe 1.x ist ungetestet |
| Bearbeitung von echtem Filmmaterial | numpy, scipy, Pillow, OpenCV (contrib für den guided filter); noisereduce | pip install -r requirements-edit.txt (~250 MB) · pip install noisereduce |
| Gesichtsmosaik, Personen-Ausschnitte | mediapipe 0.10.14; auf macOS verwenden die Ausschnitte stattdessen Apple Vision (benötigt swiftc von den Xcode-Befehlszeilenwerkzeugen, kein Modell-Download) | pip install -r requirements-face.txt (~600 MB) · xcode-select --install |
| Chinesische Transkription | FunASR + torch (Python 3.10–3.12) | pip install -r requirements-asr.txt (~1 GB; Modelle 1–3 GB von ModelScope beim ersten Durchlauf) |
| 3D / Treiber-Videos | Blender 4.5 LTS | blender.org LTS Download (~1 GB) |
Was sich selbst herunterlädt (vor dem ersten Durchlauf mitteilen):
npx [email protected] …ruft die HyperFrames CLI von npm beim ersten Gebrauch ab. Version einfrieren, damit Neuberechnungen identisch bleiben. Wenn der Skill-Fetch währendinithängt,HYPERFRAMES_SKIP_SKILLS=1setzen.- Der erste
check/snapshot/renderlädt HyperFrames' headless Chrome herunter (etwa 400 MB), wenn es nicht im Cache ist.npx [email protected] browser ensureführt dies vorab aus. - Nichts anderes installiert sich selbst. Die Skripte in
scripts/stoppen mit dem genauen Installationsbefehl, wenn ein Paket oder ffmpeg fehlt, und geben ihre Verwendung mit--helpaus. - Die Skripte der Standardbibliothek benötigen überhaupt keine Pakete:
timed_lyrics.py,align_beats.py,pixel_sprite.pyundcheck_env.py.
Lade /hyperframes für den Kern-Authoring-Vertrag:
npx --yes [email protected] init my-video
1. Wähle zuerst den Stil
Antworte mit dieser Tabelle, bevor du etwas baust. Versprich keinen Stil, der enttäuschen wird.
| Stil | Zuverlässigkeit | Typische Zeit | Verwendung für |
|---|---|---|---|
| Pixel-Art (Charaktere als Sprite-Bögen, Spiel-UI) | ★★★★★ | 2-min MV ≈ 1–2 h | Lyric-MVs, persönliche Geschichten, PSAs, spielartige Erzählungen |
| Flat Cutout / Motion Graphics (Formen, flache Charaktere, kinetischer Text) | ★★★★★ | 1-min ≈ 1,5–2 h | Neuauflagen berühmter Momente, Produkteinführungen, Erklärvideos, Daten |
| 2D-Charakter aus EINER Illustration, KI-Bewegungsübertragung (Kling „动作控制 |