Communitygithub.com

Remotion zu HyperFrames portieren

Portiert eine bestehende Remotion (React) Komposition nach HyperFrames HTML. Nur verwenden, wenn der Benutzer explizit nach Portierung/Konvertierung/Migration/Übersetzung einer Remotion-Quelle fragt.

Was ist Remotion zu HyperFrames portieren?

Dieser Skill ermöglicht die automatisierte Übersetzung von Remotion-Videokompositionen (React-basiert) in HyperFrames (HTML + GSAP). Er erkennt und übersetzt typische Remotion-Idiome wie `useCurrentFrame`, `interpolate`, `Sequence`, `Series` und `Spring`, während er nicht unterstützte Muster (z. B. `useState`, `useEffect` mit Abhängigkeiten, asynchrone `calculateMetadata`, externe React-Bibliotheken) ablehnt und stattdessen eine Runtime-Interoperabilität empfiehlt. Der Skill unterstützt eine Reihe von Referenzdateien (API-Map, Timing, Sequenzierung, Medien), die für die Übersetzung geladen werden, und führt nach der Übersetzung eine Validierung mittels SSIM-Grenzwerten durch. Er ist strikt auf eine Richtung ausgelegt: Remotion→HyperFrames. Rückwärtsexporte oder Quellen aus anderen Frameworks (After Effects, Framer Motion, reines React/CSS) liegen außerhalb des Bereichs. Der Skill eignet sich für Entwickler, die bestehende Remotion-Projekte effizient in das HyperFrames-Ökosystem migrieren möchten, ohne visuelle Qualität einzubüßen.

Funktioniert mit~Claude Code~Codex CLI~Cursor
npx skills add https://github.com/1345AbhishekKumar/starter-nextjs/tree/HEAD/.agents/skills/remotion-to-hyperframes

In Ihrer bevorzugten KI fragen

Öffnet einen neuen Chat, in dem dieser Agent-Skill bereits geladen ist.

Dokumentation

Remotion zu HyperFrames

Bestätigen Sie den Pfad, bevor Sie bauen. Verwenden Sie dies nur, um den Quellcode einer bestehenden Remotion (React) Komposition in HyperFrames zu portieren. Eine neue Komposition erstellen (auch wenn sie von einem Remotion-Video inspiriert ist) → die Erstellungs-Workflows /general-video. Nicht im Rahmen (einseitig, nur Remotion): kein Rückwärtsexport (HyperFrames → Remotion oder ein anderes Framework), und eine Nicht-Remotion-Quelle (After Effects, Framer Motion, reines React/CSS) hat keine Remotion-Quelle zu übersetzen → neu erstellen über /general-video. Unsicher, oder nur eine beiläufige Erwähnung von Remotion? Lesen Sie zuerst /hyperframes.

Überblick

Übersetzen Sie Remotion (React-basierte) Videokompositionen in HyperFrames (HTML + GSAP) Kompositionen. Die meisten Remotion-Idiome haben direkte HyperFrames-Entsprechungen – die Übersetzung ist für ~80% typischer Kompositionen mechanisch. Dieser Skill kodiert die Zuordnung und schützt vor den verlustbehafteten 20%, indem er sich weigert, Muster zu übersetzen, die nicht zu HFs seek-basiertem Modell passen, und stattdessen das Runtime-Interoperabilitätsmuster aus PR #214 empfiehlt.

Der Skill wird mit einem gestuften Testkorpus (T1–T4, insgesamt 4 Testfälle) ausgeliefert, der Übersetzungen anhand gemessener SSIM-Schwellenwerte bewertet. Übersetzen Sie nicht ohne die Auswertung durchzuführen – eine Übersetzung, die „richtig aussieht“ aber 0,05 SSIM niedriger als die validierte Basislinie ist, ist stillschweigend falsch.

Wann verwenden

Verwenden Sie diesen Skill NUR, wenn der Benutzer explizit nach einer Migration von Remotion fragt. Beispielhafte Auslösephrasen:

  • „portiere mein Remotion-Projekt zu HyperFrames“
  • „konvertiere diesen Remotion-Code zu HyperFrames“
  • „migriere von Remotion“
  • „übersetze diese Remotion-Komponente“
  • „schreibe dies als HyperFrames HTML um“

Verwenden Sie diesen Skill NICHT, wenn:

  • (a) Der Benutzer eine neue HyperFrames-Komposition erstellt, selbst wenn er ein ähnliches Remotion-Video hat oder A/B-testet.
  • (b) Der Benutzer Remotion beiläufig erwähnt, ohne nach einer Migration zu fragen.
  • (c) Der Benutzer Remotion-Code als Referenzmaterial teilt, anstatt nach einer Übersetzung zu fragen.
  • (d) Der Benutzer nach „demselben Video wie mein Remotion-Video“ fragt, ohne explizit zu bitten, die Quelle zu migrieren – behandeln Sie dies als eine neue HyperFrames-Erstellung.

NICHT UNTERSTÜTZT (ablehnen – dies ist nicht, was dieser Skill tut):

  • Die umgekehrte Richtung. Das Exportieren einer HyperFrames-Komposition zurück zu Remotion (oder zu einem anderen Framework) ist kein Workflow – die Übersetzung ist nur Remotion → HyperFrames. Sagen Sie dies deutlich.
  • Nicht-Remotion-Quellen. Ein After Effects-Projekt (.aep), eine Framer Motion / reines-React / CSS-Animation oder eine andere Quelle eines anderen Tools ist keine Remotion-Komposition – es gibt keine Remotion-Quelle zu übersetzen. Erstellen Sie es nativ über /general-video neu, oder lehnen Sie es ab, wenn HyperFrames es nicht darstellen kann.

Im Zweifelsfall standardmäßig eine native HyperFrames-Komposition mit /general-video (dem allgemeinen HyperFrames-Erstellungsfluss) erstellen.

Workflow

Schritt 1: Linten der Quelle

Führen Sie scripts/lint_source.py über das Remotion-Quellverzeichnis aus. Der Linter erkennt Muster, die nicht sauber übersetzt werden können:

  • Blockierer (ablehnen + Interop empfehlen): useState, useReducer, useEffect/useLayoutEffect mit nicht-leeren Abhängigkeiten, asynchrones calculateMetadata, externe React-UI-Bibliotheken (MUI, Chakra, Mantine, antd, shadcn, Radix, NextUI).
  • Warnungen (übersetzen nach Entfernen des Konstrukts): @remotion/lambda Konfiguration, delayRender, useCallback, useMemo, benutzerdefinierte Hooks.
  • Info (übersetzen mit Hinweis): staticFile, interpolateColors.

Wenn ein Blockierer ausgelöst wird, stoppen. Lesen Sie references/escape-hatch.md und zeigen Sie die Empfehlungsnachricht an. Warnungen stoppen die Übersetzung nicht – entfernen Sie das anstößige Konstrukt in Schritt 3 und notieren Sie die Lücke in TRANSLATION_NOTES.md. Die @remotion/lambda Konfiguration ist der kanonische Warnfall: Der Skill entfernt den Import + die renderMediaOnLambda(...)-Aufrufe, übersetzt aber den Rest der Komposition.

Schritt 2: Planen der Übersetzung

Lesen Sie references/api-map.md – das Verzeichnis jeder Remotion-API und ihrer HF-Entsprechung oder themenspezifischen Referenz. Identifizieren Sie, welche Themenreferenzen Sie basierend auf der Nutzung der Quelle benötigen:

Quelle enthältReferenz laden
Composition, defaultProps, schema, calculateMetadataparameters.md
Sequence, Series, Loop, AbsoluteFill, Freezesequencing.md
useCurrentFrame, interpolate, spring, Easing, interpolateColorstiming.md
Audio, Video, Img, IFrame, staticFile, delayRendermedia.md
TransitionSeries, @remotion/transitionstransitions.md
@remotion/lottielottie.md
@remotion/google-fonts/<Family>, Font.loadFont, @font-facefonts.md

Laden Sie nicht alle – laden Sie nur das, was die spezifische Quelle benötigt.

Schritt 3: Generieren der HF-Komposition

Erzeugen Sie index.html mit:

  • Root <div id="stage"> mit den Attributen data-composition-id, data-start="0", data-duration (in Sekunden), data-fps, data-width, data-height, plus einem data-* pro skalarem Prop.
  • Einer flachen Liste von Szenen-Divs mit data-start / data-duration / data-track-index.
  • Inline <style> für Layout; CSS setzt den from-Zustand jeder animierten Eigenschaft.
  • Einem einzigen <script>-Tag am Ende, das eine pausierte gsap.timeline({paused: true}) enthält. Jede Remotion-useCurrentFrame()-Ableitung wird zu einem Tween auf dieser Timeline am richtigen Offset.
  • window.__timelines["<composition-id>"] = tl; registriert die Timeline bei der HF-Laufzeitumgebung.

Benutzerdefinierte React-Unterkomponenten werden als wiederholtes HTML unter Verwendung der Prop-Schnittstelle als Vorlage inline eingefügt (siehe parameters.md für das data-*-Muster pro Instanz).

Schritt 4: Validieren

Führen Sie das Evaluierungs-Harness aus – references/eval.md für die vollständige Anleitung. Schneller Pfad:

# Remotion-Baseline rendern (nach npm install im Fixture)
cd remotion-src && npx remotion render <CompositionId> out/baseline.mp4

# HF-Übersetzung rendern
cd ../hf-src && npx hyperframes render --skill=remotion-to-hyperframes --output ../hf.mp4

# SSIM-Diff
../../scripts/render_diff.sh ./remotion-src/out/baseline.mp4 ./hf.mp4 ./diff

Schwellenwert: ~0,02 unter p05 der Komplexitätsstufe der Quelle (siehe validierte Schwellenwerttabelle in eval.md). Wenn der Diff fehlschlägt, führen Sie scripts/frame_strip.sh aus, um zu sehen, welche Frames abweichen, und lesen Sie dann die relevante Timing-/Sequenzierungs-/Medienreferenz erneut.

Kritisch: Beide Renderings müssen das gleiche Pixelformat verwenden. Setzen Sie Config.setVideoImageFormat("png") + Config.setColorSpace("bt709") in der Remotion-Quelle in remotion.config.ts – andernfalls misst der Diff Encoder-Unterschiede (~0,05 SSIM-Verlust), nicht die Übersetzungstreue.

Schritt 5: Lücken dokumentieren

Alles, was nicht sauber übersetzt wurde (entfernte Lautstärkerampen, approximierte benutzerdefinierte Präsentationen, ersetzte Schriftarten) erhält eine TRANSLATION_NOTES.md neben der HF-Ausgabe. Siehe references/limitations.md für das Format.

Was dieser Skill explizit NICHT tut

  • React-Zustandsmaschinen übersetzen. Kompositionen, die Animationen über useState + useEffect steuern, sind in HyperFrames' seek-basiertem Modell keine deterministischen Frame-Erfassungsziele. Empfehlen Sie das Runtime-Interoperabilitätsmuster.
  • Remotions Render-Pipeline neben HyperFrames ausführen. Das ist das Runtime-Interoperabilitätsmuster aus PR #214 – eine separate Lösung für Kompositionen, die den Lint dieses Skills nicht bestehen.

(@remotion/lambda ist kein Blockierer – Lambda-Konfiguration ist Bereitstellung, nicht Animation. Der Skill entfernt es als Warnung und übersetzt den Rest. Siehe references/escape-hatch.md.)

So bewerten Sie Ihre eigene Übersetzung

Führen Sie den Testkorpus-Orchestrator aus:

./assets/test-corpus/run.sh

Er führt T1, T2, T3 (Rendern + Diff) und T4 (Lint-Validierung) aus, gibt eine Tabelle mit Bestehen/Nichtbestehen pro Stufe aus und erstellt einen aggregierten JSON-Bericht. Verwenden Sie dies, um zu überprüfen, ob der Skill auf einem sauberen Checkout Ende-zu-Ende funktioniert – und als Regressionstest nach Bearbeitung einer Referenz.

Validierte Basislinie (Stand 2026-04-27):

StufeKompositionsformMittlerer SSIMSchwellenwert
T1Einzelelement-Einblendung0.9740.95
T2Mehrere Szenen + Spring + Audio + Bild0.9850.95
T3Datengetrieben, benutzerdefinierte Unterkomponenten, Zähler0.9530.90
T4Escape-Hatch (8 Lint-Fälle)8/8 bestandenn/a

Individual skills in this repo

This repo contains 13 individual skills — each has its own dedicated page.

1345AbhishekKumar/starter-nextjs

Add captions to a talking-head video. ONE catalog (CATALOG.md) of 32 visual identities behind two engines: column-flow (captions composited INTO the scene — matte occlusion + mix-blend; cream/ink/editorial/keynote/documentary/loud/neon/glitch/chrome/velocity) and themed constitutions (anchor/ordnance/terminal/neonsign/stardust/stomp/scoreboard/transit/vhs/arcade/dossier/laser/thunder/hologram/biolume/aurora/spectrum/papercut/popup/chalkboard/graffiti/brush/inkwater/ransom/lastpage/nightcity — e.g. a glyph-decode climax, a neon sign WRITTEN stroke by stroke, or the quiet `anchor` rail default). Route by identity, never by mode. Trigger on "captions/subtitles", "embed/cinematic captions", "VFX captions", "炸/特效/酷炫字幕", a named identity, or top-tier motion-graphics asks. Embedding every word is wrong for most talking-head content — `anchor` is the verbatim default. Pipeline: transcription → hyperframes remove-background matting → HTML render → ffmpeg overlay. Requires hyperframes and a single-subject clip.

1345AbhishekKumar/starter-nextjs

The fallback workflow for authoring custom HyperFrames video compositions at any length or format — longer or multi-scene pieces, brand / sizzle reels, montages, title cards, static loops, and freeform compositions. Input- and length-agnostic. If a specialized workflow clearly fits the input — a marketed product, a website, a topic explainer, a GitHub PR, existing footage, a short motion graphic, or a Remotion port — prefer it (see /hyperframes); use this only as the general fallback when none fit.

1345AbhishekKumar/starter-nextjs

All animation knowledge for HyperFrames — atomic motion rules, multi-phase scene blueprints, scene transitions, broader motion-design techniques, AND the seven runtime adapters (GSAP default, plus Lottie, Three.js, Anime.js, CSS keyframes, Web Animations API, TypeGPU). Use for any motion or animation task: pick 2-4 rules and compose, or load a blueprint, or look up runtime-specific API (e.g. GSAP eases / Lottie player / Three.js mixer). HyperFrames-native: single paused timeline, seek-safe, deterministic.

1345AbhishekKumar/starter-nextjs

HyperFrames CLI dev loop. Use when running npx hyperframes init, add, catalog, capture, lint, validate, inspect, layout, snapshot, preview, play, render, publish, lambda, doctor, browser, info, upgrade, skills, compositions, docs, benchmark, telemetry, transcribe, tts, or remove-background, or when troubleshooting the HyperFrames build/render environment. Entry point for AWS Lambda cloud rendering (`hyperframes lambda deploy / render / progress / destroy / policies`).

1345AbhishekKumar/starter-nextjs

The HyperFrames composition contract — build one renderable project. Use for composition structure, the `data-*` timing attributes, `class="clip"`, tracks, sub-compositions, variables, framework-owned media playback, deterministic-render rules, and validation. Read before writing composition HTML.

1345AbhishekKumar/starter-nextjs

Non-animation creative direction for HyperFrames videos. Use for design spec (frame.md / design.md) handling, palettes, typography, narration, beat planning, audio-reactive visuals, composition patterns, and brand / style decisions. For atomic motion patterns and scene blueprints, use `hyperframes-animation`.

1345AbhishekKumar/starter-nextjs

Audio and media assets for HyperFrames compositions, produced by one shared audio engine (`scripts/audio.mjs`) — multi-provider TTS (HeyGen / ElevenLabs / Kokoro local), background music + sound effects (HeyGen audio-library retrieval by default, with local Lyria / MusicGen BGM generation and a bundled SFX library as the no-credential fallback), Whisper transcription, background removal, and caption authoring. Use for voiceover / TTS, BGM, SFX / sound effects, transcription, captions / subtitles / lyrics / karaoke / per-word styling, voice + provider selection, and music-mood prompting.

1345AbhishekKumar/starter-nextjs

Install and wire registry blocks and components into HyperFrames compositions. Use when running hyperframes add, installing a block or component, wiring an installed item into index.html, or working with hyperframes.json. Covers the add command, install locations, block sub-composition wiring, component snippet merging, registry discovery, and authoring a new block or component to contribute upstream (idea → scaffold → validate → PR).

1345AbhishekKumar/starter-nextjs

Use when the user wants a short, design-led motion graphic where motion is the message: kinetic typography, stat or number count-up, chart/data-viz hit, logo sting, brand lockup, lower-third, callout, social overlay, animated headline/tweet/news item, motion poster, or quick captured-page highlight. Usually under 10s and up to ~30s, with no narration arc, voice-over, or live-action subject. Can render to MP4 or transparent overlay. Not for longer, multi-scene, narrated, or brand-reel pieces (use general-video), narrated website videos (website-to-video), topic explainers (faceless-explainer), product promos (product-launch-video), PR videos (pr-to-video), or captions on existing footage (embedded-captions). When unsure whether it's a quick motion-first piece or a longer / narrated treatment, see /hyperframes.

1345AbhishekKumar/starter-nextjs

Use when the user has a music track (an audio file, or a video to pull audio from) and wants a beat-synced HyperFrames video, calm to hard-hitting. The music drives everything: one analyzer reads it once, the orchestrator lays out the frames and fills a per-frame plan, and one sub-agent builds each frame. Typography and templates are the floor — a complete video needs zero assets — but any images or videos the user supplies are cut into the frames on the same beat grid (beat-cut / ken-burns). The genre (lyric video, slideshow, kinetic promo) falls out of the per-frame choices; the pipeline never branches on it.

1345AbhishekKumar/starter-nextjs

turn a product or marketing URL, pasted script, or brief into a product launch video, including SaaS promos, feature reveals, app launches, company promos, and product marketing videos. Use this skill when the user wants to market, launch, promote, or reveal a product. Do not use it for general non-launch website tours, non-product topic explainers, GitHub pull requests, captioning existing footage, or short unnarrated motion graphics. If the intent is unclear, route through /hyperframes first. This is the new shot-sequence architecture: every visual frame is authored as a time-coded shot sequence picked from a menu of golden blueprints, so frames develop over their full duration instead of freezing after entrance.

1345AbhishekKumar/starter-nextjs

turn a GitHub pull request (a PR URL like github.com/<owner>/<repo>/pull/<N>, an <owner>/<repo>#<N> ref, or 'this PR' in a checked-out repo) into a code-change explainer video, up to ~3 min (sweet spot 30-90s) — changelog, feature reveal, fix, or refactor walkthrough, rendered from the diff / commits / files. The input is a CODE CHANGE read via the gh CLI; there is no website capture. Use this skill for a GitHub PR. Do not use it for a product launch/promo (use /product-launch-video), a tour of a real website (use /website-to-video), a topic explainer with no PR (use /faceless-explainer), captions on existing footage (use /embedded-captions), or a short unnarrated motion graphic (use /motion-graphics). If the intent is unclear, route through /hyperframes first.

1345AbhishekKumar/starter-nextjs

Capture a general website/URL and turn it into a HyperFrames video (site tour, showcase, or social clip from the site's own visuals). Uses headless Chrome screenshots + brand assets. Use when intent is general — portfolio/blog/landing-page showcase or social clip from the site. NOT for: product/SaaS launch or promo (→ /product-launch-video, even from a URL); topic explainer with no site (→ /faceless-explainer); GitHub PR (→ /pr-to-video); adding captions to existing video (→ /embedded-captions); short unnarrated page-highlight motion graphic (→ /motion-graphics). Unclear launch-vs-general-site? Ask one question or start at /hyperframes.

Verwandte Skills