Communitygithub.com

oyi77/1ai-skills

Verwandle einen Musiktitel in ein beat-synchronisiertes HyperFrames-Video – Lyric, Slideshow oder kinetischer Promo. Verwende es, wenn der Nutzer eine Audiodatei, ein Video zur Audioextraktion oder eine Stimmungsbeschreibung für generierte Musik bereitstellt. Musik bestimmt das Tempo. Lehrt Beat-Map-Extraktion, abschnittsbasiertes Szenen-Design und audio-reaktive Visuals.

Was ist 1ai-skills?

Diese Fähigkeit generiert ein Video, das Audio visualisiert – Wellenform oder beat-synchronisierte Elemente – aus einer Musikdatei mittels einer HyperFrames-Komposition. Verwende sie, wenn ein Titel ein begleitendes visuelles Element benötigt, ohne manuelle Bearbeitung. Sie rendert das finale MP4 aus der Komposition. Die Fähigkeit unterstützt drei Eingabepfade: direkte Audiodateien, Videos zur Musikextraktion oder eine Stimmungsbeschreibung zur Musikgenerierung. Sie lehrt die Beat-Map-Extraktion (Unterteilung in Intro, Strophe, Refrain, Outro), abschnittsbasiertes Szenen-Design (unterschiedliche visuelle Behandlungen für jeden Abschnitt) und die Erstellung audio-reaktiver Visuals mit CSS-Keyframes oder GSAP. Geeignet für Lyric-Videos, beat-synchronisierte Diashows und kinetische Promos. Plattformen: HyperFrames-Kompositionen, Befehlszeilen-Rendering mit `npx hyperframes render`, Audioverarbeitung mit ffmpeg ffprobe. Der Arbeitsablauf umfasst Audioauflösung, Beat-Map-Erstellung, Szenenplanung, Kompositionserstellung und endgültiges Rendering mit Überprüfung der Synchronisation.

Funktioniert mit~Claude Code~Codex CLI~Cursor
npx skills add https://github.com/oyi77/1ai-skills/tree/HEAD/content/hyperframes-music-to-video

In Ihrer bevorzugten KI fragen

Öffnet einen neuen Chat, in dem dieser Agent-Skill bereits geladen ist.

Dokumentation

Übersicht

Diese Fähigkeit generiert ein Video, das Audio visualisiert – Wellenform oder beat-synchronisierte Elemente – aus einer Musikdatei mittels einer HyperFrames-Komposition. Verwende sie, wenn ein Titel ein begleitendes visuelles Element benötigt, ohne manuelle Bearbeitung. Sie rendert das finale MP4 aus der Komposition.

HyperFrames – Musik zu Video

Ein Musiktitel → ein beat-synchronisiertes Video. Lyric, Slideshow oder kinetischer Promo. Musik bestimmt das Tempo.

Wann verwenden

  • Der Nutzer stellt eine Audiodatei bereit und möchte ein Video dafür
  • Der Nutzer stellt ein Video zur Audioextraktion bereit (Musikextraktion)
  • Der Nutzer gibt eine Stimmungsbeschreibung („aufmunternder Lofi für Produktlaunch“)
  • Der Nutzer möchte ein Lyric-Video (Wörter synchron zu Gesang)
  • Der Nutzer möchte eine beat-synchronisierte Diashow (Bilder wechseln auf Beats)
  • Der Nutzer möchte einen kinetischen Promo (Typografie pulsiert mit dem Track)

Wann NICHT verwenden

  • Der Nutzer möchte einen Produktlaunch von einer URL (verwende hyperframes-product-launch-video)
  • Der Nutzer möchte ein Talking-Head-Video (verwende hyperframes-talking-head-recut)
  • Der Nutzer möchte Erzählung/Sprecherstimme (verwende hyperframes-faceless-explainer)
  • Keine Musik beteiligt (verwende hyperframes-motion-graphics)

Arbeitsablauf

1 · Audio auflösen

Drei Eingabepfade:

  • Audiodatei bereitgestellt: Untersuche mit ffprobe auf Dauer, BPM (schätze oder erkenne)
  • Video bereitgestellt: Extrahiere mit ffmpeg -i input.mp4 -vn -acodec libmp3lame audio.mp3
  • Stimmungsbeschreibung: Generiere über TTS/Musikmodell oder wähle aus Katalog-BGM

2 · Beat-Struktur kartieren

Höre (oder analysiere) auf Abschnitte:

  • Intro (0-8s) → Titel/Etablierung
  • Strophe → Inhalt/Diashow
  • Refrain/Höhepunkt → Höhepunkt/kinetischer Peak
  • Outro → CTA/Ausblendung

Schreibe eine Beat-Map: [{ time: 0, section: "intro" }, { time: 8, section: "verse" }, ...]

3 · Szenen zu Abschnitten planen

Jeder musikalische Abschnitt erhält eine visuelle Behandlung:

  • Intro: langsames Einblenden, minimale Bewegung
  • Strophe: gleichmäßige Enthüllungen, ein Element pro 2-4 Beats
  • Refrain: maximale Energie – Skalierungsausbrüche, Farbwechsel, schnelle Schnitte
  • Brücke: visuelle Verschnaufpause – statischer Halt oder langsamer Schwenk
  • Outro: Auflösung zur Endkarte

4 · Komposition erstellen

Verankere jede Animationsstartzeit an der Beat-Map. Verwende CSS-Keyframes oder GSAP mit absoluten Zeiten, die den Abschnittsgrenzen entsprechen.

<div id="main" data-composition-id="music-video"
     data-start="0" data-duration="60" data-width="1080" data-height="1920" data-fps="30">
  <div class="clip chorus-hit" data-start="32" data-duration="8" data-track-index="1">
    <h1 class="lyric-line">CHORUS LYRIC HERE</h1>
  </div>
  <audio data-start="0" data-duration="60" src="./track.mp3"></audio>
</div>

5 · Rendern

npx hyperframes render --output music-video.mp4

Überprüfe die Synchronisation: Musterbilder an Abschnittsgrenzen, bestätige, dass visuelle Änderungen auf Beats landen (±2 Frames Toleranz).

Anti-Rationalisierungstabelle

RationalisierungRealität
„Ich schätze die Zeit einfach per Augenmaß“Zuerst Beat-Map – jede Szene an Abschnittszeiten verankert
„Ich verwende durchgehend die gleiche Energie“Refrain schlägt härter als Strophe – Dynamik ist wichtig
„Ich überspringe die Audio-Untersuchung“Dauer/BPM-Fehler zerstört den gesamten Render
„Ich animiere nach Echtzeit“Alle Animationen suchbar – absolute Zeiten in der Komposition

Überprüfung

  • Audio aufgelöst (Datei, extrahiert oder generiert)
  • Beat-Map mit Abschnittsgrenzen geschrieben
  • Jeder Abschnitt hat eine eindeutige visuelle Behandlung
  • Animationszeiten stimmen mit Beat-Map überein (±2 Frames)
  • Ausgabedauer stimmt mit Audiodauer überein
  • Refrain/Höhepunkt ist visuell von der Strophe unterscheidbar

Individual skills in this repo

This repo contains 12 individual skills — each has its own dedicated page.

oyi77/1ai-skills

Turn a weekly changelog .md into a finished branded changelog video using HyperFrames. Use when the user provides a changelog/digest markdown and wants the weekly video, or says 'changelog video'. Self-contained — fonts, background, lexicon, and scripts ship in the skill. Produces square 1080, ~45-60s videos with animated brand mock-UIs.

oyi77/1ai-skills

The transition technique catalog for HyperFrames videos — five velocity-matched SEAMS (zoom-through, inverse zoom-through, cut-the-curve, waterfall cut, rack-focus blur-cut) plus in-scene techniques (waterfall entry, nudge curve). Covers partial-travel velocity matching, Z scale-sign rule, size-scaled blur, the 10/65/25 slide ratio, and the 2-3 transition budget. Read before authoring any transition, text-beat handoff, or kinetic text entry.

oyi77/1ai-skills

Add captions/subtitles to talking-head or launch videos using HyperFrames. Use when the user wants embedded captions, verbatim caption rails, or cinematic text behind the subject. Covers the drop/rail/embed caption model, the overlay law (captions are NOT a reserved band), matte occlusion for embedded climaxes, and word-timestamp alignment from TTS output.

oyi77/1ai-skills

Turn arbitrary text — an article, notes, a topic, a brief — into a faceless explainer video using HyperFrames. Use when the user wants a topic explainer, concept breakdown, how-to, or listicle with no product/website to capture. Every visual is invented per scene (typography, abstract graphics, diagrams, data-viz). Not a video built from a website (use hyperframes-product-launch-video).

oyi77/1ai-skills

The fallback HyperFrames workflow for anything that doesn't fit other skills — longer multi-scene pieces, brand/sizzle reels, title cards, static loops, freeform compositions. Input- and length-agnostic. Also the home of companion mode (co-create with the full toolbox). Use when no other HyperFrames skill matches, or when the user wants a freeform video.

oyi77/1ai-skills

Create short, unnarrated, design-led motion graphics (~under 10s) using HyperFrames. Use when the user wants kinetic type, stat/chart hits, logo stings, lower-thirds, animated tweets/headlines, or transparent overlay motion graphics. MP4 or transparent overlay output. Teaches seek-safe keyframe authoring and the 2-3 transition budget rule.

oyi77/1ai-skills

Create product launch videos from a URL, brief, or script using HyperFrames (HTML→MP4). Use when the user wants a product launch video, site tour, social clip featuring a product's own visuals, or marketing/promoting a product. Up to ~3 min (sweet spot 30-90s). Teaches the HyperFrames production loop: plan → write HTML → wire seekable animations → add media → lint → preview → render.

oyi77/1ai-skills

The Video Production Manager — manages ALL video production under 1ai-content. Delegates to HyperFrames, Remotion, AI video, and FFmpeg based on the task. Has memory via 1ai-hub brain, follows 1ai-rules, and reports to Content Director. Use when the user says 'make a video', 'create video', 'edit video', 'video strategy', or needs any video production work.

oyi77/1ai-skills

Agent skill at content/video/gen/SKILL.md

oyi77/1ai-skills

Use when track portfolio company KPIs, variances, returns analysis. Use when user says "monitor portfolio", "track KPIs", "portfolio returns".

oyi77/1ai-skills

Use when go-to-market planning — launch sequencing, channel strategy, audience building, PR outreach. Use when planning product launches, building launch checklists, or coordinating multi-channel campaigns.

oyi77/1ai-skills

Use when portfolio manager — capital allocation, risk management, and performance metrics tracking for trading strategies.

Verwandte Skills