Communitygithub.com

Música a Video con HyperFrames

Convierte una pista musical en un video HyperFrames sincronizado con el ritmo: videolyrics, presentación de diapositivas o promo cinética. Úsalo cuando el usuario proporcione un archivo de audio, un video para extraer audio o un resumen de estado de ánimo para generar música. La música marca el ritmo. Enseña extracción de beatmap, planificación de escenas por secciones y gráficos reactivos al audio.

¿Qué es Música a Video con HyperFrames?

Esta skill genera un video que visualiza el audio (forma de onda o elementos sincronizados con el ritmo) a partir de un archivo de música utilizando una composición HyperFrames. Es ideal cuando una pista necesita un acompañamiento visual sin edición manual. Renderiza el MP4 final de la composición. Soporta archivos de audio, extracción de audio de video y resúmenes de estado de ánimo para generar música. El flujo de trabajo incluye resolución de audio, mapeo de beats (estructura de secciones como intro/verso/estribillo), planificación de escenas, construcción de composiciones con tiempos absolutos en HTML/CSS y renderizado final. La verificación incluye comprobación de sincronización con tolerancia de ±2 fotogramas.

Compatible con~Claude Code~Codex CLI~Cursor
npx skills add https://github.com/oyi77/1ai-skills/tree/HEAD/content/hyperframes-music-to-video

Preguntar en tu IA favorita

Abre un nuevo chat con esta habilidad de agente ya precargada.

Documentación

Resumen

Esta skill genera un video que visualiza el audio (forma de onda o elementos sincronizados con el ritmo) a partir de un archivo de música utilizando una composición HyperFrames. Úsala cuando una pista necesite un acompañamiento visual sin edición manual. Renderiza el MP4 final de la composición.

HyperFrames — Música a Video

Una pista musical → un video sincronizado con el ritmo. Videolyric, presentación de diapositivas o promo cinética. La música marca el ritmo.

Cuándo Usarlo

  • El usuario proporciona un archivo de audio y quiere un video para él.
  • El usuario proporciona un video para extraer audio (extracción de música).
  • El usuario proporciona un resumen de estado de ánimo ("lo-fi alegre para el lanzamiento de un producto").
  • El usuario quiere un videolyric (palabras sincronizadas con las vocales).
  • El usuario quiere una presentación de diapositivas sincronizada con el ritmo (imágenes que cambian con los beats).
  • El usuario quiere una promo cinética (tipografía palpitante con la pista).

Cuándo NO Usarlo

  • El usuario quiere un lanzamiento de producto desde una URL (usa hyperframes-product-launch-video).
  • El usuario quiere un video de presentador (usa hyperframes-talking-head-recut).
  • El usuario quiere narración/locución (usa hyperframes-faceless-explainer).
  • No hay música involucrada (usa hyperframes-motion-graphics).

Flujo de trabajo

1 · Resolver el audio

Tres vías de entrada:

  • Archivo de audio proporcionado: analizar con ffprobe para duración, BPM (estimar o detectar).
  • Video proporcionado: extraer con ffmpeg -i input.mp4 -vn -acodec libmp3lame audio.mp3.
  • Resumen de estado de ánimo: generar mediante modelo TTS/música, o elegir de un catálogo de música de fondo.

2 · Mapear la estructura de beats

Escuchar (o analizar) las secciones:

  • Intro (0-8s) → título/establecimiento.
  • Verso → contenido/presentación.
  • Estribillo/Clímax → clímax/pico cinético.
  • Outro → CTA/desvanecimiento.

Escribir un mapa de beats: [{ time: 0, section: "intro" }, { time: 8, section: "verse" }, ...]

3 · Planificar escenas según las secciones

Cada sección musical recibe un tratamiento visual:

  • Intro: desvanecimiento lento, movimiento mínimo.
  • Verso: revelaciones constantes, un elemento por cada 2-4 beats.
  • Estribillo: máxima energía — estallidos de escala, cambios de color, cortes rápidos.
  • Puente: respiro visual — plano estático o paneo lento.
  • Outro: resolver en pantalla final.

4 · Construir la composición

Anclar cada tiempo de inicio de animación al mapa de beats. Usar keyframes CSS o GSAP con tiempos absolutos que coincidan con los límites de las secciones.

<div id="main" data-composition-id="music-video"
     data-start="0" data-duration="60" data-width="1080" data-height="1920" data-fps="30">
  <div class="clip chorus-hit" data-start="32" data-duration="8" data-track-index="1">
    <h1 class="lyric-line">AQUÍ VA LA LETRA DEL ESTRIBILLO</h1>
  </div>
  <audio data-start="0" data-duration="60" src="./track.mp3"></audio>
</div>

5 · Renderizar

npx hyperframes render --output music-video.mp4

Verificar sincronización: tomar muestras de fotogramas en los límites de las secciones, confirmar que los cambios visuales corresponden a los beats (tolerancia ±2 fotogramas).

Tabla de Antirracionalizaciones

RacionalizaciónRealidad
"Haré la sincronización a ojo"Primero el mapa de beats — cada escena anclada a los tiempos de las secciones
"Mantendré la misma energía en todo el video"El estribillo golpea más fuerte que el verso — la dinámica importa
"Saltaré el análisis de audio"La discrepancia de duración/BPM arruina todo el renderizado
"Animaré según el reloj de pared"Todas las animaciones son buscables — tiempos absolutos en la composición

Verificación

  • Audio resuelto (archivo, extraído o generado)
  • Mapa de beats escrito con límites de sección
  • Cada sección tiene un tratamiento visual distinto
  • Los tiempos de animación coinciden con el mapa de beats (±2 fotogramas)
  • La duración de salida coincide con la duración del audio
  • El estribillo/clímax es visualmente distinto del verso

Individual skills in this repo

This repo contains 12 individual skills — each has its own dedicated page.

oyi77/1ai-skills

Turn a weekly changelog .md into a finished branded changelog video using HyperFrames. Use when the user provides a changelog/digest markdown and wants the weekly video, or says 'changelog video'. Self-contained — fonts, background, lexicon, and scripts ship in the skill. Produces square 1080, ~45-60s videos with animated brand mock-UIs.

oyi77/1ai-skills

The transition technique catalog for HyperFrames videos — five velocity-matched SEAMS (zoom-through, inverse zoom-through, cut-the-curve, waterfall cut, rack-focus blur-cut) plus in-scene techniques (waterfall entry, nudge curve). Covers partial-travel velocity matching, Z scale-sign rule, size-scaled blur, the 10/65/25 slide ratio, and the 2-3 transition budget. Read before authoring any transition, text-beat handoff, or kinetic text entry.

oyi77/1ai-skills

Add captions/subtitles to talking-head or launch videos using HyperFrames. Use when the user wants embedded captions, verbatim caption rails, or cinematic text behind the subject. Covers the drop/rail/embed caption model, the overlay law (captions are NOT a reserved band), matte occlusion for embedded climaxes, and word-timestamp alignment from TTS output.

oyi77/1ai-skills

Turn arbitrary text — an article, notes, a topic, a brief — into a faceless explainer video using HyperFrames. Use when the user wants a topic explainer, concept breakdown, how-to, or listicle with no product/website to capture. Every visual is invented per scene (typography, abstract graphics, diagrams, data-viz). Not a video built from a website (use hyperframes-product-launch-video).

oyi77/1ai-skills

The fallback HyperFrames workflow for anything that doesn't fit other skills — longer multi-scene pieces, brand/sizzle reels, title cards, static loops, freeform compositions. Input- and length-agnostic. Also the home of companion mode (co-create with the full toolbox). Use when no other HyperFrames skill matches, or when the user wants a freeform video.

oyi77/1ai-skills

Create short, unnarrated, design-led motion graphics (~under 10s) using HyperFrames. Use when the user wants kinetic type, stat/chart hits, logo stings, lower-thirds, animated tweets/headlines, or transparent overlay motion graphics. MP4 or transparent overlay output. Teaches seek-safe keyframe authoring and the 2-3 transition budget rule.

oyi77/1ai-skills

Create product launch videos from a URL, brief, or script using HyperFrames (HTML→MP4). Use when the user wants a product launch video, site tour, social clip featuring a product's own visuals, or marketing/promoting a product. Up to ~3 min (sweet spot 30-90s). Teaches the HyperFrames production loop: plan → write HTML → wire seekable animations → add media → lint → preview → render.

oyi77/1ai-skills

The Video Production Manager — manages ALL video production under 1ai-content. Delegates to HyperFrames, Remotion, AI video, and FFmpeg based on the task. Has memory via 1ai-hub brain, follows 1ai-rules, and reports to Content Director. Use when the user says 'make a video', 'create video', 'edit video', 'video strategy', or needs any video production work.

oyi77/1ai-skills

Agent skill at content/video/gen/SKILL.md

oyi77/1ai-skills

Use when track portfolio company KPIs, variances, returns analysis. Use when user says "monitor portfolio", "track KPIs", "portfolio returns".

oyi77/1ai-skills

Use when go-to-market planning — launch sequencing, channel strategy, audience building, PR outreach. Use when planning product launches, building launch checklists, or coordinating multi-channel campaigns.

oyi77/1ai-skills

Use when portfolio manager — capital allocation, risk management, and performance metrics tracking for trading strategies.

Skills relacionados