Communitygithub.com

libz-renlab-ai/TeamBrain

Traduce una composición de video Remotion existente (basada en React) a una composición HTML de HyperFrames. Úsalo SOLO cuando el usuario solicite explícitamente portar, convertir, migrar, traducir o reescribir una composición de Remotion a HyperFrames.

¿Qué es TeamBrain?

Esta habilidad automatiza la traducción mecánica de composiciones de video React/Remotion (~80% de los casos típicos) a HyperFrames (HTML + GSAP). Detecta patrones que no se traducen limpiamente (como useState, useEffect o bibliotecas UI de terceros) y detiene la traducción, recomendando en su lugar el patrón de interoperabilidad en tiempo de ejecución del PR #214. El proceso sigue cinco pasos: lint del código fuente, planificación de la traducción usando un mapa de API, generación del HTML plano con líneas de tiempo GSAP, validación mediante métricas SSIM contra un corpus de pruebas por niveles, y documentación de las diferencias encontradas. Soporta plataformas como Cursor y Codex, e incluye scripts de evaluación y referencias detalladas para manejar secuencias, medios, fuentes, transiciones y animaciones.

Compatible con~Claude Code~Codex CLI~Cursor
npx skills add https://github.com/libz-renlab-ai/TeamBrain/tree/HEAD/.agents/skills/remotion-to-hyperframes

Preguntar en tu IA favorita

Abre un nuevo chat con esta habilidad de agente ya precargada.

Documentación

De Remotion a HyperFrames

Descripción general

Traduce composiciones de video basadas en Remotion (React) a composiciones de HyperFrames (HTML + GSAP). La mayoría de los modismos de Remotion tienen equivalentes directos en HyperFrames; la traducción es mecánica para aproximadamente el 80% de las composiciones típicas. Esta habilidad codifica el mapeo y se protege contra el 20% que implica pérdida de calidad al negarse a traducir patrones que no se ajustan al modelo basado en búsqueda de HF, recomendando en su lugar el patrón de interoperabilidad en tiempo de ejecución del PR #214.

La habilidad incluye un corpus de pruebas por niveles (T1–T4, 4 fixtures en total) que califica las traducciones según umbrales SSIM medidos. No traduzcas sin ejecutar la evaluación; una traducción que "se ve bien" pero que tiene un SSIM 0.05 más bajo que el punto de referencia validado está silenciosamente equivocada.

Flujo de trabajo

Paso 1: Analizar el código fuente (lint)

Ejecuta scripts/lint_source.py sobre el directorio fuente de Remotion. El lint detecta patrones que no se pueden traducir limpiamente:

  • Bloqueantes (rechazar + recomendar interop): useState, useReducer, useEffect/useLayoutEffect con dependencias no vacías, calculateMetadata asíncrono, bibliotecas UI de React de terceros (MUI, Chakra, Mantine, antd, shadcn, Radix, NextUI).
  • Advertencias (traducir después de eliminar el constructo): configuración de @remotion/lambda, delayRender, useCallback, useMemo, hooks personalizados.
  • Información (traducir con nota): staticFile, interpolateColors.

Si se activa algún bloqueante, detente. Lee references/escape-hatch.md y muestra el mensaje de recomendación. Las advertencias no detienen la traducción; elimina el constructo problemático en el paso 3 y anota la brecha en TRANSLATION_NOTES.md. La configuración de @remotion/lambda es el caso de advertencia canónico: la habilidad elimina la importación y las llamadas a renderMediaOnLambda(...) pero traduce el resto de la composición.

Paso 2: Planificar la traducción

Lee references/api-map.md, el índice de cada API de Remotion y su equivalente en HF o referencia por tema. Identifica qué referencias temáticas necesitarás según lo que use el código fuente:

El código fuente contieneCargar la referencia
Composition, defaultProps, schema, calculateMetadataparameters.md
Sequence, Series, Loop, AbsoluteFill, Freezesequencing.md
useCurrentFrame, interpolate, spring, Easing, interpolateColorstiming.md
Audio, Video, Img, IFrame, staticFile, delayRendermedia.md
TransitionSeries, @remotion/transitionstransitions.md
@remotion/lottielottie.md
@remotion/google-fonts/<Family>, Font.loadFont, @font-facefonts.md

No cargues todas; carga solo las que la fuente específica necesite.

Paso 3: Generar la composición HF

Genera index.html con:

  • Un <div id="stage"> raíz que lleve los atributos data-composition-id, data-start="0", data-duration (en segundos), data-fps, data-width, data-height, más un data-* por cada prop escalar.
  • Una lista plana de divs de escena con data-start / data-duration / data-track-index.
  • Un <style> en línea para el diseño; CSS establece el estado from de cada propiedad animada.
  • Una sola etiqueta <script> al final que contenga una gsap.timeline({paused: true}). Cada derivación de useCurrentFrame() de Remotion se convierte en una interpolación (tween) en esta línea de tiempo en el desplazamiento correcto.
  • window.__timelines["<composition-id>"] = tl; registra la línea de tiempo con el tiempo de ejecución de HF.

Los subcomponentes React personalizados se incluyen como HTML repetido usando la interfaz de props como plantilla (consulta parameters.md para el patrón data-* por instancia).

Paso 4: Validar

Ejecuta el harness de evaluación — references/eval.md para la guía completa. Ruta rápida:

# Renderizar la línea base de Remotion (después de npm install en el fixture)
cd remotion-src && npx remotion render <CompositionId> out/baseline.mp4

# Renderizar la traducción HF
cd ../hf-src && npx hyperframes render --output ../hf.mp4

# Diferencia SSIM
../../scripts/render_diff.sh ./remotion-src/out/baseline.mp4 ./hf.mp4 ./diff

Umbral: ~0.02 por debajo de p05 del nivel de complejidad del código fuente (consulta la tabla de umbrales validados de eval.md). Si la diferencia falla, ejecuta scripts/frame_strip.sh para ver qué fotogramas divergieron, luego vuelve a leer la referencia de temporización/secuenciación/medios correspondiente.

Crítico: ambas renderizaciones deben usar el mismo formato de píxeles. Establece Config.setVideoImageFormat("png") + Config.setColorSpace("bt709") en el remotion.config.ts del código fuente de Remotion; de lo contrario, la diferencia mide diferencias del codificador (~0.05 de impacto en SSIM), no la fidelidad de la traducción.

Paso 5: Documentar las brechas

Cualquier cosa que no se haya traducido limpiamente (rampas de volumen descartadas, presentaciones personalizadas aproximadas, fuentes sustituidas) genera un TRANSLATION_NOTES.md junto a la salida HF. Consulta references/limitations.md para el formato.

Lo que esta habilidad explícitamente NO hace

  • Traducir máquinas de estado de React. Las composiciones que impulsan la animación mediante useState + useEffect no son objetivos de captura de fotogramas deterministas en el modelo basado en búsqueda de HyperFrames. Recomienda el patrón de interoperabilidad en tiempo de ejecución.
  • Ejecutar el pipeline de renderizado de Remotion junto con HyperFrames. Ese es el patrón de interoperabilidad en tiempo de ejecución del PR #214, una solución separada para composiciones que fallan el lint de esta habilidad.

(@remotion/lambda no es un bloqueante: la configuración de Lambda es despliegue, no animación. La habilidad lo descarta como advertencia y traduce el resto. Consulta references/escape-hatch.md).

Cómo calificar tu propia traducción

Ejecuta el orquestador del corpus de pruebas:

./assets/test-corpus/run.sh

Ejecuta T1, T2, T3 (render + diferencia) y T4 (validación de lint), imprime una tabla de aprobación/fallo por nivel y genera un informe JSON agregado. Úsalo para verificar que la habilidad funciona de extremo a extremo en una copia limpia y como comprobación de regresión después de editar cualquier referencia.

Línea base validada (a partir del 27 de abril de 2026):

NivelForma de la composiciónSSIM medioUmbral
T1fundido de entrada de un solo elemento0.9740.95
T2múltiples escenas + spring + audio + imagen0.9850.95
T3basado en datos, subcomponentes personalizados, contador0.9530.90
T4escotilla de escape (8 casos de lint)8/8 pasann/a

Individual skills in this repo

This repo contains 5 individual skills — each has its own dedicated page.

libz-renlab-ai/TeamBrain

Asset preprocessing for HyperFrames compositions — text-to-speech narration (Kokoro), audio/video transcription (Whisper), and background removal for transparent overlays (u2net). Use when generating voiceover from text, transcribing speech for captions, removing the background from a video or image to use as a transparent overlay, choosing a TTS voice or whisper model, or chaining these (TTS → transcribe → captions). Each command downloads its own model on first run.

libz-renlab-ai/TeamBrain

Install and wire registry blocks and components into HyperFrames compositions. Use when running hyperframes add, installing a block or component, wiring an installed item into index.html, or working with hyperframes.json. Covers the add command, install locations, block sub-composition wiring, component snippet merging, and registry discovery.

libz-renlab-ai/TeamBrain

Create video compositions, animations, title cards, overlays, captions, voiceovers, audio-reactive visuals, and scene transitions in HyperFrames HTML. Use when asked to build any HTML-based video content, add captions or subtitles synced to audio, generate text-to-speech narration, create audio-reactive animation (beat sync, glow, pulse driven by music), add animated text highlighting (marker sweeps, hand-drawn circles, burst lines, scribble, sketchout), or add transitions between scenes (crossfades, wipes, reveals, shader transitions). Covers composition authoring, timing, media, and the full video production workflow. For CLI commands (init, lint, preview, render, transcribe, tts) see the hyperframes-cli skill.

libz-renlab-ai/TeamBrain

Capture a website and create a HyperFrames video from it. Use when: (1) a user provides a URL and wants a video, (2) someone says "capture this site", "turn this into a video", "make a promo from my site", (3) the user wants a social ad, product tour, or any video based on an existing website, (4) the user shares a link and asks for any kind of video content. Even if the user just pastes a URL — this is the skill to use.

libz-renlab-ai/TeamBrain

HyperFrames CLI tool — hyperframes init, lint, inspect, preview, render, transcribe, tts, doctor, browser, info, upgrade, compositions, docs, benchmark. Use when scaffolding a project, linting, validating, inspecting visual layout in compositions, previewing in the studio, rendering to video, transcribing audio, generating TTS, or troubleshooting the HyperFrames environment.

Skills relacionados