Communitygithub.com

jgilb17/jpg

Renderize vídeos MP4/WebM a partir de composições HTML.

O que é jpg?

HyperFrames é um sistema de renderização de vídeo que utiliza HTML como fonte da verdade. Permite criar vídeos MP4/WebM de alta qualidade a partir de composições HTML, combinando atributos `data-*` para temporização, animações GSAP e CSS para estilização. O motor HyperFrames captura cada quadro da página em um navegador headless e codifica o vídeo com FFmpeg. Esta habilidade é ideal para motion graphics, vídeos com narração e legendas, tours de produto, overlays para redes sociais, transições com shaders e qualquer animação HTML/CSS/JS que precise ser renderizada deterministicamente. Não é recomendada para animações matemáticas puras (use `manim-video`) ou geração de imagens estáticas.

Funciona com✓Claude Code~Codex CLI~Cursor
npx skills add https://github.com/jgilb17/jpg/tree/HEAD/.claude/skills/hyperframes

Perguntar na sua IA favorita

Abre um novo chat com esta habilidade de agente já pré-carregada.

Documentação

HyperFrames

HTML é a fonte da verdade para vídeo. Uma composição é um arquivo HTML com atributos data-* para temporização, uma timeline GSAP para animação e CSS para aparência. O motor HyperFrames captura a página quadro a quadro e codifica para MP4/WebM com FFmpeg.

Complemento ao manim-video: Use manim-video para explicadores matemáticos/geométricos (equações, estilo 3B1B). Use hyperframes para motion graphics, cabeça falante com legendas, tours de produto, overlays sociais, transições com shaders e qualquer coisa impulsionada por mídia de vídeo/áudio real.

Quando Usar

  • O usuário pede um vídeo renderizado a partir de texto, um roteiro ou um site
  • Cartões de título animados, terços inferiores ou introduções tipográficas
  • Vídeo de narração legendada (TTS + legendas sincronizadas com a forma de onda)
  • Visuais reativos a áudio (sincronia de batida, barras de espectro, brilho pulsante)
  • Transições de cena para cena (crossfade, wipe, warp de shader, flash-through-white)
  • Overlays sociais (estilo Instagram/TikTok/YouTube)
  • Pipeline de site para vídeo (capturar uma URL, produzir um promo)
  • Qualquer animação HTML/CSS/JS que precise ser renderizada deterministicamente em um arquivo de vídeo

Não use esta habilidade para:

  • Animação pura de matemática/equações (→ manim-video)
  • Geração de imagens ou memes (→ meme-generation, modelos de imagem)
  • Videoconferência ou transmissão ao vivo

Referência Rápida

npx hyperframes init my-video               # criar um projeto
cd my-video
npx hyperframes lint                        # validar antes de visualizar/renderizar
npx hyperframes preview                     # visualização no navegador com recarregamento automático (porta 3002)
npx hyperframes render --output final.mp4   # renderizar para MP4
npx hyperframes doctor                      # diagnosticar problemas no ambiente

Flags de renderização: --quality draft|standard|high · --fps 24|30|60 · --format mp4|webm · --docker (reproduzível) · --strict.

Referência completa da CLI: references/cli.md.

Configuração (única)

bash "$(dirname "$(find ~/.hermes/skills -path '*/hyperframes/SKILL.md' 2>/dev/null | head -1)")/scripts/setup.sh"

O script:

  1. Verifica se Node.js >= 22 e FFmpeg estão instalados (imprime instruções de correção se não estiverem).
  2. Instala a CLI hyperframes globalmente (npm install -g hyperframes@>=0.4.2).
  3. Pré-armazena em cache o chrome-headless-shell via Puppeteer — necessário para renderização de melhor qualidade através do caminho de captura HeadlessExperimental.beginFrame do Chrome.
  4. Executa npx hyperframes doctor e relata o resultado.

Veja references/troubleshooting.md se a configuração falhar.

Procedimento

1. Planejar antes de escrever HTML

Antes de tocar no código, articule em alto nível:

  • O que — arco narrativo, momentos-chave, batidas emocionais
  • Estrutura — composições, trilhas (vídeo/áudio/overlays), durações
  • Identidade visual — cores, fontes, caráter do movimento (explosivo / cinematográfico / fluido / técnico)
  • Quadro hero — para cada cena, o momento em que a maioria dos elementos está simultaneamente visível. Este é o layout estático que você construirá primeiro.

Portão de Identidade Visual (HARD-GATE). Antes de escrever QUALQUER HTML de composição, uma identidade visual deve ser definida. NÃO escreva composições com cores padrão ou genéricas (#333, #3b82f6, Roboto são sinais de que esta etapa foi pulada). Verifique em ordem:

  1. DESIGN.md na raiz do projeto? → Use suas cores exatas, fontes, regras de movimento e restrições "O que NÃO Fazer".

  2. O usuário nomeou um estilo (ex.: "Swiss Pulse", "escuro e tecnológico", "marca de luxo")? → Gere um DESIGN.md mínimo com ## Style Prompt, ## Colors (3-5 hex com papéis), ## Typography (1-2 famílias), ## What NOT to Do (3-5 anti-padrões).

  3. Nada disso? → Faça 3 perguntas antes de escrever qualquer HTML:

    • Clima? (explosivo / cinematográfico / fluido / técnico / caótico / caloroso)
    • Tela clara ou escura?
    • Alguma cor de marca, fonte ou referência visual?

    Em seguida, gere um DESIGN.md a partir das respostas. Toda composição deve rastrear sua paleta e tipografia de volta ao DESIGN.md ou à direção explícita do usuário.

2. Scaffold

npx hyperframes init my-video --non-interactive

Modelos: blank, warm-grain, play-mode, swiss-grid, vignelli, decision-tree, kinetic-type, product-promo, nyt-graph. Passe --example <nome> para escolher um, --video clip.mp4 ou --audio track.mp3 para semear com mídia.

3. Layout antes da animação

Escreva o HTML+CSS estático para o quadro hero primeiro — sem GSAP ainda. O contêiner .scene-content deve preencher a cena (width:100%; height:100%; padding:Npx) com display:flex + gap. Use padding para empurrar o conteúdo para dentro — nunca position: absolute; top: Npx em um contêiner de conteúdo (o conteúdo transborda quando é mais alto que o espaço restante).

Somente depois que o quadro hero estiver correto, adicione entradas gsap.from() (anime para a posição CSS) e saídas gsap.to() (anime a partir dela).

Veja references/composition.md para o esquema completo de atributos de dados e regras de composição.

4. Animar com GSAP

Toda composição deve:

  • Registrar sua timeline: window.__timelines["<composition-id>"] = tl
  • Iniciar pausada: gsap.timeline({ paused: true }) — o player controla a reprodução
  • Usar valores finitos de repeat (sem repeat: -1 — quebra o motor de captura). Calcular: repeat: Math.ceil(duration / cycleDuration) - 1.
  • Ser determinística — sem Math.random(), Date.now() ou lógica de relógio. Use um PRNG com semente se precisar de pseudo-aleatoriedade.
  • Construir de forma síncrona — sem async/await, setTimeout ou Promises em torno da construção da timeline.

Veja references/gsap.md para a API principal do GSAP (tweens, eases, stagger, timelines).

5. Transições entre cenas

Composições com várias cenas exigem transições. Regras:

  1. Sempre use uma transição entre as cenas — sem cortes abruptos.
  2. Sempre use animações de entrada em cada elemento da cena (gsap.from(...)).
  3. Nunca use animações de saída exceto na cena final — a transição É a saída.
  4. A cena final pode desaparecer (fade out).

Use npx hyperframes add <transition-name> para instalar transições de shader (flash-through-white, liquid-wipe, etc.). Lista completa: npx hyperframes add --list.

6. Áudio, legendas, TTS, áudio-reativo, destaque

  • Áudio: sempre um elemento <audio> separado (o vídeo é muted playsinline).
  • TTS: npx hyperframes tts "Texto do roteiro" --voice af_nova --output narration.wav. Liste as vozes com --list. A primeira letra do ID da voz codifica o idioma (a/b=Inglês, e=Espanhol, f=Francês, j=Japonês, z=Mandarim, etc.) — a CLI infere automaticamente a localidade do fonemizador; passe --lang apenas para substituir. A fonemização em outros idiomas que não o inglês requer espeak-ng instalado no sistema.
  • Legendas: npx hyperframes transcribe narration.wav → transcrição no nível da palavra. Escolha o estilo com base no tom da transcrição (hype / corporativo / tutorial / storytelling / social — veja a tabela em references/features.md). Regra de idioma: nunca use modelos whisper .en a menos que o áudio seja confirmadamente em inglês — .en traduz áudio não inglês em vez de transcrevê-lo. Cada grupo de legenda DEVE ter um tl.set(el, { opacity: 0, visibility: "hidden" }, group.end) de eliminação após seu tween de saída — caso contrário, os grupos vazam visíveis para os posteriores.
  • Visuais áudio-reativos: pré-extraia bandas de áudio (grave / médio / agudo) e amostre por quadro dentro da timeline com um laço for de tl.call(draw, [], f / fps) — um único tween longo NÃO reage ao áudio. Mapeie grave → scale (pulso), agudo → textShadow/boxShadow (brilho), amplitude geral → opacity/y/backgroundColor. Evite clichês de barras de equalizador — deixe o conteúdo guiar o visual, o áudio impulsionar seu comportamento.
  • Destaque estilo marcador: efeitos de destaque, círculo, explosão, rabisco, contorno para ênfase em texto são CSS+GSAP determinísticos — veja references/features.md#marker-highlighting. Totalmente buscável, sem filtros SVG animados.
  • Transições de cena: toda composição com várias cenas DEVE usar transições (sem cortes abruptos). Escolha entre primitivas CSS (slide push, blur crossfade, zoom through, blocos escalonados) ou transições de shader (flash-through-white, liquid-wipe, cross-warp-morph, chromatic-split, etc.) via npx hyperframes add. Tabelas de clima e energia estão em references/features.md#transitions. Não misture transições CSS e de shader na mesma composição.

7. Lint, validar, inspecionar, visualizar, renderizar

npx hyperframes lint              # detecta falta de data-composition-id, trilhas sobrepostas, timelines não registradas
npx hyperframes validate          # auditoria de contraste WCAG em 5 timestamps
npx hyperframes inspect           # auditoria de layout visual — overflow, elementos fora do quadro, texto oculto
npx hyperframes preview           # visualização ao vivo no navegador
npx hyperframes render --quality draft --output draft.mp4    # iteração rápida
npx hyperframes render --quality high --output final.mp4     # entrega final

hyperframes validate amostra pixels de fundo atrás de cada elemento de texto e alerta sobre taxas de contraste abaixo de 4,5:1 (ou 3:1 para texto grande). hyperframes inspect é o complemento do lado do layout — executa a página em vários timestamps e sinaliza problemas que um lint estático não consegue ver (uma legenda que quebra além da área segura apenas aos 4,5s, um cartão que transborda quando seu título é a variante mais longa, um elemento que acaba atrás de um shader de transição). Execute inspect especialmente em composições com balões de fala, cartões, legendas ou tipografia apertada.

8. Site para vídeo (se o usuário fornecer uma URL)

Use o fluxo de trabalho de captura para vídeo em 7 etapas em references/website-to-video.md: capturar → DESIGN.md → SCRIPT.md → storyboard → composição → renderizar → entregar.

Armadilhas

  • HeadlessExperimental.beginFrame' wasn't found — Chromium 147+ removeu este protocolo. Certifique-se de estar no hyperframes@>=0.4.2 (detecta automaticamente e cai para o modo de captura de tela). Escapamento: export PRODUCER_FORCE_SCREENSHOT=true. Veja hyperframes#294 e references/troubleshooting.md.
  • Chrome do sistema (não chrome-headless-shell) — as renderizações travam por 120s e depois expiram. Execute npx puppeteer browsers install chrome-headless-shell (o setup.sh faz isso). hyperframes doctor relata qual binário será usado.
  • repeat: -1 em qualquer lugar — quebra o motor de captura. Sempre calcule uma contagem finita de repetição.
  • gsap.set() em elementos de clipe que entram mais tarde — o elemento não existe no carregamento da página. Use tl.set(selector, vars, timePosition) dentro da timeline, no ou após o data-start do clipe.
  • <br> dentro do texto do conteúdo — quebras forçadas não sabem a largura da fonte renderizada, então quebra natural + <br> causa quebra dupla. Use max-width para deixar o texto quebrar. Exceção: títulos curtos de exibição onde cada palavra está deliberadamente em sua própria linha.
  • Animando visibility ou display — GSAP não pode animar estas propriedades. Use autoAlpha (lida com visibilidade e opacidade).
  • Chamando video.play() ou audio.play() — o framework controla a reprodução. Nunca chame estes métodos você mesmo.
  • Construindo timelines de forma assíncrona — o motor de captura lê window.__timelines de forma síncrona após o carregamento da página. Nunca envolva a construção da timeline em async, setTimeout ou uma Promise.
  • index.html autônomo envolto em <template> — esconde todo o conteúdo do navegador. Apenas sub-composições carregadas via data-composition-src usam <template>.
  • Usando vídeo para áudio — sempre <video> mudo + <audio> separado.

Verificação

Antes e depois de renderizar:

  1. Lint + validate + inspect passam: npx hyperframes lint --strict && npx hyperframes validate && npx hyperframes inspect (lint detecta problemas estruturais, validate detecta contraste, inspect detecta layout visual / problemas de overflow — veja troubleshooting.md se avisos aparecerem).
  2. Coreografia da animação — para novas composições ou mudanças significativas de animação, execute o mapa de animação. npx hyperframes init copia os scripts da habilidade para o projeto, então o caminho é local ao projeto:
    node skills/hyperframes/scripts/animation-map.mjs <composition-dir> \
      --out <composition-dir>/.hyperframes/anim-map
    
    Gera um único animation-map.json com resumos por tween, timeline ASCII Gantt, detecção de stagger, zonas mortas (>1s sem animação), ciclos de vida de elementos e flags (offscreen, collision, invisible, paced-fast <0.2s, paced-slow >2s). Escaneie resumos e flags — corrija ou justifique cada um. Pule em pequenas edições.
  3. Arquivo existe + não vazio: ls -lh final.mp4.
  4. Duração corresponde a data-duration: ffprobe -v error -show_entries format=duration -of default=nw=1:nk=1 final.mp4.
  5. Verificação visual: extraia um quadro do meio da composição: ffmpeg -i final.mp4 -ss 00:00:05 -vframes 1 preview.png.
  6. Áudio presente se esperado: ffprobe -v error -show_streams -select_streams a -of default=nw=1:nk=1 final.mp4 | head -1.

Se hyperframes render falhar, execute npx hyperframes doctor e anexe sua saída ao relatar.

Referências

  • composition.md — atributos de dados, contrato da timeline, regras inegociáveis, regras de tipografia/ativo
  • cli.md — todos os comandos da CLI (init, capture, lint, validate, inspect, preview, render, transcribe, tts, doctor, browser, info, upgrade, benchmark)
  • gsap.md — API principal do GSAP para HyperFrames (tweens, eases, stagger, timelines, matchMedia)
  • features.md — legendas, TTS, áudio-reativo, destaque de marcador, transições (carregar sob demanda)
  • website-to-video.md — fluxo de trabalho de captura para vídeo em 7 etapas
  • troubleshooting.md — correção do OpenClaw, variáveis de ambiente, erros comuns de renderização

Habilidades Relacionadas