Communitygithub.com

Vídeos de Avatar e Talking Head com IA

Crie avatares de IA e vídeos de talking head usando OmniHuman, Fabric, PixVerse via CLI inference.sh. Modelos: OmniHuman 1.5, OmniHuman 1.0, Fabric 1.0, PixVerse Lipsync. Capacidades: avatares guiados por áudio, vídeos com sincronia labial, geração de talking heads, apresentadores virtuais.

O que é Vídeos de Avatar e Talking Head com IA?

Esta skill permite que agentes de IA (como Claude Code) criem avatares digitais e vídeos de 'talking head' diretamente da linha de comando, usando o CLI inference.sh. Ela oferece acesso a quatro modelos principais: OmniHuman 1.5 (melhor qualidade e suporte a múltiplos personagens), OmniHuman 1.0 (personagem único), Fabric 1.0 (imagem falante com sincronia labial) e PixVerse Lipsync (sincronia labial altamente realista). O fluxo de trabalho típico envolve fornecer uma imagem de retrato e um arquivo de áudio, resultando em um vídeo onde a imagem fala com movimento labial sincronizado. A skill também demonstra fluxos de trabalho completos, como combinar texto-para-fala (TTS) com geração de avatar para criar apresentações completas a partir de texto, ou dublar vídeos existentes em outros idiomas usando transcrição, tradução e sincronização labial. Ela é útil para criar apresentadores de IA, vídeos explicativos, influenciadores virtuais, dublagem e vídeos de marketing, servindo como uma alternativa prática a plataformas como HeyGen e Synthesia, com execução totalmente via terminal e integração com outras skills de IA do ecossistema inference.sh.

Funciona com~Claude Code~Codex CLI~Cursor
npx skills add https://github.com/modbender/skill-library-mcp/tree/HEAD/data/ai-avatar-video

Perguntar na sua IA favorita

Abre um novo chat com esta habilidade de agente já pré-carregada.

Prévia

Do README da skill

Vídeos de Avatar e Talking Head com IA

Documentação

O que Vídeos de Avatar e Talking Head com IA faz?

Crie avatares de IA e vídeos de talking head via CLI inference.sh.

Vídeos de Avatar e Talking Head com IA

Início Rápido

curl -fsSL https://cli.inference.sh | sh && infsh login

# Cria vídeo avatar a partir de imagem + áudio
infsh app run bytedance/omnihuman-1-5 --input '{
  "image_url": "https://retrato.jpg",
  "audio_url": "https://fala.mp3"
}'

Nota de instalação: O script de instalação detecta seu SO/arquitetura, baixa o binário correspondente de dist.inference.sh e verifica seu checksum SHA-256. Sem permissões elevadas ou processos em segundo plano. Instalação manual e verificação disponível.

Modelos Disponíveis

ModeloApp IDMelhor Para
OmniHuman 1.5bytedance/omnihuman-1-5Múltiplos personagens, melhor qualidade
OmniHuman 1.0bytedance/omnihuman-1-0Personagem único
Fabric 1.0falai/fabric-1-0Imagens falantes com sincronia labial
PixVerse Lipsyncfalai/pixverse-lipsyncAltamente realista

Pesquisar Apps de Avatar

infsh app list --search "omnihuman"
infsh app list --search "lipsync"
infsh app list --search "fabric"

Exemplos

OmniHuman 1.5 (Múltiplos Personagens)

infsh app run bytedance/omnihuman-1-5 --input '{
  "image_url": "https://retrato.jpg",
  "audio_url": "https://fala.mp3"
}'

Suporta especificar qual personagem controlar em imagens com várias pessoas.

Fabric 1.0 (Imagem Falante)

infsh app run falai/fabric-1-0 --input '{
  "image_url": "https://rosto.jpg",
  "audio_url": "https://audio.mp3"
}'

PixVerse Lipsync

infsh app run falai/pixverse-lipsync --input '{
  "image_url": "https://retrato.jpg",
  "audio_url": "https://fala.mp3"
}'

Gera sincronia labial altamente realista a partir de qualquer áudio.

Fluxo de Trabalho Completo: TTS + Avatar

# 1. Gera fala a partir de texto
infsh app run infsh/kokoro-tts --input '{
  "text": "Bem-vindo à nossa demonstração de produto. Hoje vou mostrar..."
}' > fala.json

# 2. Cria vídeo avatar com a fala
infsh app run bytedance/omnihuman-1-5 --input '{
  "image_url": "https://foto-apresentador.jpg",
  "audio_url": "<url-do-audio-do-passo-1>"
}'

Fluxo de Trabalho Completo: Dublar Vídeo em Outro Idioma

# 1. Transcreve o vídeo original
infsh app run infsh/fast-whisper-large-v3 --input '{"audio_url": "https://video.mp4"}' > transcricao.json

# 2. Traduz o texto (manualmente ou com um LLM)

# 3. Gera fala no novo idioma
infsh app run infsh/kokoro-tts --input '{"text": "<texto-traduzido>"}' > nova_fala.json

# 4. Sincroniza lábios do vídeo original com o novo áudio
infsh app run infsh/latentsync-1-6 --input '{
  "video_url": "https://video-original.mp4",
  "audio_url": "<url-do-novo-audio>"
}'

Casos de Uso

  • Marketing: Demonstrações de produto com apresentador IA
  • Educação: Vídeos de curso, explicadores
  • Localização: Dublar conteúdo em vários idiomas
  • Mídias Sociais: Influenciador virtual consistente
  • Corporativo: Vídeos de treinamento, comunicados

Dicas

  • Use fotos de retrato de alta qualidade (de frente, boa iluminação)
  • O áudio deve ser claro, com ruído de fundo mínimo
  • OmniHuman 1.5 suporta múltiplas pessoas em uma imagem
  • LatentSync é melhor para sincronizar vídeos existentes com novo áudio

Skills Relacionadas

# Skill completa da plataforma (mais de 150 apps)
npx skills add inference-sh/skills@inference-sh

# Texto-para-fala (gerar áudio para avatares)
npx skills add inference-sh/skills@text-to-speech

# Fala-para-texto (transcrever para dublagem)
npx skills add inference-sh/skills@speech-to-text

# Geração de vídeo
npx skills add inference-sh/skills@ai-video-generation

# Geração de imagem (criar imagens de avatar)
npx skills add inference-sh/skills@ai-image-generation

Navegue por todos os apps de vídeo: infsh app list --category video

Documentação

Individual skills in this repo

This repo contains 20 individual skills — each has its own dedicated page.

modbender/skill-library-mcp

Paid acquisition strategy, budget allocation, and avoiding common advertising mistakes across platforms

modbender/skill-library-mcp

Complete investment portfolio risk management system. Analyze positions, calculate risk metrics, stress test scenarios, optimize allocations, and generate institutional-grade risk reports — all wit...

modbender/skill-library-mcp

Borrow from Aave via credit delegation. Agent self-funds by borrowing against delegator collateral. Supports borrow, repay, health checks. Works on Aave V2/V3.

modbender/skill-library-mcp

Discover and register autonomous AI agents. Use when: browsing the agent registry, submitting an agent for verification, or embedding agent badges. NOT for: general web search or agent capability analysis.

modbender/skill-library-mcp

AI代码编辑器规则模板集合 - 为Cursor、Windsurf、Claude Code、Cline等AI编辑器提供项目规则配置。适用于需要配置AI编码助手规则的开发者,包含全栈Web、移动端、Vue3+SpringBoot等技术栈模板。

modbender/skill-library-mcp

Generate landing page code from product descriptions

modbender/skill-library-mcp

Create AI marketing videos for ads, promos, product launches, and brand content. Models: Veo, Seedance, Wan, FLUX for visuals, Kokoro for voiceover. Types: product demos, testimonials, explainers, social ads, brand videos. Use for: Facebook ads, YouTube ads, product launches, brand awareness. Triggers: marketing video, ad video, promo video, commercial, brand video, product video, explainer video, ad creative, video ad, facebook ad video, youtube ad, instagram ad, tiktok ad, promotional video, launch video

modbender/skill-library-mcp

Generate AI music videos end-to-end. Creates music with Suno (sunoapi.org), generates visuals with OpenAI/Seedream/Google/Seedance, and assembles into music video with ffmpeg. Supports timestamped lyrics (auto SRT), Suno native music video generation, slideshow/video/hybrid modes. Token-based cost tracking per generation.

modbender/skill-library-mcp

Generate AI-powered notes from videos (document, outline, or graphic-text formats)

modbender/skill-library-mcp

The video AI notes tool is provided by Baidu. Based on the video download address provided by the user, it downloads and parses the video, and finally generates AI notes corresponding to the video (a total of three types of notes can be generated: document notes, outline notes, and image-text notes).

modbender/skill-library-mcp

Automated appointment management for beauty salons, clinics, studios, and photo booths. Handles booking requests, calendar sync, conflict detection, reminders, no-show tracking, and waitlist management.

modbender/skill-library-mcp

Bird identification, life list tracking, and trading card generation. Use this skill when the user: sends a bird photo to identify, says "set up my Birdfolio" or "set my region", asks "how's my checklist", asks "Birdfolio progress", asks "how many birds have I found", asks "show my Birdfolio" or "show my life list", asks "what's my rarest bird", or asks "tell me about [bird species]". Handles everything from first-time setup through ongoing life list tracking and visual trading card generation.

modbender/skill-library-mcp

Multi-project task and research management (JSON-first CLI)

modbender/skill-library-mcp

Track stock and crypto portfolios with CLI - real-time prices, P&L, dividend tracking, multiple portfolios

modbender/skill-library-mcp

Track cryptocurrency portfolios with real-time prices, P&L calculations, and allocation analysis. Query Bitcoin, Ethereum, Solana and 10,000+ token holdings.

modbender/skill-library-mcp

加密貨幣Portfolio追蹤 - 支援TRON/ETH/BSC,分析持倉、收益、Gas費用

modbender/skill-library-mcp

Lead strategy with competitive analysis, strategic planning, growth roadmaps, and business portfolio management.

modbender/skill-library-mcp

Create ATS-optimized resumes and CVs with proper structure, metrics, and industry targeting.

modbender/skill-library-mcp

Use this skill when the user asks to build, create, design, develop, or improve ANY frontend interface, web page, UI component, or visual element. This includes: - Building landing pages, websites, web apps, dashboards, portfolios, or any web interface - Creating UI components (buttons, forms, cards, navbars, modals, etc.) - Designing pages with React, Vue, Next.js, Svelte, or any frontend framework - Adding styling or improving visual design of existing components - Implementing specific design aesthetics (modern, dark, minimalist, brutalist, etc.) - User mentions "frontend", "UI", "UX", "design", "interface", "web design", or "styling" - User asks for "beautiful", "modern", "professional", "clean", or any aesthetic adjective - User requests help with CSS, Tailwind, styled-components, or any styling approach This skill automatically retrieves the appropriate design system prompt (Neo-brutalism, Modern Dark, Bauhaus, Cyberpunk, Material, etc.) to help create visually distinctive, production-grade frontend...

modbender/skill-library-mcp

Native video analysis using Google Gemini API. Upload and analyze video files — describe scenes, extract text/UI, answer questions about content, transcribe speech, identify objects and actions. Use when: (1) User sends a video file and wants it analyzed, (2) Video summarization or description needed, (3) Extracting text, UI elements, or information from screen recordings, (4) Answering questions about video content, (5) Comparing multiple videos, (6) Analyzing tutorials, demos, or walkthroughs.

Habilidades Relacionadas