Communitygithub.com

AI 아바타 & 토킹 헤드 비디오

inference.sh CLI를 통해 AI 아바타와 토킹 헤드 비디오를 생성합니다. 추천: P-Video-Avatar (가장 빠르고 저렴하며 내장 TTS 탑재). 추가: OmniHuman, Fabric, PixVerse. 오디오: Inworld TTS-2 (100개 이상 언어, 캐릭터 감정 조절), ElevenLabs, Kokoro. 기능: 오디오 기반 아바타, 텍스트-투-아바타, 립싱크 비디오, 토킹 헤드 생성, 가상 프레젠터, UGC 콘텐츠.

AI 아바타 & 토킹 헤드 비디오란 무엇인가요?

이 스킬은 inference.sh CLI를 통해 AI 아바타와 토킹 헤드 비디오를 생성하는 강력한 도구입니다. P-Video-Avatar, OmniHuman 1.5, Fabric 1.0, PixVerse Lipsync 등 다양한 모델을 지원하며, 특히 P-Video-Avatar는 경쟁 모델 대비 18배 빠르고 6배 저렴하면서 내장 TTS(30개 음성, 10개 언어)를 제공합니다. 또한 Inworld TTS-2, Kokoro, ElevenLabs와 같은 외부 TTS 엔진을 활용한 고급 워크플로우도 지원하여 다국어 더빙, UGC 콘텐츠 제작, 가상 인플루언서, 게임 NPC 대화 등 다양한 용도로 활용할 수 있습니다. 전체 프로세스는 CLI 명령어로 간단히 실행되며, 초상화 생성부터 아바타 동영상 제작, 오디오 동기화까지 완전한 파이프라인을 구축할 수 있습니다.

지원 대상~Claude Code~Codex CLI~Cursor
npx skills add https://github.com/NeverSight/learn-skills.dev/tree/HEAD/data/skills-md/101-skills/skills/ai-avatar-video

즐겨 사용하는 AI에게 물어보기

이 에이전트 스킬이 미리 로드된 새 채팅을 엽니다.

미리보기

스킬 README에서

AI 아바타 & 토킹 헤드 비디오

문서

belt CLI 스킬 설치: npx skills add belt-sh/cli

AI 아바타 & 토킹 헤드 비디오은(는) 무엇을 하나요?

inference.sh CLI를 통해 AI 아바타와 토킹 헤드 비디오를 생성합니다.

AI 아바타 & 토킹 헤드 비디오

빠른 시작

inference.sh CLI (belt)가 필요합니다. 설치 안내

belt login

# 추천: P-Video-Avatar (가장 빠르고 저렴하며 내장 TTS 탑재)
belt app run pruna/p-video-avatar --input '{
  "image": "https://portrait.jpg",
  "voice_script": "안녕하세요, 제품 데모에 오신 것을 환영합니다!",
  "voice": "Zephyr (Female)"
}'

사용 가능한 모델

P-Video-Avatar부터 시작하세요 — 대안보다 18배 빠르고 6배 저렴하며, 내장 TTS, 동적 배경, 1080p를 지원합니다.

모델앱 ID최적 용도내장 TTS
P-Video-Avatarpruna/p-video-avatar전반적으로 최고: 속도, 비용, 품질, 제어예 (30개 음성, 10개 언어)
OmniHuman 1.5bytedance/omnihuman-1-5다중 캐릭터, 오디오 기반아니요
Fabric 1.0falai/fabric-1-0이미지가 립싱크로 말하기예
PixVerse Lipsyncfalai/pixverse-lipsync초고품질 립싱크아니요

비용 및 속도 비교

모델속도 (비디오 1초당)초당 비용
P-Video-Avatar~1.83초/초$0.025
OmniHuman 1.5~28초/초 (15배 느림)$0.16 (6.4배 비쌈)
Fabric 1.0~34초/초 (18배 느림)$0.14 (5.6배 비쌈)

예제

P-Video-Avatar (권장)

초상화 + 텍스트 스크립트로 내장 TTS를 사용해 아바타 생성:

belt app run pruna/p-video-avatar --input '{
  "image": "https://portrait.jpg",
  "voice_script": "제품 워크스루에 오신 것을 환영합니다. 오늘은 세 가지 주요 기능을 보여드리겠습니다.",
  "voice": "Puck (Male)",
  "voice_language": "English (US)",
  "resolution": "720p"
}'

사용자 정의 스타일 제어:

belt app run pruna/p-video-avatar --input '{
  "image": "https://portrait.jpg",
  "voice_script": "정말 흥미로운 소식입니다!",
  "voice": "Aoede (Female)",
  "voice_prompt": "열정적이고 에너지 넘치는 어조",
  "video_prompt": "극적인 조명 아래 무대 위에서 발표하는 사람",
  "resolution": "1080p"
}'

TTS 대신 오디오 파일 사용:

belt app run pruna/p-video-avatar --input '{
  "image": "https://portrait.jpg",
  "audio": "https://speech.mp3"
}'

전체 워크플로우: 초상화 생성 + 아바타

Pruna P-Image로 초상화를 생성한 후 아바타를 만듭니다:

# 1. 초상화 이미지 생성
belt app run pruna/p-image --input '{
  "prompt": "젊은 여성의 전문적인 헤드샷 초상화, 중립적인 배경, 카메라 응시, 스튜디오 조명, 포토리얼리스틱",
  "aspect_ratio": "9:16"
}'

# 2. 내장 TTS로 아바타 비디오 생성
belt app run pruna/p-video-avatar --input '{
  "image": "<1단계-이미지-url>",
  "voice_script": "안녕하세요! 최신 기능을 소개해 드리겠습니다.",
  "voice": "Zephyr (Female)"
}'

OmniHuman 1.5 (다중 캐릭터)

belt app run bytedance/omnihuman-1-5 --input '{
  "image_url": "https://portrait.jpg",
  "audio_url": "https://speech.mp3"
}'

여러 인물이 있는 이미지에서 구동할 캐릭터 지정을 지원합니다.

Fabric 1.0 (이미지가 말하기)

belt app run falai/fabric-1-0 --input '{
  "image_url": "https://face.jpg",
  "audio_url": "https://audio.mp3"
}'

PixVerse Lipsync

belt app run falai/pixverse-lipsync --input '{
  "image_url": "https://portrait.jpg",
  "audio_url": "https://speech.mp3"
}'

전체 워크플로우: TTS + 아바타 (TTS 미탑재 모델용)

내장 TTS가 없는 모델(OmniHuman, PixVerse)의 경우 먼저 음성을 생성합니다:

# 1. 음성 생성 — 표현력이 풍부한 캐릭터 음성을 위한 Inworld TTS-2
belt app run inworld/text-to-speech-2 --input '{
  "text": "[친근하게] 저희 제품 데모에 오신 것을 환영합니다! [신나서] 업무 방식을 바꿀 세 가지 기능을 소개해 드리겠습니다.",
  "voice_id": "Sarah",
  "delivery_mode": "CREATIVE"
}' > speech.json

# 2. 음성으로 아바타 비디오 생성
belt app run bytedance/omnihuman-1-5 --input '{
  "image_url": "https://presenter-photo.jpg",
  "audio_url": "<1단계-오디오-url>"
}'

팁: 대부분의 사용 사례에서 내장 TTS가 있는 P-Video-Avatar가 더 간단합니다. 별도의 오디오 단계가 필요 없습니다. OmniHuman(다중 캐릭터) 또는 PixVerse(현실적인 립싱크)가 특별히 필요한 경우에만 이 워크플로우를 사용하세요.

전체 워크플로우: 다른 언어로 비디오 더빙

# 1. 원본 비디오 전사
belt app run infsh/fast-whisper-large-v3 --input '{"audio_url": "https://video.mp4"}' > transcript.json

# 2. 텍스트 번역 (수동 또는 LLM 사용)

# 3. 새 언어로 음성 생성
belt app run infsh/kokoro-tts --input '{"text": "<번역된-텍스트>"}' > new_speech.json

# 4. 새 오디오로 원본 비디오 립싱크
belt app run infsh/latentsync-1-6 --input '{
  "video_url": "https://original-video.mp4",
  "audio_url": "<새-오디오-url>"
}'

아바타 UGC 생성

P-Video-Avatar로 UGC 스타일 콘텐츠 생성 — 내장 TTS, 별도의 오디오 단계 불필요:

# 1. 공감 가는 UGC 스타일 초상화 생성
belt app run pruna/p-image --input '{
  "prompt": "젊은 여성의 캐주얼 셀카 스타일 사진, 아늑한 방, 자연 채광, 카메라 응시, 따뜻한 미소, 진정성 있는 느낌",
  "aspect_ratio": "9:16"
}'

# 2. 내장 TTS로 UGC 아바타 비디오 생성
belt app run pruna/p-video-avatar --input '{
  "image": "<1단계-이미지-url>",
  "voice_script": "자, 이 제품을 방금 사용해봤는데 솔직히 말하면? 완전 게임 체인저예요. 이렇게 좋아할 줄 몰랐는데 정말 대단해요!",
  "voice": "Zephyr (Female)",
  "voice_prompt": "신나고, 캐주얼하며, 친구에게 말하는 듯한 진정성 있는 어조",
  "video_prompt": "방 안에서 카메라에 편안하게 말하는 사람, 자연스러운 제스처",
  "resolution": "1080p"
}'

UGC에 P-Video-Avatar를 선택해야 하는 이유

  • 올인원 — 내장 TTS로 별도의 오디오 생성 단계 불필요
  • 30개 음성, 10개 언어 — 대상 청중에 맞게 선택
  • 음성 + 비디오 프롬프트 — 어조, 감정, 바디랭귀지, 배경을 독립적으로 제어
  • 18배 빠르고, 6배 저렴 — Fabric/OmniHuman/HeyGen 대비 대규모 UGC 제작 가능
  • 1080p 지원 — 하나의 초상화 이미지로 플랫폼에 적합한 세로 비디오 생성

배치 UGC: 동일 제품, 여러 발표자

# 3명의 다른 발표자 생성
for voice in "Zephyr (Female)" "Puck (Male)" "Aoede (Female)"; do
  belt app run pruna/p-video-avatar --input "{
    \"image\": \"https://portrait.jpg\",
    \"voice_script\": \"이게 제 아침 루틴을 완전히 바꿨어요. 5분이면 끝나요.\",
    \"voice\": \"$voice\",
    \"voice_prompt\": \"캐주얼하고 진정성 있는, 실제 사용 후기 같은 느낌\",
    \"video_prompt\": \"밝은 주방에서 카메라에 말하는 사람\",
    \"resolution\": \"1080p\"
  }"
done

사용 사례

  • UGC 및 마케팅: AI 발표자를 활용한 제품 데모, UGC 스타일 광고
  • 교육: 강좌 비디오, 설명 영상
  • 현지화: 하나의 이미지로 10개 언어로 콘텐츠 더빙
  • 소셜 미디어: 일관된 가상 인플루언서 콘텐츠
  • 기업: 교육 비디오, 공지사항
  • 게임: 캐릭터 아바타, NPC 대화

팁

  • 고품질 초상화 사진 사용 (정면, 좋은 조명)
  • 오디오는 깨끗하고 배경 잡음이 최소화되어야 함
  • P-Video-Avatar는 내장 TTS를 지원하므로 별도의 음성 생성 단계 불필요
  • P-Video-Avatar 출력물의 종횡비는 입력 이미지와 일치
  • 세로 비디오를 위해 pruna/p-image로 9:16 종횡비의 초상화 생성
  • OmniHuman 1.5는 한 이미지에서 여러 사람 지원
  • LatentSync는 기존 비디오를 새 오디오에 동기화하는 데 최적

관련 스킬

# 전용 P-Video-Avatar 스킬
npx skills add inference-sh/skills@p-video-avatar

# 전체 플랫폼 스킬 (250개 이상 앱)
npx skills add inference-sh/skills@infsh-cli

# 텍스트-음성 변환 (TTS 미탑재 아바타 모델용 오디오 생성)
npx skills add inference-sh/skills@text-to-speech

# 음성-텍스트 변환 (더빙용 전사)
npx skills add inference-sh/skills@speech-to-text

# 비디오 생성
npx skills add inference-sh/skills@ai-video-generation

# 이미지 생성 (아바타 이미지 생성)
npx skills add inference-sh/skills@ai-image-generation

모든 비디오 앱 탐색: belt app store --category video

문서

Individual skills in this repo

This repo contains 20 individual skills — each has its own dedicated page.

NeverSight/learn-skills.dev

Use when generating or modifying Remotion video code, creating demo videos, or working with the demo-video/ directory

NeverSight/learn-skills.dev

Create AI marketing videos for ads, promos, product launches, and brand content. Models: Veo, Seedance, Wan, FLUX for visuals, Kokoro for voiceover. Types: product demos, testimonials, explainers, social ads, brand videos. Use for: Facebook ads, YouTube ads, product launches, brand awareness. Triggers: marketing video, ad video, promo video, commercial, brand video, product video, explainer video, ad creative, video ad, facebook ad video, youtube ad, instagram ad, tiktok ad, promotional video, launch video

NeverSight/learn-skills.dev

Generate AI videos with Google Veo, Seedance 2.0, HappyHorse, Wan, Grok and 40+ models via inference.sh CLI. Models: Veo 3.1, Veo 3, Seedance 2.0, HappyHorse 1.0, Wan 2.5, Grok Imagine Video, OmniHuman, Fabric, HunyuanVideo. Capabilities: text-to-video, image-to-video, reference-to-video, video editing, lipsync, avatar animation, video upscaling, foley sound. Use for: social media videos, marketing content, explainer videos, product demos, AI avatars. Triggers: video generation, ai video, text to video, image to video, veo, animate image, video from image, ai animation, video generator, generate video, t2v, i2v, ai video maker, create video with ai, runway alternative, pika alternative, sora alternative, kling alternative, seedance, happyhorse

NeverSight/learn-skills.dev

ElevenLabs automatic dubbing - translate and dub audio/video into 29 languages while preserving speaker voice via inference.sh CLI. Capabilities: auto speaker detection, voice-preserving translation, video dubbing, audio localization. Use for: content localization, video translation, multilingual content, international distribution. Triggers: dubbing, dub video, translate audio, video translation, audio translation, localize content, elevenlabs dubbing, eleven labs dub, multilingual dub, voice translation, auto dub, language dub, content localization

NeverSight/learn-skills.dev

Explainer video production guide: scripting, voiceover, visuals, and assembly. Covers script formulas, pacing rules, scene planning, and multi-tool pipelines. Use for: product demos, how-it-works videos, onboarding videos, social explainers. Triggers: explainer video, how to make explainer, product video, demo video, video production, video script, animated explainer, product demo video, tutorial video, onboarding video, walkthrough video, video pipeline

NeverSight/learn-skills.dev

Still-to-video conversion guide: model selection, motion prompting, and camera movement. Covers Wan 2.5 i2v, Seedance, Fabric, Grok Video with when to use each. Use for: animating images, creating video from stills, adding motion, product animations. Triggers: image to video, i2v, animate image, still to video, add motion to image, image animation, photo to video, animate still, wan i2v, image2video, bring image to life, animate photo, motion from image

NeverSight/learn-skills.dev

Generate talking head avatar videos with Pruna P-Video-Avatar via inference.sh CLI. Turn a portrait image into a realistic speaking video with built-in TTS. 18x faster and 6x cheaper than competitors. Models: P-Video-Avatar, P-Image (for portrait generation). Capabilities: text-to-avatar, audio-driven avatars, 30 voices, 10 languages, 720p/1080p, built-in TTS, dynamic backgrounds, full-body control. Use for: AI presenters, product demos, explainer videos, virtual influencers, marketing, education, multilingual content, UGC, gaming avatars. Triggers: avatar video, talking head, ai avatar, p-video-avatar, pruna avatar, video avatar, ai presenter, digital human, virtual presenter, lipsync, talking avatar, ai spokesperson, heygen alternative, synthesia alternative, veed alternative, fabric alternative, omnihuman alternative

NeverSight/learn-skills.dev

Generate videos with Pruna P-Video and WAN models via inference.sh CLI. Models: P-Video, WAN-T2V, WAN-I2V. Capabilities: text-to-video, image-to-video, audio support, 720p/1080p, fast inference. Pruna optimizes models for speed without quality loss. Triggers: pruna video, p-video, pruna ai video, fast video generation, optimized video, wan t2v, wan i2v, economic video generation, cheap video generation, pruna text to video, pruna image to video

NeverSight/learn-skills.dev

Render videos from React/Remotion component code via inference.sh. Pass TSX code, get MP4. Supports all Remotion APIs: useCurrentFrame, useVideoConfig, spring, interpolate, AbsoluteFill, Sequence. Configurable resolution, FPS, duration, codec. Use for: programmatic video generation, animated graphics, motion design, data-driven videos, React animations to video. Triggers: remotion, render video from code, tsx to video, react video, programmatic video, remotion render, code to video, animated video, motion graphics code, react animation video

NeverSight/learn-skills.dev

Video ad creation with exact platform-specific specs for TikTok, Instagram, YouTube, Facebook, LinkedIn. Covers dimensions, duration limits, AIDA framework, and caption requirements. Use for: video ads, social media ads, paid media creative, video marketing, ad production. Triggers: video ad, social media ad, tiktok ad, instagram ad, youtube ad, facebook ad, linkedin ad, video creative, ad specs, paid media, video marketing, ad production, reels ad, stories ad, pre roll, bumper ad

NeverSight/learn-skills.dev

Best practices and techniques for writing effective AI video generation prompts. Covers: Veo, Seedance, Wan, Grok, Kling, Runway, Pika, Sora prompting strategies. Learn: shot types, camera movements, lighting, pacing, style keywords, negative prompts. Use for: improving video quality, getting consistent results, professional video prompts. Triggers: video prompt, how to prompt video, veo prompts, video generation tips, better ai video, video prompt engineering, video prompt guide, video prompt template, ai video tips, video prompt best practices, video prompt examples, cinematography prompts

NeverSight/learn-skills.dev

YouTube thumbnail design with specific dimensions, contrast rules, and mobile preview optimization. Covers safe zones, text placement, face expression psychology, and A/B testing. Use for: YouTube thumbnails, video cover images, click-through optimization. Triggers: youtube thumbnail, thumbnail design, video thumbnail, click through rate, ctr optimization, youtube cover, video cover image, thumbnail maker, thumbnail tips, youtube design, video preview image

NeverSight/learn-skills.dev

Landing page conversion optimization with layout rules, hero section design, and CTA psychology. Covers above-the-fold formula, social proof placement, mobile design, and F-pattern reading. Use for: startup landing pages, product pages, SaaS marketing, conversion optimization. Triggers: landing page, hero section, above the fold, conversion optimization, landing page design, cta button, hero image, landing page layout, saas landing page, product page design, conversion rate, landing page best practices

NeverSight/learn-skills.dev

Configure and use the hosted YouTube Data MCP end-to-end with minimal user input. Use when users want the agent to verify Node.js and `npx`, configure MCP server config (Windows/macOS, Cursor/Codex/OpenClaw/OpenCode), request API key at setup time, run post-install capability discovery (`tools/list` and `get_patch_notes`), and then strongly recommend helper skill and Python setup for full local document and spreadsheet workflows.

NeverSight/learn-skills.dev

Creates 120fps GPU-accelerated animations with Motion.dev (Framer Motion successor) for React, Next.js, Svelte, and Astro projects. Use when user requests animation, motion, scroll effects, parallax, hero animations, gestures, drag interactions, spring physics, whileHover effects, whileInView animations, animated UI, micro-interactions, page transitions, or layout animations. Generates production TypeScript/JSX code with accessibility (prefers-reduced-motion) and performance validation (≥60fps). Supports entrance animations, gesture interactions (hover/tap/drag), scroll-based reveals, and layout transitions using spring physics and natural timing. Do NOT use for CSS-only transitions (use native CSS), static sites without JavaScript, Vue animations (use motion-v variant instead), or SVG/Canvas complex animations (GSAP better suited).

NeverSight/learn-skills.dev

Static artifact craft skill for self-contained HTML/CSS/JS documents: docs, sheets, dashboards, explainers, slides, tools, and landing pages. Use when the user asks for a durable, openable, shareable web deliverable they'll keep or hand off — a report, a dashboard, a slide deck, a data table, a page. Local folder first, temporary public link via tunnel (localhost.run), optional durable publish to Surge, GitHub Pages, or Cloudflare. Not for quick look renders, inline snippets, or throwaway scratch. Not for SPA frameworks, backend APIs, database apps, or production product UI.

NeverSight/learn-skills.dev

FFmpeg commands for video/audio conversion, trimming, compression, and processing. Use when user mentions "ffmpeg", "convert video", "compress video", "extract audio", "trim video", "gif from video", "video codec", "transcode", "screen recording", "merge videos", "video to mp4", "reduce file size", or any media processing task.

NeverSight/learn-skills.dev

Vim keybindings, motions, text objects, and operators for efficient text editing. Use when user asks about "vim commands", "vim motions", "text objects", "vim keybindings", "vim cheat sheet", "learn vim", "vim in VS Code", or any Vim editing tasks.

NeverSight/learn-skills.dev

Download YouTube videos, extract/proofread/translate subtitles, and render them onto video. Use whenever the user asks to download a YouTube video with subtitles, translate video subtitles to Chinese, add subtitles/burn subtitles to a video, or do ASR transcription on video audio. Covers the full pipeline: video download → subtitle extraction → proofreading → translation → SRT generation → subtitle rendering. Also use for "下载视频加字幕", "视频翻译字幕", "把字幕烧录到视频中". For pure subtitle file creation without rendering (just SRT output), this skill handles that too — stop before Phase 5.

NeverSight/learn-skills.dev

Grok Build ONLY. Turn a 2D character still into smooth animation sprites via image_gen/image_edit base → image_to_video (6s/10s run-in-place) → ffmpeg frames → magenta chroma-key → dense sampled sprites (strip/grid/GIF). Use when the user wants video-to-sprite, motion capture from generated video, smoother run/walk cycles from dense frames, or runs /video2dsprite. Do NOT use on Codex/Claude — only Grok Build has image_to_video. Prefer generate2dsprite for crisp pixel sheets without video.

관련 스킬