Communitygithub.com

Aadi-110i/PEP-PROJECT

inference.sh CLI를 통해 AI 아바타 및 토킹 헤드 비디오를 생성합니다. 추천: P-Video-Avatar (가장 빠르고 저렴하며 내장 TTS 제공). 또한 OmniHuman, Fabric, PixVerse 등을 지원합니다. 오디오 기반 아바타, 텍스트-투-아바타, 립싱크 비디오, 토킹 헤드 생성, 가상 프레젠터 등의 기능을 제공합니다.

PEP-PROJECT란 무엇인가요?

이 스킬은 inference.sh CLI를 활용하여 AI 아바타와 토킹 헤드 비디오를 생성하는 방법을 제공합니다. 개발자와 AI 에이전트 사용자는 이 스킬을 통해 텍스트 스크립트나 오디오 파일을 입력으로 받아 입술 움직임이 동기화된 가상 프레젠터 비디오를 손쉽게 제작할 수 있습니다. 특히 **P-Video-Avatar** 모델은 경쟁 모델 대비 18배 빠른 속도와 6배 저렴한 비용을 자랑하며 30개의 음성과 10개 언어를 지원하는 내장 TTS(Text-to-Speech)를 제공합니다. OmniHuman 1.5는 여러 인물이 포함된 이미지에서 특정 캐릭터를 구동할 수 있어 다중 캐릭터 시나리오에 적합하며, Fabric 1.0과 PixVerse Lipsync는 각각 이미지 토크와 고품질 립싱크에 특화되어 있습니다. 전체 워크플로우는 `belt` CLI를 통해 실행되며, 이미지 생성(P-Image)부터 TTS(Kokoro), 립싱크(LatentSync)까지 연계하여 마케팅, 교육, 현지화, 소셜 미디어, 기업 트레이닝 등 다양한 분야에서 AI 프레젠터와 디지털 휴먼을 구현할 수 있습니다. 또한 다국어 더빙을 위한 전체 파이프라인(전사 → 번역 → TTS → 립싱크)도 예제로 제공되어 현지화 작업에 유용합니다.

지원 대상~Claude Code~Codex CLI~Cursor
npx skills add https://github.com/Aadi-110i/PEP-PROJECT/tree/HEAD/skills/ai-avatar-video

즐겨 사용하는 AI에게 물어보기

이 에이전트 스킬이 미리 로드된 새 채팅을 엽니다.

미리보기

스킬 README에서

AI 아바타 & 토킹 헤드 비디오

문서

AI 아바타 & 토킹 헤드 비디오

inference.sh CLI를 통해 AI 아바타와 토킹 헤드 비디오를 생성합니다.

AI 아바타 & 토킹 헤드 비디오

빠른 시작

inference.sh CLI (belt)가 필요합니다. 설치 안내

belt login

# 권장: P-Video-Avatar (가장 빠르고 저렴하며 내장 TTS 제공)
belt app run pruna/p-video-avatar --input '{
  "image": "https://portrait.jpg",
  "voice_script": "안녕하세요, 제품 데모에 오신 것을 환영합니다!",
  "voice": "Zephyr (Female)"
}'

사용 가능한 모델

P-Video-Avatar로 시작하세요 — 대안보다 18배 빠르고 6배 저렴하며 내장 TTS, 동적 배경, 1080p를 지원합니다.

모델앱 ID최적 사용내장 TTS
P-Video-Avatarpruna/p-video-avatar전반적으로 최고: 속도, 비용, 품질, 제어예 (30개 음성, 10개 언어)
OmniHuman 1.5bytedance/omnihuman-1-5다중 캐릭터, 오디오 기반아니요
Fabric 1.0falai/fabric-1-0이미지 토크(립싱크)예
PixVerse Lipsyncfalai/pixverse-lipsync매우 사실적인 립싱크아니요

비용 및 속도 비교

모델속도 (비디오 1초당)초당 비용
P-Video-Avatar~1.83초/초$0.025
OmniHuman 1.5~28초/초 (15배 느림)$0.16 (6.4배 비쌈)
Fabric 1.0~34초/초 (18배 느림)$0.14 (5.6배 비쌈)

예제

P-Video-Avatar (권장)

초상화 + 텍스트 스크립트로 내장 TTS를 사용해 아바타 생성:

belt app run pruna/p-video-avatar --input '{
  "image": "https://portrait.jpg",
  "voice_script": "제품 워크스루에 오신 것을 환영합니다. 오늘 세 가지 핵심 기능을 보여드리겠습니다.",
  "voice": "Puck (Male)",
  "voice_language": "English (US)",
  "resolution": "720p"
}'

사용자 정의 스타일 제어:

belt app run pruna/p-video-avatar --input '{
  "image": "https://portrait.jpg",
  "voice_script": "이것은 정말 exciting 소식입니다!",
  "voice": "Aoede (Female)",
  "voice_prompt": "열정적이고 활기찬 어조",
  "video_prompt": "화자는 무대 위에서 드라마틱한 조명을 받으며 발표하고 있습니다",
  "resolution": "1080p"
}'

TTS 대신 오디오 파일 사용:

belt app run pruna/p-video-avatar --input '{
  "image": "https://portrait.jpg",
  "audio": "https://speech.mp3"
}'

전체 워크플로우: 초상화 생성 + 아바타

Pruna P-Image로 초상화를 생성한 후 아바타 생성:

# 1. 초상화 이미지 생성
belt app run pruna/p-image --input '{
  "prompt": "젊은 여성의 프로필 사진, 중립 배경, 카메라를 바라보며, 스튜디오 조명, 포토리얼리스틱",
  "aspect_ratio": "9:16"
}'

# 2. 내장 TTS로 아바타 비디오 생성
belt app run pruna/p-video-avatar --input '{
  "image": "<1단계-이미지-url>",
  "voice_script": "안녕하세요! 최신 기능들을 안내해 드리겠습니다.",
  "voice": "Zephyr (Female)"
}'

OmniHuman 1.5 (다중 캐릭터)

belt app run bytedance/omnihuman-1-5 --input '{
  "image_url": "https://portrait.jpg",
  "audio_url": "https://speech.mp3"
}'

여러 사람이 있는 이미지에서 구동할 캐릭터를 지정할 수 있습니다.

Fabric 1.0 (이미지 토크)

belt app run falai/fabric-1-0 --input '{
  "image_url": "https://face.jpg",
  "audio_url": "https://audio.mp3"
}'

PixVerse Lipsync

belt app run falai/pixverse-lipsync --input '{
  "image_url": "https://portrait.jpg",
  "audio_url": "https://speech.mp3"
}'

전체 워크플로우: TTS + 아바타 (TTS 미지원 모델 대상)

내장 TTS가 없는 모델의 경우 먼저 음성을 생성합니다:

# 1. 텍스트에서 음성 생성
belt app run infsh/kokoro-tts --input '{
  "prompt": "제품 데모에 오신 것을 환영합니다. 오늘 여러분께..."
}' > speech.json

# 2. 생성된 음성으로 아바타 비디오 생성
belt app run bytedance/omnihuman-1-5 --input '{
  "image_url": "https://presenter-photo.jpg",
  "audio_url": "<1단계-오디오-url>"
}'

전체 워크플로우: 다른 언어로 비디오 더빙

# 1. 원본 비디오 전사
belt app run infsh/fast-whisper-large-v3 --input '{"audio_url": "https://video.mp4"}' > transcript.json

# 2. 텍스트 번역 (수동 또는 LLM 사용)

# 3. 새로운 언어로 음성 생성
belt app run infsh/kokoro-tts --input '{"text": "<번역된-텍스트>"}' > new_speech.json

# 4. 새 오디오로 원본 비디오 립싱크
belt app run infsh/latentsync-1-6 --input '{
  "video_url": "https://original-video.mp4",
  "audio_url": "<새로운-오디오-url>"
}'

사용 사례

  • 마케팅: AI 프레젠터를 이용한 제품 데모
  • 교육: 강의 영상, 설명 영상
  • 현지화: 여러 언어로 콘텐츠 더빙
  • 소셜 미디어: 일관된 가상 인플루언서
  • 기업: 교육 영상, 공지 사항
  • 게임: 캐릭터 아바타, NPC 대화

팁

  • 고품질 초상화 사진 사용 (정면, 좋은 조명)
  • 오디오는 깨끗하고 배경 소음이 최소여야 함
  • P-Video-Avatar는 내장 TTS 지원 — 별도의 음성 생성 단계가 필요 없음
  • P-Video-Avatar 출력 화면 비율은 입력 이미지를 따름
  • 세로 비디오의 경우 pruna/p-image로 9:16 화면 비율의 초상화 생성
  • OmniHuman 1.5는 한 이미지에 여러 사람 지원
  • LatentSync는 기존 비디오에 새 오디오를 동기화하는 데 가장 적합

관련 스킬

# 전용 P-Video-Avatar 스킬
npx skills add inference-sh/skills@p-video-avatar

# 전체 플랫폼 스킬 (250개 이상의 앱)
npx skills add inference-sh/skills@infsh-cli

# 텍스트 음성 변환 (TTS 미지원 아바타 모델용 오디오 생성)
npx skills add inference-sh/skills@text-to-speech

# 음성 텍스트 변환 (더빙용 전사)
npx skills add inference-sh/skills@speech-to-text

# 비디오 생성
npx skills add inference-sh/skills@ai-video-generation

# 이미지 생성 (아바타 이미지 생성)
npx skills add inference-sh/skills@ai-image-generation

모든 비디오 앱 보기: belt app list --category video

문서

Individual skills in this repo

This repo contains 13 individual skills — each has its own dedicated page.

Aadi-110i/PEP-PROJECT

Create AI marketing videos for ads, promos, product launches, and brand content. Models: Veo, Seedance, Wan, FLUX for visuals, Kokoro for voiceover. Types: product demos, testimonials, explainers, social ads, brand videos. Use for: Facebook ads, YouTube ads, product launches, brand awareness. Triggers: marketing video, ad video, promo video, commercial, brand video, product video, explainer video, ad creative, video ad, facebook ad video, youtube ad, instagram ad, tiktok ad, promotional video, launch video

Aadi-110i/PEP-PROJECT

Generate AI videos with Google Veo, Seedance 2.0, HappyHorse, Wan, Grok and 40+ models via inference.sh CLI. Models: Veo 3.1, Veo 3, Seedance 2.0, HappyHorse 1.0, Wan 2.5, Grok Imagine Video, OmniHuman, Fabric, HunyuanVideo. Capabilities: text-to-video, image-to-video, reference-to-video, video editing, lipsync, avatar animation, video upscaling, foley sound. Use for: social media videos, marketing content, explainer videos, product demos, AI avatars. Triggers: video generation, ai video, text to video, image to video, veo, animate image, video from image, ai animation, video generator, generate video, t2v, i2v, ai video maker, create video with ai, runway alternative, pika alternative, sora alternative, kling alternative, seedance, happyhorse

Aadi-110i/PEP-PROJECT

ElevenLabs text-to-speech with 22+ premium voices, multilingual support, and voice tuning via inference.sh CLI. Models: eleven_multilingual_v2 (highest quality), eleven_turbo_v2_5 (low latency), eleven_flash_v2_5 (ultra-fast). Capabilities: text-to-speech, voice selection, stability/style control, 32 languages. Use for: voiceovers, audiobooks, video narration, podcasts, accessibility, IVR. Triggers: elevenlabs, eleven labs, elevenlabs tts, premium tts, professional voice, ai voice, high quality tts, multilingual tts, eleven labs voice, voice generation, natural speech, realistic voice, voice over, speech synthesis

Aadi-110i/PEP-PROJECT

Explainer video production guide: scripting, voiceover, visuals, and assembly. Covers script formulas, pacing rules, scene planning, and multi-tool pipelines. Use for: product demos, how-it-works videos, onboarding videos, social explainers. Triggers: explainer video, how to make explainer, product video, demo video, video production, video script, animated explainer, product demo video, tutorial video, onboarding video, walkthrough video, video pipeline

Aadi-110i/PEP-PROJECT

Still-to-video conversion guide: model selection, motion prompting, and camera movement. Covers Wan 2.5 i2v, Seedance, Fabric, Grok Video with when to use each. Use for: animating images, creating video from stills, adding motion, product animations. Triggers: image to video, i2v, animate image, still to video, add motion to image, image animation, photo to video, animate still, wan i2v, image2video, bring image to life, animate photo, motion from image

Aadi-110i/PEP-PROJECT

Landing page conversion optimization with layout rules, hero section design, and CTA psychology. Covers above-the-fold formula, social proof placement, mobile design, and F-pattern reading. Use for: startup landing pages, product pages, SaaS marketing, conversion optimization. Triggers: landing page, hero section, above the fold, conversion optimization, landing page design, cta button, hero image, landing page layout, saas landing page, product page design, conversion rate, landing page best practices

Aadi-110i/PEP-PROJECT

Generate talking head avatar videos with Pruna P-Video-Avatar via inference.sh CLI. Turn a portrait image into a realistic speaking video with built-in TTS. 18x faster and 6x cheaper than competitors. Models: P-Video-Avatar, P-Image (for portrait generation). Capabilities: text-to-avatar, audio-driven avatars, 30 voices, 10 languages, 720p/1080p, built-in TTS, dynamic backgrounds, full-body control. Use for: AI presenters, product demos, explainer videos, virtual influencers, marketing, education, multilingual content, UGC, gaming avatars. Triggers: avatar video, talking head, ai avatar, p-video-avatar, pruna avatar, video avatar, ai presenter, digital human, virtual presenter, lipsync, talking avatar, ai spokesperson, heygen alternative, synthesia alternative, veed alternative, fabric alternative, omnihuman alternative

Aadi-110i/PEP-PROJECT

Generate videos with Pruna P-Video and WAN models via inference.sh CLI. Models: P-Video, WAN-T2V, WAN-I2V. Capabilities: text-to-video, image-to-video, audio support, 720p/1080p, fast inference. Pruna optimizes models for speed without quality loss. Triggers: pruna video, p-video, pruna ai video, fast video generation, optimized video, wan t2v, wan i2v, economic video generation, cheap video generation, pruna text to video, pruna image to video

Aadi-110i/PEP-PROJECT

Render videos from React/Remotion component code via inference.sh. Pass TSX code, get MP4. Supports all Remotion APIs: useCurrentFrame, useVideoConfig, spring, interpolate, AbsoluteFill, Sequence. Configurable resolution, FPS, duration, codec. Use for: programmatic video generation, animated graphics, motion design, data-driven videos, React animations to video. Triggers: remotion, render video from code, tsx to video, react video, programmatic video, remotion render, code to video, animated video, motion graphics code, react animation video

Aadi-110i/PEP-PROJECT

Three.js animation - keyframe animation, skeletal animation, morph targets, animation mixing. Use when animating objects, playing GLTF animations, creating procedural motion, or blending animations.

Aadi-110i/PEP-PROJECT

Video ad creation with exact platform-specific specs for TikTok, Instagram, YouTube, Facebook, LinkedIn. Covers dimensions, duration limits, AIDA framework, and caption requirements. Use for: video ads, social media ads, paid media creative, video marketing, ad production. Triggers: video ad, social media ad, tiktok ad, instagram ad, youtube ad, facebook ad, linkedin ad, video creative, ad specs, paid media, video marketing, ad production, reels ad, stories ad, pre roll, bumper ad

Aadi-110i/PEP-PROJECT

Best practices and techniques for writing effective AI video generation prompts. Covers: Veo, Seedance, Wan, Grok, Kling, Runway, Pika, Sora prompting strategies. Learn: shot types, camera movements, lighting, pacing, style keywords, negative prompts. Use for: improving video quality, getting consistent results, professional video prompts. Triggers: video prompt, how to prompt video, veo prompts, video generation tips, better ai video, video prompt engineering, video prompt guide, video prompt template, ai video tips, video prompt best practices, video prompt examples, cinematography prompts

Aadi-110i/PEP-PROJECT

YouTube thumbnail design with specific dimensions, contrast rules, and mobile preview optimization. Covers safe zones, text placement, face expression psychology, and A/B testing. Use for: YouTube thumbnails, video cover images, click-through optimization. Triggers: youtube thumbnail, thumbnail design, video thumbnail, click through rate, ctr optimization, youtube cover, video cover image, thumbnail maker, thumbnail tips, youtube design, video preview image

관련 스킬