Communitygithub.com

AIアバター&トーキングヘッド動画

inference.sh CLIを介してAIアバターとトーキングヘッド動画を作成します。おすすめ:P-Video-Avatar(最速・最安・TTS内蔵)。他にもOmniHuman、Fabric、PixVerseに対応。

AIアバター&トーキングヘッド動画 とは?

このスキルは、inference.sh CLIを使用してAIアバターやトーキングヘッド動画を生成するための包括的なツールセットです。特にP-Video-Avatarモデルは、競合モデルと比較して18倍高速で6倍低コストであり、30の音声と10言語に対応した内蔵TTS、ダイナミック背景、1080p解像度をサポートしています。その他のモデルとして、ByteDanceのOmniHuman 1.5(マルチキャラクター、音声駆動)、Fabric 1.0(画像トーク、リップシンク内蔵)、PixVerse Lipsync(高リアルなリップシンク)も利用可能です。また、Inworld TTS-2(100以上の言語、感情制御対応)、ElevenLabs、Kokoroなどの外部TTSと連携したワークフローもサポートしています。このスキルは、AIプレゼンター動画、解説動画、バーチャルインフルエンサー、吹き替え、マーケティング動画、UGC広告、ゲーミングアバター、NPC会話など多岐にわたるユースケースに活用できます。

対応~Claude Code~Codex CLI~Cursor
npx skills add https://github.com/NeverSight/learn-skills.dev/tree/HEAD/data/skills-md/101-skills/skills/ai-avatar-video

お気に入りのAIに質問する

このエージェントスキルを事前に読み込んだ状態で新しいチャットを開きます。

プレビュー

スキル README より

AIアバター&トーキングヘッド動画

ドキュメント

belt CLIスキルのインストール: npx skills add belt-sh/cli

AIアバター&トーキングヘッド動画 は何をしますか?

inference.sh CLIを介してAIアバターとトーキングヘッド動画を作成します。

AIアバター&トーキングヘッド動画

クイックスタート

inference.sh CLI (belt) が必要です。 インストール手順

belt login

# 推奨: P-Video-Avatar(最速、最安、TTS内蔵)
belt app run pruna/p-video-avatar --input '{
  "image": "https://portrait.jpg",
  "voice_script": "こんにちは、製品デモへようこそ!",
  "voice": "Zephyr (Female)"
}'

利用可能なモデル

P-Video-Avatarから始めましょう — 代替モデルより18倍高速で6倍低コスト、内蔵TTS、ダイナミック背景、1080p対応。

モデルアプリID最適な用途内蔵TTS
P-Video-Avatarpruna/p-video-avatar総合最適:速度、コスト、品質、制御あり(30音声、10言語)
OmniHuman 1.5bytedance/omnihuman-1-5マルチキャラクター、音声駆動なし
Fabric 1.0falai/fabric-1-0画像トーク、リップシンクあり
PixVerse Lipsyncfalai/pixverse-lipsync高リアルなリップシンクなし

コスト&速度比較

モデル速度(動画1秒あたり)コスト(1秒あたり)
P-Video-Avatar約1.83秒/秒$0.025
OmniHuman 1.5約28秒/秒(15倍遅い)$0.16(6.4倍高い)
Fabric 1.0約34秒/秒(18倍遅い)$0.14(5.6倍高い)

使用例

P-Video-Avatar(推奨)

ポートレートとテキストスクリプトから内蔵TTSでアバターを生成:

belt app run pruna/p-video-avatar --input '{
  "image": "https://portrait.jpg",
  "voice_script": "製品ウォークスルーへようこそ。今日は3つの主要機能をご紹介します。",
  "voice": "Puck (Male)",
  "voice_language": "日本語",
  "resolution": "720p"
}'

カスタムスタイル制御:

belt app run pruna/p-video-avatar --input '{
  "image": "https://portrait.jpg",
  "voice_script": "これはエキサイティングなニュースです!",
  "voice": "Aoede (Female)",
  "voice_prompt": "熱意とエネルギーにあふれたトーン",
  "video_prompt": "人物がドラマチックな照明のステージでプレゼンテーションをしている",
  "resolution": "1080p"
}'

TTSの代わりに音声ファイルを使用:

belt app run pruna/p-video-avatar --input '{
  "image": "https://portrait.jpg",
  "audio": "https://speech.mp3"
}'

完全ワークフロー:ポートレート生成 + アバター

Pruna P-Imageでポートレートを生成し、アバターを作成:

# 1. ポートレート画像を生成
belt app run pruna/p-image --input '{
  "prompt": "若い女性のプロフェッショナルなヘッドショットポートレート、ニュートラルな背景、カメラを見ている、スタジオ照明、フォトリアリスティック",
  "aspect_ratio": "9:16"
}'

# 2. 内蔵TTSでアバター動画を作成
belt app run pruna/p-video-avatar --input '{
  "image": "<step-1の画像URL>",
  "voice_script": "こんにちは!最新機能をご案内しますね。",
  "voice": "Zephyr (Female)"
}'

OmniHuman 1.5(マルチキャラクター)

belt app run bytedance/omnihuman-1-5 --input '{
  "image_url": "https://portrait.jpg",
  "audio_url": "https://speech.mp3"
}'

複数人物の画像内で駆動するキャラクターを指定可能です。

Fabric 1.0(画像トーク)

belt app run falai/fabric-1-0 --input '{
  "image_url": "https://face.jpg",
  "audio_url": "https://audio.mp3"
}'

PixVerse Lipsync

belt app run falai/pixverse-lipsync --input '{
  "image_url": "https://portrait.jpg",
  "audio_url": "https://speech.mp3"
}'

完全ワークフロー:TTS + アバター(TTS非搭載モデル用)

内蔵TTSがないモデル(OmniHuman、PixVerse)の場合は、先に音声を生成します:

# 1. 音声生成 — 表現力豊かなキャラクターボイスのInworld TTS-2
belt app run inworld/text-to-speech-2 --input '{
  "text": "[friendly] 製品デモへようこそ! [excited] 仕事の仕方を変える3つの機能をご紹介します。",
  "voice_id": "Sarah",
  "delivery_mode": "CREATIVE"
}' > speech.json

# 2. 音声を使ってアバター動画を作成
belt app run bytedance/omnihuman-1-5 --input '{
  "image_url": "https://presenter-photo.jpg",
  "audio_url": "<step-1の音声URL>"
}'

ヒント: ほとんどのユースケースでは、内蔵TTS付きのP-Video-Avatarの方が簡単です(別途音声ステップは不要)。このワークフローは、OmniHuman(マルチキャラクター)やPixVerse(リアルなリップシンク)が特に必要な場合にのみ使用してください。

完全ワークフロー:動画を別言語に吹き替え

# 1. 元の動画を文字起こし
belt app run infsh/fast-whisper-large-v3 --input '{"audio_url": "https://video.mp4"}' > transcript.json

# 2. テキストを翻訳(手動またはLLMを使用)

# 3. 新しい言語で音声を生成
belt app run infsh/kokoro-tts --input '{"text": "<翻訳済みテキスト>"}' > new_speech.json

# 4. 元の動画に新しい音声でリップシンク
belt app run infsh/latentsync-1-6 --input '{
  "video_url": "https://original-video.mp4",
  "audio_url": "<新しい音声URL>"
}'

アバターUGC生成

P-Video-AvatarでUGCスタイルのコンテンツを作成 — 内蔵TTS、別途音声ステップ不要:

# 1. 親しみやすいUGCスタイルのポートレートを生成
belt app run pruna/p-image --input '{
  "prompt": "若い女性のカジュアルな自撮り風写真、居心地の良い部屋、自然光、カメラを見ている、温かい笑顔、本物の雰囲気",
  "aspect_ratio": "9:16"
}'

# 2. 内蔵TTSでUGCアバター動画を作成
belt app run pruna/p-video-avatar --input '{
  "image": "<step-1の画像URL>",
  "voice_script": "この製品を試してみたんだけど、正直言って?ゲームチェンジャーだよ。こんなに気に入るとは思わなかった!",
  "voice": "Zephyr (Female)",
  "voice_prompt": "興奮した、カジュアルで、友達と話すような本物のトーン",
  "video_prompt": "人物が部屋でカメラに向かってカジュアルに話している、自然なジェスチャー",
  "resolution": "1080p"
}'

UGCにP-Video-Avatarを選ぶ理由

  • オールインワン — 内蔵TTSで別途音声生成ステップ不要
  • 30音声、10言語 — ターゲットオーディエンスにマッチ
  • 音声+動画プロンプト — トーン、感情、ボディランゲージ、背景を個別に制御可能
  • 18倍高速、6倍低コスト — Fabric/OmniHuman/HeyGenと比較してUGCを大規模に生産
  • 1080p対応 — 1枚のポートレート画像からプラットフォーム対応の縦型動画を作成

バッチUGC:同じ製品、複数のプレゼンター

# 3人の異なるプレゼンターを生成
for voice in "Zephyr (Female)" "Puck (Male)" "Aoede (Female)"; do
  belt app run pruna/p-video-avatar --input "{
    \"image\": \"https://portrait.jpg\",
    \"voice_script\": \"これで朝のルーティンが完全に変わった。5分で終わるんだ。\",
    \"voice\": \"$voice\",
    \"voice_prompt\": \"カジュアルで本物、実際の体験談のように\",
    \"video_prompt\": \"明るいキッチンでカメラに向かって話す人物\",
    \"resolution\": \"1080p\"
  }"
done

ユースケース

  • UGC&マーケティング: 製品デモ、AIプレゼンターによるUGCスタイル広告
  • 教育: コース動画、解説動画
  • ローカライゼーション: 1枚の画像から10言語でコンテンツを吹き替え
  • ソーシャルメディア: 一貫性のあるバーチャルインフルエンサーコンテンツ
  • 企業: トレーニング動画、お知らせ
  • ゲーミング: キャラクターアバター、NPC会話

ヒント

  • 高品質なポートレート写真を使用(正面を向き、良好な照明)
  • 音声はクリアで、バックグラウンドノイズが少ないものが良い
  • P-Video-Avatarは内蔵TTS対応 — 別途音声生成ステップは不要
  • P-Video-Avatarの出力アスペクト比は入力画像に一致
  • 縦型動画には pruna/p-image で 9:16 のアスペクト比でポートレートを生成
  • OmniHuman 1.5は1枚の画像内の複数人物に対応
  • LatentSyncは既存動画を新しい音声に同期させるのに最適

関連スキル

# P-Video-Avatar専用スキル
npx skills add inference-sh/skills@p-video-avatar

# フルプラットフォームスキル(全250以上のアプリ)
npx skills add inference-sh/skills@infsh-cli

# テキスト読み上げ(TTS非搭載アバターモデル用の音声生成)
npx skills add inference-sh/skills@text-to-speech

# 音声認識(吹き替え用の文字起こし)
npx skills add inference-sh/skills@speech-to-text

# 動画生成
npx skills add inference-sh/skills@ai-video-generation

# 画像生成(アバター画像の作成)
npx skills add inference-sh/skills@ai-image-generation

全ビデオアプリを閲覧: belt app store --category video

ドキュメント

Individual skills in this repo

This repo contains 20 individual skills — each has its own dedicated page.

NeverSight/learn-skills.dev

Use when generating or modifying Remotion video code, creating demo videos, or working with the demo-video/ directory

NeverSight/learn-skills.dev

Create AI marketing videos for ads, promos, product launches, and brand content. Models: Veo, Seedance, Wan, FLUX for visuals, Kokoro for voiceover. Types: product demos, testimonials, explainers, social ads, brand videos. Use for: Facebook ads, YouTube ads, product launches, brand awareness. Triggers: marketing video, ad video, promo video, commercial, brand video, product video, explainer video, ad creative, video ad, facebook ad video, youtube ad, instagram ad, tiktok ad, promotional video, launch video

NeverSight/learn-skills.dev

Generate AI videos with Google Veo, Seedance 2.0, HappyHorse, Wan, Grok and 40+ models via inference.sh CLI. Models: Veo 3.1, Veo 3, Seedance 2.0, HappyHorse 1.0, Wan 2.5, Grok Imagine Video, OmniHuman, Fabric, HunyuanVideo. Capabilities: text-to-video, image-to-video, reference-to-video, video editing, lipsync, avatar animation, video upscaling, foley sound. Use for: social media videos, marketing content, explainer videos, product demos, AI avatars. Triggers: video generation, ai video, text to video, image to video, veo, animate image, video from image, ai animation, video generator, generate video, t2v, i2v, ai video maker, create video with ai, runway alternative, pika alternative, sora alternative, kling alternative, seedance, happyhorse

NeverSight/learn-skills.dev

ElevenLabs automatic dubbing - translate and dub audio/video into 29 languages while preserving speaker voice via inference.sh CLI. Capabilities: auto speaker detection, voice-preserving translation, video dubbing, audio localization. Use for: content localization, video translation, multilingual content, international distribution. Triggers: dubbing, dub video, translate audio, video translation, audio translation, localize content, elevenlabs dubbing, eleven labs dub, multilingual dub, voice translation, auto dub, language dub, content localization

NeverSight/learn-skills.dev

Explainer video production guide: scripting, voiceover, visuals, and assembly. Covers script formulas, pacing rules, scene planning, and multi-tool pipelines. Use for: product demos, how-it-works videos, onboarding videos, social explainers. Triggers: explainer video, how to make explainer, product video, demo video, video production, video script, animated explainer, product demo video, tutorial video, onboarding video, walkthrough video, video pipeline

NeverSight/learn-skills.dev

Still-to-video conversion guide: model selection, motion prompting, and camera movement. Covers Wan 2.5 i2v, Seedance, Fabric, Grok Video with when to use each. Use for: animating images, creating video from stills, adding motion, product animations. Triggers: image to video, i2v, animate image, still to video, add motion to image, image animation, photo to video, animate still, wan i2v, image2video, bring image to life, animate photo, motion from image

NeverSight/learn-skills.dev

Generate talking head avatar videos with Pruna P-Video-Avatar via inference.sh CLI. Turn a portrait image into a realistic speaking video with built-in TTS. 18x faster and 6x cheaper than competitors. Models: P-Video-Avatar, P-Image (for portrait generation). Capabilities: text-to-avatar, audio-driven avatars, 30 voices, 10 languages, 720p/1080p, built-in TTS, dynamic backgrounds, full-body control. Use for: AI presenters, product demos, explainer videos, virtual influencers, marketing, education, multilingual content, UGC, gaming avatars. Triggers: avatar video, talking head, ai avatar, p-video-avatar, pruna avatar, video avatar, ai presenter, digital human, virtual presenter, lipsync, talking avatar, ai spokesperson, heygen alternative, synthesia alternative, veed alternative, fabric alternative, omnihuman alternative

NeverSight/learn-skills.dev

Generate videos with Pruna P-Video and WAN models via inference.sh CLI. Models: P-Video, WAN-T2V, WAN-I2V. Capabilities: text-to-video, image-to-video, audio support, 720p/1080p, fast inference. Pruna optimizes models for speed without quality loss. Triggers: pruna video, p-video, pruna ai video, fast video generation, optimized video, wan t2v, wan i2v, economic video generation, cheap video generation, pruna text to video, pruna image to video

NeverSight/learn-skills.dev

Render videos from React/Remotion component code via inference.sh. Pass TSX code, get MP4. Supports all Remotion APIs: useCurrentFrame, useVideoConfig, spring, interpolate, AbsoluteFill, Sequence. Configurable resolution, FPS, duration, codec. Use for: programmatic video generation, animated graphics, motion design, data-driven videos, React animations to video. Triggers: remotion, render video from code, tsx to video, react video, programmatic video, remotion render, code to video, animated video, motion graphics code, react animation video

NeverSight/learn-skills.dev

Video ad creation with exact platform-specific specs for TikTok, Instagram, YouTube, Facebook, LinkedIn. Covers dimensions, duration limits, AIDA framework, and caption requirements. Use for: video ads, social media ads, paid media creative, video marketing, ad production. Triggers: video ad, social media ad, tiktok ad, instagram ad, youtube ad, facebook ad, linkedin ad, video creative, ad specs, paid media, video marketing, ad production, reels ad, stories ad, pre roll, bumper ad

NeverSight/learn-skills.dev

Best practices and techniques for writing effective AI video generation prompts. Covers: Veo, Seedance, Wan, Grok, Kling, Runway, Pika, Sora prompting strategies. Learn: shot types, camera movements, lighting, pacing, style keywords, negative prompts. Use for: improving video quality, getting consistent results, professional video prompts. Triggers: video prompt, how to prompt video, veo prompts, video generation tips, better ai video, video prompt engineering, video prompt guide, video prompt template, ai video tips, video prompt best practices, video prompt examples, cinematography prompts

NeverSight/learn-skills.dev

YouTube thumbnail design with specific dimensions, contrast rules, and mobile preview optimization. Covers safe zones, text placement, face expression psychology, and A/B testing. Use for: YouTube thumbnails, video cover images, click-through optimization. Triggers: youtube thumbnail, thumbnail design, video thumbnail, click through rate, ctr optimization, youtube cover, video cover image, thumbnail maker, thumbnail tips, youtube design, video preview image

NeverSight/learn-skills.dev

Landing page conversion optimization with layout rules, hero section design, and CTA psychology. Covers above-the-fold formula, social proof placement, mobile design, and F-pattern reading. Use for: startup landing pages, product pages, SaaS marketing, conversion optimization. Triggers: landing page, hero section, above the fold, conversion optimization, landing page design, cta button, hero image, landing page layout, saas landing page, product page design, conversion rate, landing page best practices

NeverSight/learn-skills.dev

Configure and use the hosted YouTube Data MCP end-to-end with minimal user input. Use when users want the agent to verify Node.js and `npx`, configure MCP server config (Windows/macOS, Cursor/Codex/OpenClaw/OpenCode), request API key at setup time, run post-install capability discovery (`tools/list` and `get_patch_notes`), and then strongly recommend helper skill and Python setup for full local document and spreadsheet workflows.

NeverSight/learn-skills.dev

Creates 120fps GPU-accelerated animations with Motion.dev (Framer Motion successor) for React, Next.js, Svelte, and Astro projects. Use when user requests animation, motion, scroll effects, parallax, hero animations, gestures, drag interactions, spring physics, whileHover effects, whileInView animations, animated UI, micro-interactions, page transitions, or layout animations. Generates production TypeScript/JSX code with accessibility (prefers-reduced-motion) and performance validation (≥60fps). Supports entrance animations, gesture interactions (hover/tap/drag), scroll-based reveals, and layout transitions using spring physics and natural timing. Do NOT use for CSS-only transitions (use native CSS), static sites without JavaScript, Vue animations (use motion-v variant instead), or SVG/Canvas complex animations (GSAP better suited).

NeverSight/learn-skills.dev

Static artifact craft skill for self-contained HTML/CSS/JS documents: docs, sheets, dashboards, explainers, slides, tools, and landing pages. Use when the user asks for a durable, openable, shareable web deliverable they'll keep or hand off — a report, a dashboard, a slide deck, a data table, a page. Local folder first, temporary public link via tunnel (localhost.run), optional durable publish to Surge, GitHub Pages, or Cloudflare. Not for quick look renders, inline snippets, or throwaway scratch. Not for SPA frameworks, backend APIs, database apps, or production product UI.

NeverSight/learn-skills.dev

FFmpeg commands for video/audio conversion, trimming, compression, and processing. Use when user mentions "ffmpeg", "convert video", "compress video", "extract audio", "trim video", "gif from video", "video codec", "transcode", "screen recording", "merge videos", "video to mp4", "reduce file size", or any media processing task.

NeverSight/learn-skills.dev

Vim keybindings, motions, text objects, and operators for efficient text editing. Use when user asks about "vim commands", "vim motions", "text objects", "vim keybindings", "vim cheat sheet", "learn vim", "vim in VS Code", or any Vim editing tasks.

NeverSight/learn-skills.dev

Download YouTube videos, extract/proofread/translate subtitles, and render them onto video. Use whenever the user asks to download a YouTube video with subtitles, translate video subtitles to Chinese, add subtitles/burn subtitles to a video, or do ASR transcription on video audio. Covers the full pipeline: video download → subtitle extraction → proofreading → translation → SRT generation → subtitle rendering. Also use for "下载视频加字幕", "视频翻译字幕", "把字幕烧录到视频中". For pure subtitle file creation without rendering (just SRT output), this skill handles that too — stop before Phase 5.

NeverSight/learn-skills.dev

Grok Build ONLY. Turn a 2D character still into smooth animation sprites via image_gen/image_edit base → image_to_video (6s/10s run-in-place) → ffmpeg frames → magenta chroma-key → dense sampled sprites (strip/grid/GIF). Use when the user wants video-to-sprite, motion capture from generated video, smoother run/walk cycles from dense frames, or runs /video2dsprite. Do NOT use on Codex/Claude — only Grok Build has image_to_video. Prefer generate2dsprite for crisp pixel sheets without video.

関連スキル