Communitygithub.com

modbender/skill-library-mcp

AIアバターとトーキングヘッド動画を、OmniHuman、Fabric、PixVerseを使ってinference.sh CLI経由で作成します。

skill-library-mcp とは?

このスキルは、inference.sh CLIを使用して、AIアバターやトーキングヘッド動画を作成するためのものです。OmniHuman 1.5、OmniHuman 1.0、Fabric 1.0、PixVerse Lipsyncなどのモデルをサポートしており、画像と音声からリップシンチ動画を生成できます。主なユースケースとしては、AIプレゼンター、解説動画、バーチャルインフルエンサー、吹き替え、マーケティング動画などが挙げられます。このスキルは、Claude CodeやCursor、CodexなどのAIエージェントと連携し、ターミナルから直接アバター動画を生成できるため、動画制作のワークフローを劇的に効率化します。

対応~Claude Code~Codex CLI~Cursor
npx skills add https://github.com/modbender/skill-library-mcp/tree/HEAD/data/ai-avatar-video

お気に入りのAIに質問する

このエージェントスキルを事前に読み込んだ状態で新しいチャットを開きます。

プレビュー

スキル README より

AIアバター&トーキングヘッド動画

ドキュメント

AIアバター&トーキングヘッド動画

inference.sh CLI を使ってAIアバターとトーキングヘッド動画を作成します。

AIアバター&トーキングヘッド動画

クイックスタート

curl -fsSL https://cli.inference.sh | sh && infsh login

# 画像と音声からアバター動画を作成
infsh app run bytedance/omnihuman-1-5 --input '{
  "image_url": "https://portrait.jpg",
  "audio_url": "https://speech.mp3"
}'

インストールメモ: インストールスクリプトはOS/アーキテクチャを自動検出し、dist.inference.shから適切なバイナリをダウンロードしてSHA-256チェックサムを検証します。昇格された権限やバックグラウンドプロセスは不要です。手動インストールと検証も可能です。

利用可能なモデル

モデルアプリID最適な用途
OmniHuman 1.5bytedance/omnihuman-1-5複数キャラクター、最高品質
OmniHuman 1.0bytedance/omnihuman-1-0単一キャラクター
Fabric 1.0falai/fabric-1-0画像がリップシンクで話す
PixVerse Lipsyncfalai/pixverse-lipsync非常にリアル

アバターアプリの検索

infsh app list --search "omnihuman"
infsh app list --search "lipsync"
infsh app list --search "fabric"

使用例

OmniHuman 1.5(複数キャラクター)

infsh app run bytedance/omnihuman-1-5 --input '{
  "image_url": "https://portrait.jpg",
  "audio_url": "https://speech.mp3"
}'

複数人物の画像の中で、どのキャラクターを動かすかを指定できます。

Fabric 1.0(画像が話す)

infsh app run falai/fabric-1-0 --input '{
  "image_url": "https://face.jpg",
  "audio_url": "https://audio.mp3"
}'

PixVerse Lipsync

infsh app run falai/pixverse-lipsync --input '{
  "image_url": "https://portrait.jpg",
  "audio_url": "https://speech.mp3"
}'

あらゆる音声から非常にリアルなリップシンクを生成します。

完全なワークフロー:TTS+アバター

# 1. テキストから音声を生成
infsh app run infsh/kokoro-tts --input '{
  "text": "製品デモへようこそ。本日は..."
}' > speech.json

# 2. 生成した音声でアバター動画を作成
infsh app run bytedance/omnihuman-1-5 --input '{
  "image_url": "https://presenter-photo.jpg",
  "audio_url": "<step-1の音声URL>"
}'

完全なワークフロー:別言語への動画吹き替え

# 1. 元の動画を文字起こし
infsh app run infsh/fast-whisper-large-v3 --input '{"audio_url": "https://video.mp4"}' > transcript.json

# 2. テキストを翻訳(手動またはLLMを使用)

# 3. 新しい言語で音声を生成
infsh app run infsh/kokoro-tts --input '{"text": "<翻訳テキスト>"}' > new_speech.json

# 4. 元の動画に新しい音声でリップシンク
infsh app run infsh/latentsync-1-6 --input '{
  "video_url": "https://original-video.mp4",
  "audio_url": "<新しい音声URL>"
}'

ユースケース

  • マーケティング: AIプレゼンターによる製品デモ
  • 教育: コース動画、解説動画
  • ローカライゼーション: 複数言語でのコンテンツ吹き替え
  • ソーシャルメディア: 一貫性のあるバーチャルインフルエンサー
  • 企業: トレーニング動画、お知らせ

ヒント

  • 高品質なポートレート写真を使用する(正面を向き、明るい照明)
  • 音声はクリアで、背景ノイズが最小限であること
  • OmniHuman 1.5は1枚の画像内の複数人物をサポート
  • LatentSyncは既存の動画を新しい音声に同期させるのに最適

関連スキル

# フルプラットフォームスキル(150以上の全アプリ)
npx skills add inference-sh/skills@inference-sh

# テキスト読み上げ(アバター用音声生成)
npx skills add inference-sh/skills@text-to-speech

# 音声認識(吹き替え用文字起こし)
npx skills add inference-sh/skills@speech-to-text

# 動画生成
npx skills add inference-sh/skills@ai-video-generation

# 画像生成(アバター画像作成)
npx skills add inference-sh/skills@ai-image-generation

すべての動画アプリを表示: infsh app list --category video

ドキュメント

Individual skills in this repo

This repo contains 20 individual skills — each has its own dedicated page.

modbender/skill-library-mcp

Paid acquisition strategy, budget allocation, and avoiding common advertising mistakes across platforms

modbender/skill-library-mcp

Complete investment portfolio risk management system. Analyze positions, calculate risk metrics, stress test scenarios, optimize allocations, and generate institutional-grade risk reports — all wit...

modbender/skill-library-mcp

Borrow from Aave via credit delegation. Agent self-funds by borrowing against delegator collateral. Supports borrow, repay, health checks. Works on Aave V2/V3.

modbender/skill-library-mcp

Discover and register autonomous AI agents. Use when: browsing the agent registry, submitting an agent for verification, or embedding agent badges. NOT for: general web search or agent capability analysis.

modbender/skill-library-mcp

AI代码编辑器规则模板集合 - 为Cursor、Windsurf、Claude Code、Cline等AI编辑器提供项目规则配置。适用于需要配置AI编码助手规则的开发者,包含全栈Web、移动端、Vue3+SpringBoot等技术栈模板。

modbender/skill-library-mcp

Generate landing page code from product descriptions

modbender/skill-library-mcp

Create AI marketing videos for ads, promos, product launches, and brand content. Models: Veo, Seedance, Wan, FLUX for visuals, Kokoro for voiceover. Types: product demos, testimonials, explainers, social ads, brand videos. Use for: Facebook ads, YouTube ads, product launches, brand awareness. Triggers: marketing video, ad video, promo video, commercial, brand video, product video, explainer video, ad creative, video ad, facebook ad video, youtube ad, instagram ad, tiktok ad, promotional video, launch video

modbender/skill-library-mcp

Generate AI music videos end-to-end. Creates music with Suno (sunoapi.org), generates visuals with OpenAI/Seedream/Google/Seedance, and assembles into music video with ffmpeg. Supports timestamped lyrics (auto SRT), Suno native music video generation, slideshow/video/hybrid modes. Token-based cost tracking per generation.

modbender/skill-library-mcp

Generate AI-powered notes from videos (document, outline, or graphic-text formats)

modbender/skill-library-mcp

The video AI notes tool is provided by Baidu. Based on the video download address provided by the user, it downloads and parses the video, and finally generates AI notes corresponding to the video (a total of three types of notes can be generated: document notes, outline notes, and image-text notes).

modbender/skill-library-mcp

Automated appointment management for beauty salons, clinics, studios, and photo booths. Handles booking requests, calendar sync, conflict detection, reminders, no-show tracking, and waitlist management.

modbender/skill-library-mcp

Bird identification, life list tracking, and trading card generation. Use this skill when the user: sends a bird photo to identify, says "set up my Birdfolio" or "set my region", asks "how's my checklist", asks "Birdfolio progress", asks "how many birds have I found", asks "show my Birdfolio" or "show my life list", asks "what's my rarest bird", or asks "tell me about [bird species]". Handles everything from first-time setup through ongoing life list tracking and visual trading card generation.

modbender/skill-library-mcp

Multi-project task and research management (JSON-first CLI)

modbender/skill-library-mcp

Track stock and crypto portfolios with CLI - real-time prices, P&L, dividend tracking, multiple portfolios

modbender/skill-library-mcp

Track cryptocurrency portfolios with real-time prices, P&L calculations, and allocation analysis. Query Bitcoin, Ethereum, Solana and 10,000+ token holdings.

modbender/skill-library-mcp

加密貨幣Portfolio追蹤 - 支援TRON/ETH/BSC,分析持倉、收益、Gas費用

modbender/skill-library-mcp

Lead strategy with competitive analysis, strategic planning, growth roadmaps, and business portfolio management.

modbender/skill-library-mcp

Create ATS-optimized resumes and CVs with proper structure, metrics, and industry targeting.

modbender/skill-library-mcp

Use this skill when the user asks to build, create, design, develop, or improve ANY frontend interface, web page, UI component, or visual element. This includes: - Building landing pages, websites, web apps, dashboards, portfolios, or any web interface - Creating UI components (buttons, forms, cards, navbars, modals, etc.) - Designing pages with React, Vue, Next.js, Svelte, or any frontend framework - Adding styling or improving visual design of existing components - Implementing specific design aesthetics (modern, dark, minimalist, brutalist, etc.) - User mentions "frontend", "UI", "UX", "design", "interface", "web design", or "styling" - User asks for "beautiful", "modern", "professional", "clean", or any aesthetic adjective - User requests help with CSS, Tailwind, styled-components, or any styling approach This skill automatically retrieves the appropriate design system prompt (Neo-brutalism, Modern Dark, Bauhaus, Cyberpunk, Material, etc.) to help create visually distinctive, production-grade frontend...

modbender/skill-library-mcp

Native video analysis using Google Gemini API. Upload and analyze video files — describe scenes, extract text/UI, answer questions about content, transcribe speech, identify objects and actions. Use when: (1) User sends a video file and wants it analyzed, (2) Video summarization or description needed, (3) Extracting text, UI elements, or information from screen recordings, (4) Answering questions about video content, (5) Comparing multiple videos, (6) Analyzing tutorials, demos, or walkthroughs.

関連スキル