Communitygithub.com

ComeOnOliver/skillshub

OmniHuman、Fabric、PixVerse などのモデルを inference.sh CLI で使用して、AI アバターとトーキングヘッド動画を作成します。

skillshub とは?

このスキルは、inference.sh CLI を使用して、AI アバターやトーキングヘッド動画を生成するための包括的なツールセットです。OmniHuman 1.5 や 1.0、Fabric 1.0、PixVerse Lipsync など、複数の強力なモデルをサポートし、画像と音声から高品質なリップシンク動画を作成できます。このスキルは、AI プレゼンター、説明動画、バーチャルインフルエンサー、動画の吹き替え、マーケティング動画など、幅広いユースケースに適しています。主な機能には、音声駆動のアバター生成、リップシンク動画、トーキングヘッド生成、TTS と組み合わせたワークフロー、動画の吹き替えパイプラインが含まれます。また、infsh app list でアバター関連アプリを検索したり、関連スキル(テキスト読み上げ、音声認識、動画生成など)と連携して、より複雑なメディア制作ワークフローを構築することもできます。

対応~Claude Code~Codex CLI~Cursor
npx skills add https://github.com/ComeOnOliver/skillshub/tree/HEAD/skills/aiskillstore/marketplace/inference-sh/ai-avatar-video

お気に入りのAIに質問する

このエージェントスキルを事前に読み込んだ状態で新しいチャットを開きます。

ドキュメント

AI アバター&トーキングヘッド動画

inference.sh CLI を使用して、AI アバターとトーキングヘッド動画を作成します。

クイックスタート

curl -fsSL https://cli.inference.sh | sh && infsh login

# 画像と音声からアバター動画を作成
infsh app run bytedance/omnihuman-1-5 --input '{
  "image_url": "https://portrait.jpg",
  "audio_url": "https://speech.mp3"
}'

利用可能なモデル

モデルアプリ ID最適な用途
OmniHuman 1.5bytedance/omnihuman-1-5複数キャラクター、最高品質
OmniHuman 1.0bytedance/omnihuman-1-0単一キャラクター
Fabric 1.0falai/fabric-1-0画像がリップシンクで話す
PixVerse Lipsyncfalai/pixverse-lipsync非常にリアルなリップシンク

アバターアプリの検索

infsh app list --search "omnihuman"
infsh app list --search "lipsync"
infsh app list --search "fabric"

使用例

OmniHuman 1.5(複数キャラクター)

infsh app run bytedance/omnihuman-1-5 --input '{
  "image_url": "https://portrait.jpg",
  "audio_url": "https://speech.mp3"
}'

複数人物の画像で駆動するキャラクターを指定できます。

Fabric 1.0(画像が話す)

infsh app run falai/fabric-1-0 --input '{
  "image_url": "https://face.jpg",
  "audio_url": "https://audio.mp3"
}'

PixVerse Lipsync

infsh app run falai/pixverse-lipsync --input '{
  "image_url": "https://portrait.jpg",
  "audio_url": "https://speech.mp3"
}'

任意の音声から非常にリアルなリップシンクを生成します。

完全ワークフロー:TTS + アバター

# 1. テキストから音声を生成
infsh app run infsh/kokoro-tts --input '{
  "text": "製品デモへようこそ。本日は..."
}' > speech.json

# 2. 生成した音声でアバター動画を作成
infsh app run bytedance/omnihuman-1-5 --input '{
  "image_url": "https://presenter-photo.jpg",
  "audio_url": "<step-1 の音声URL>"
}'

完全ワークフロー:動画を別言語に吹き替え

# 1. 元の動画を文字起こし
infsh app run infsh/fast-whisper-large-v3 --input '{"audio_url": "https://video.mp4"}' > transcript.json

# 2. テキストを翻訳(手動または LLM を使用)

# 3. 新しい言語で音声を生成
infsh app run infsh/kokoro-tts --input '{"text": "<翻訳テキスト>"}' > new_speech.json

# 4. 元の動画に新しい音声でリップシンク
infsh app run infsh/latentsync-1-6 --input '{
  "video_url": "https://original-video.mp4",
  "audio_url": "<新しい音声のURL>"
}'

ユースケース

  • マーケティング: AI プレゼンターによる製品デモ
  • 教育: コース動画、説明動画
  • ローカライゼーション: 複数言語へのコンテンツ吹き替え
  • ソーシャルメディア: 一貫性のあるバーチャルインフルエンサー
  • 企業: トレーニング動画、お知らせ

ヒント

  • 高品質なポートレート写真を使用する(正面を向き、照明良好)
  • 音声は明瞭でバックグラウンドノイズが最小限であること
  • OmniHuman 1.5 は一枚の画像内の複数人物に対応
  • LatentSync は既存の動画に新しい音声を同期させるのに最適

関連スキル

# フルプラットフォームスキル(全 150 以上のアプリ)
npx skills add inference-sh/skills@inference-sh

# テキスト読み上げ(アバター用音声生成)
npx skills add inference-sh/skills@text-to-speech

# 音声認識(吹き替え用文字起こし)
npx skills add inference-sh/skills@speech-to-text

# 動画生成
npx skills add inference-sh/skills@ai-video-generation

# 画像生成(アバター画像作成)
npx skills add inference-sh/skills@ai-image-generation

すべての動画アプリを参照: infsh app list --category video

ドキュメント

Individual skills in this repo

This repo contains 20 individual skills — each has its own dedicated page.

ComeOnOliver/skillshub

Create stunning, animation-rich HTML presentations from scratch or by converting PowerPoint files. Use when the user wants to build a presentation, convert a PPT/PPTX to web, or create slides for a talk/pitch. Helps non-designers discover their aesthetic through visual exploration rather than abstract choices.

ComeOnOliver/skillshub

Next.js 16+ 和 Turbopack — 增量打包、文件系统缓存、开发速度,以及何时使用 Turbopack 与 webpack。

ComeOnOliver/skillshub

SwiftUI architecture patterns, state management with @Observable, view composition, navigation, performance optimization, and modern iOS/macOS UI best practices.

ComeOnOliver/skillshub

See, Understand, Act on video and audio. See- ingest from local files, URLs, RTSP/live feeds, or live record desktop; return realtime context and playable stream links. Understand- extract frames, build visual/semantic/temporal indexes, and search moments with timestamps and auto-clips. Act- transcode and normalize (codec, fps, resolution, aspect ratio), perform timeline edits (subtitles, text/image overlays, branding, audio overlays, dubbing, translation), generate media assets (image, audio, video), and create real time alerts for events from live streams or desktop capture.

ComeOnOliver/skillshub

AI-assisted video editing workflows for cutting, structuring, and augmenting real footage. Covers the full pipeline from raw capture through FFmpeg, Remotion, ElevenLabs, fal.ai, and final polish in Descript or CapCut. Use when the user wants to edit video, cut footage, create vlogs, or build video content.

ComeOnOliver/skillshub

Next.js 15 애플리케이션을 위한 프론트엔드 개발 가이드라인. React 19, TypeScript, Shadcn/ui, Tailwind CSS를 사용한 모던 패턴. Server Components, Client Components, App Router, 파일 구조, Shadcn/ui 컴포넌트, 성능 최적화, TypeScript 모범 사례 포함. 컴포넌트, 페이지, 기능 생성, 데이터 페칭, 스타일링, 라우팅, 프론트엔드 코드 작업 시 사용.

ComeOnOliver/skillshub

Provides Tamagui patterns for config v4, compiler optimization, styled context, and cross-platform styling. Must use when working with Tamagui projects (tamagui.config.ts, @tamagui imports).

ComeOnOliver/skillshub

Create distinctive, production-grade frontend interfaces with high design quality. Use this skill when the user asks to build web components, pages, or applications. Generates creative, polished code that avoids generic AI aesthetics.

ComeOnOliver/skillshub

Create high-converting, visually distinctive landing pages. Use when building marketing pages, product launches, SaaS homepages, or any single-page conversion-focused website. Guides section-by-section composition with anti-AI-slop principles.

ComeOnOliver/skillshub

Auto-loaded context for Portfolio Buddy 2 development. Use for ANY task involving: React 19 development, TypeScript, portfolio analysis features, metrics calculations, trading strategy comparison, or working with the Portfolio Buddy 2 codebase. Contains tech stack, known issues, and architectural constraints.

ComeOnOliver/skillshub

Next.js development tooling via MCP. Inspect routes, components, build info, and debug Next.js apps. Use when working on Next.js applications, debugging routing, or inspecting app structure. NOT for general React or non-Next.js projects.

ComeOnOliver/skillshub

Implement UI using Shadcn MCP (atoms/theme) and 21st.dev MCP (complex sections). Use when adding buttons, layouts, or generating landing pages.

ComeOnOliver/skillshub

A conceptual skill for building an API client in Next.js that handles JWT tokens

ComeOnOliver/skillshub

Best practices and patterns for Next.js App Router, Server Actions, and Routing in this project.

ComeOnOliver/skillshub

The Design System, Theme, and UX rules for the Physical AI Hub.

ComeOnOliver/skillshub

Comprehensive frontend development skill for building modern, performant web applications using ReactJS, NextJS, TypeScript, Tailwind CSS. Includes component scaffolding, performance optimization, bundle analysis, and UI best practices. Use when developing frontend features, optimizing performance, implementing UI/UX designs, managing state, or reviewing frontend code.

ComeOnOliver/skillshub

This document captures learnings from fixing keyboard navigation issues when floating components (Select, DropdownMenu, Popover) have CSS open/close animations.

ComeOnOliver/skillshub

Build Next.js 16 applications with correct patterns and distinctive design. Use when creating pages, layouts, dynamic routes, upgrading from Next.js 15, or implementing proxy.ts. Covers breaking changes (async params/searchParams, Turbopack, cacheComponents) and frontend aesthetics. NOT when building non-React or backend-only applications.

ComeOnOliver/skillshub

Comprehensive Framer Motion animation library for React. Covers motion components, variants, gestures, page transitions, and scroll animations. Use when adding animations to React/Next.js applications.

ComeOnOliver/skillshub

Build interfaces that resonate, not just render. This skill enforces bold, intentional

関連スキル