Communitygithub.com

modbender/skill-library-mcp

AI 아바타 및 토킹 헤드 비디오를 OmniHuman, Fabric, PixVerse 등을 통해 inference.sh CLI로 생성합니다.

skill-library-mcp란 무엇인가요?

이 스킬은 AI 아바타 및 토킹 헤드 비디오 생성을 위한 강력한 도구로, OmniHuman 1.5, OmniHuman 1.0, Fabric 1.0, PixVerse Lipsync 등 최신 모델을 inference.sh CLI를 통해 제공합니다. 사용자는 이미지와 오디오 파일을 입력하여 오디오에 맞춰 입술이 움직이는 아바타 비디오를 생성하거나, 기존 비디오의 오디오를 다른 언어로 더빙할 수 있습니다. TTS(Text-to-Speech)와 STT(Speech-to-Text) 워크플로우와 결합하여 마케팅, 교육, 로컬라이제이션, 소셜 미디어, 기업 교육 등 다양한 분야에서 활용 가능합니다. OpenAI SDK와 REST API 호환성을 지원하며, 복잡한 설정 없이 CLI 명령어 하나로 실행할 수 있어 개발자와 콘텐츠 제작자 모두에게 유용합니다.

지원 대상~Claude Code~Codex CLI~Cursor
npx skills add https://github.com/modbender/skill-library-mcp/tree/HEAD/data/ai-avatar-video

즐겨 사용하는 AI에게 물어보기

이 에이전트 스킬이 미리 로드된 새 채팅을 엽니다.

미리보기

스킬 README에서

AI 아바타 및 토킹 헤드 비디오

문서

AI 아바타 및 토킹 헤드 비디오

inference.sh CLI를 통해 AI 아바타 및 토킹 헤드 비디오를 생성하세요.

AI 아바타 및 토킹 헤드 비디오

빠른 시작

curl -fsSL https://cli.inference.sh | sh && infsh login

# 이미지 + 오디오에서 아바타 비디오 생성
infsh app run bytedance/omnihuman-1-5 --input '{
  "image_url": "https://portrait.jpg",
  "audio_url": "https://speech.mp3"
}'

설치 참고: 설치 스크립트는 사용자의 OS/아키텍처를 감지하고, dist.inference.sh에서 일치하는 바이너리를 다운로드한 후 SHA-256 체크섬을 검증합니다. 상승된 권한이나 백그라운드 프로세스가 필요하지 않습니다. 수동 설치 및 검증도 가능합니다.

사용 가능한 모델

모델앱 ID최적 용도
OmniHuman 1.5bytedance/omnihuman-1-5다중 캐릭터, 최고 품질
OmniHuman 1.0bytedance/omnihuman-1-0단일 캐릭터
Fabric 1.0falai/fabric-1-0이미지 말하기 + 립싱크
PixVerse Lipsyncfalai/pixverse-lipsync매우 사실적인 립싱크

아바타 앱 검색

infsh app list --search "omnihuman"
infsh app list --search "lipsync"
infsh app list --search "fabric"

예제

OmniHuman 1.5 (다중 캐릭터)

infsh app run bytedance/omnihuman-1-5 --input '{
  "image_url": "https://portrait.jpg",
  "audio_url": "https://speech.mp3"
}'

여러 사람이 있는 이미지에서 어떤 캐릭터를 구동할지 지정할 수 있습니다.

Fabric 1.0 (이미지 말하기)

infsh app run falai/fabric-1-0 --input '{
  "image_url": "https://face.jpg",
  "audio_url": "https://audio.mp3"
}'

PixVerse Lipsync

infsh app run falai/pixverse-lipsync --input '{
  "image_url": "https://portrait.jpg",
  "audio_url": "https://speech.mp3"
}'

모든 오디오에서 매우 사실적인 립싱크를 생성합니다.

전체 워크플로우: TTS + 아바타

# 1. 텍스트에서 음성 생성
infsh app run infsh/kokoro-tts --input '{
  "text": "저희 제품 데모에 오신 것을 환영합니다. 오늘은 여러분께..."
}' > speech.json

# 2. 생성된 음성으로 아바타 비디오 만들기
infsh app run bytedance/omnihuman-1-5 --input '{
  "image_url": "https://presenter-photo.jpg",
  "audio_url": "<1단계에서-생성된-오디오-URL>"
}'

전체 워크플로우: 다른 언어로 비디오 더빙

# 1. 원본 비디오 텍스트 변환
infsh app run infsh/fast-whisper-large-v3 --input '{"audio_url": "https://video.mp4"}' > transcript.json

# 2. 텍스트 번역 (수동 또는 LLM 사용)

# 3. 새 언어로 음성 생성
infsh app run infsh/kokoro-tts --input '{"text": "<번역된-텍스트>"}' > new_speech.json

# 4. 원본 비디오를 새 오디오에 립싱크
infsh app run infsh/latentsync-1-6 --input '{
  "video_url": "https://original-video.mp4",
  "audio_url": "<새-오디오-URL>"
}'

사용 사례

  • 마케팅: AI 발표자가 있는 제품 데모
  • 교육: 강의 비디오, 설명 영상
  • 로컬라이제이션: 여러 언어로 콘텐츠 더빙
  • 소셜 미디어: 일관된 가상 인플루언서
  • 기업: 교육 비디오, 공지 사항

팁

  • 고품질의 정면 초상화 사진 사용 (좋은 조명)
  • 오디오는 배경 잡음이 최소화된 깨끗한 상태여야 함
  • OmniHuman 1.5는 한 이미지에서 여러 사람을 지원함
  • LatentSync는 기존 비디오를 새 오디오에 동기화하는 데 가장 적합함

관련 스킬

# 전체 플랫폼 스킬 (150개 이상의 앱)
npx skills add inference-sh/skills@inference-sh

# 텍스트-음성 변환 (아바타용 오디오 생성)
npx skills add inference-sh/skills@text-to-speech

# 음성-텍스트 변환 (더빙용 텍스트 변환)
npx skills add inference-sh/skills@speech-to-text

# 비디오 생성
npx skills add inference-sh/skills@ai-video-generation

# 이미지 생성 (아바타 이미지 만들기)
npx skills add inference-sh/skills@ai-image-generation

모든 비디오 앱 보기: infsh app list --category video

문서

Individual skills in this repo

This repo contains 20 individual skills — each has its own dedicated page.

modbender/skill-library-mcp

Paid acquisition strategy, budget allocation, and avoiding common advertising mistakes across platforms

modbender/skill-library-mcp

Complete investment portfolio risk management system. Analyze positions, calculate risk metrics, stress test scenarios, optimize allocations, and generate institutional-grade risk reports — all wit...

modbender/skill-library-mcp

Borrow from Aave via credit delegation. Agent self-funds by borrowing against delegator collateral. Supports borrow, repay, health checks. Works on Aave V2/V3.

modbender/skill-library-mcp

Discover and register autonomous AI agents. Use when: browsing the agent registry, submitting an agent for verification, or embedding agent badges. NOT for: general web search or agent capability analysis.

modbender/skill-library-mcp

AI代码编辑器规则模板集合 - 为Cursor、Windsurf、Claude Code、Cline等AI编辑器提供项目规则配置。适用于需要配置AI编码助手规则的开发者,包含全栈Web、移动端、Vue3+SpringBoot等技术栈模板。

modbender/skill-library-mcp

Generate landing page code from product descriptions

modbender/skill-library-mcp

Create AI marketing videos for ads, promos, product launches, and brand content. Models: Veo, Seedance, Wan, FLUX for visuals, Kokoro for voiceover. Types: product demos, testimonials, explainers, social ads, brand videos. Use for: Facebook ads, YouTube ads, product launches, brand awareness. Triggers: marketing video, ad video, promo video, commercial, brand video, product video, explainer video, ad creative, video ad, facebook ad video, youtube ad, instagram ad, tiktok ad, promotional video, launch video

modbender/skill-library-mcp

Generate AI music videos end-to-end. Creates music with Suno (sunoapi.org), generates visuals with OpenAI/Seedream/Google/Seedance, and assembles into music video with ffmpeg. Supports timestamped lyrics (auto SRT), Suno native music video generation, slideshow/video/hybrid modes. Token-based cost tracking per generation.

modbender/skill-library-mcp

Generate AI-powered notes from videos (document, outline, or graphic-text formats)

modbender/skill-library-mcp

The video AI notes tool is provided by Baidu. Based on the video download address provided by the user, it downloads and parses the video, and finally generates AI notes corresponding to the video (a total of three types of notes can be generated: document notes, outline notes, and image-text notes).

modbender/skill-library-mcp

Automated appointment management for beauty salons, clinics, studios, and photo booths. Handles booking requests, calendar sync, conflict detection, reminders, no-show tracking, and waitlist management.

modbender/skill-library-mcp

Bird identification, life list tracking, and trading card generation. Use this skill when the user: sends a bird photo to identify, says "set up my Birdfolio" or "set my region", asks "how's my checklist", asks "Birdfolio progress", asks "how many birds have I found", asks "show my Birdfolio" or "show my life list", asks "what's my rarest bird", or asks "tell me about [bird species]". Handles everything from first-time setup through ongoing life list tracking and visual trading card generation.

modbender/skill-library-mcp

Multi-project task and research management (JSON-first CLI)

modbender/skill-library-mcp

Track stock and crypto portfolios with CLI - real-time prices, P&L, dividend tracking, multiple portfolios

modbender/skill-library-mcp

Track cryptocurrency portfolios with real-time prices, P&L calculations, and allocation analysis. Query Bitcoin, Ethereum, Solana and 10,000+ token holdings.

modbender/skill-library-mcp

加密貨幣Portfolio追蹤 - 支援TRON/ETH/BSC,分析持倉、收益、Gas費用

modbender/skill-library-mcp

Lead strategy with competitive analysis, strategic planning, growth roadmaps, and business portfolio management.

modbender/skill-library-mcp

Create ATS-optimized resumes and CVs with proper structure, metrics, and industry targeting.

modbender/skill-library-mcp

Use this skill when the user asks to build, create, design, develop, or improve ANY frontend interface, web page, UI component, or visual element. This includes: - Building landing pages, websites, web apps, dashboards, portfolios, or any web interface - Creating UI components (buttons, forms, cards, navbars, modals, etc.) - Designing pages with React, Vue, Next.js, Svelte, or any frontend framework - Adding styling or improving visual design of existing components - Implementing specific design aesthetics (modern, dark, minimalist, brutalist, etc.) - User mentions "frontend", "UI", "UX", "design", "interface", "web design", or "styling" - User asks for "beautiful", "modern", "professional", "clean", or any aesthetic adjective - User requests help with CSS, Tailwind, styled-components, or any styling approach This skill automatically retrieves the appropriate design system prompt (Neo-brutalism, Modern Dark, Bauhaus, Cyberpunk, Material, etc.) to help create visually distinctive, production-grade frontend...

modbender/skill-library-mcp

Native video analysis using Google Gemini API. Upload and analyze video files — describe scenes, extract text/UI, answer questions about content, transcribe speech, identify objects and actions. Use when: (1) User sends a video file and wants it analyzed, (2) Video summarization or description needed, (3) Extracting text, UI elements, or information from screen recordings, (4) Answering questions about video content, (5) Comparing multiple videos, (6) Analyzing tutorials, demos, or walkthroughs.

관련 스킬