AI動画生成スキル
テキスト記述からAIを使用して完全な動画を生成します。
機能
- 画像生成 - DALL-E 3、Stable Diffusion、Flux
- 動画生成 - LumaAI、Runway、Replicateモデル
- 音声ナレーション - OpenAI TTS、ElevenLabs
- 動画編集 - FFmpegアセンブリ、トランジション、オーバーレイ
クイックスタート
# 完全な動画を生成
python skills/ai-video-gen/generate_video.py --prompt "山の上の夕日" --output sunset.mp4
# 画像から動画へ
python skills/ai-video-gen/images_to_video.py --images img1.png img2.png --output result.mp4
# ナレーションを追加
python skills/ai-video-gen/add_voiceover.py --video input.mp4 --text "あなたのナレーション" --output final.mp4
セットアップ
必要なAPIキー
環境変数または.envファイルに追加:
# 画像生成(いずれか1つ)
OPENAI_API_KEY=sk-... # DALL-E 3
REPLICATE_API_TOKEN=r8_... # Stable Diffusion、Flux
# 動画生成(いずれか1つ)
LUMAAI_API_KEY=luma_... # LumaAI Dream Machine
RUNWAY_API_KEY=... # Runway ML
REPLICATE_API_TOKEN=r8_... # 複数モデル
# 音声(オプション)
OPENAI_API_KEY=sk-... # OpenAI TTS
ELEVENLABS_API_KEY=... # ElevenLabs
# または無料のローカルオプションを使用(API不要)
依存関係のインストール
pip install openai requests pillow replicate python-dotenv
FFmpeg
wingetで既にインストールされています。
使用例
1. テキストから動画(完全パイプライン)
python skills/ai-video-gen/generate_video.py \
--prompt "空飛ぶ車がある未来的な夜の都市" \
--duration 5 \
--voiceover "未来へようこそ" \
--output future_city.mp4
2. 複数シーン
python skills/ai-video-gen/multi_scene.py \
--scenes "朝日の昇る風景" "賑やかな街路" "静かな夜" \
--duration 3 \
--output day_in_life.mp4
3. 画像シーケンスから動画
python skills/ai-video-gen/images_to_video.py \
--images frame1.png frame2.png frame3.png \
--fps 24 \
--output animation.mp4
ワークフローオプション
予算モード(無料)
- 画像: Stable Diffusion(ローカルまたは無料API)
- 動画: オープンソースモデル
- 音声: OpenAI TTS(低コスト)または無料TTS
- 編集: FFmpeg
品質モード(有料)
- 画像: DALL-E 3またはMidjourney
- 動画: Runway Gen-3またはLumaAI
- 音声: ElevenLabs
- 編集: FFmpeg + エフェクト
スクリプトリファレンス
generate_video.py- メインのエンドツーエンド生成器images_to_video.py- 画像シーケンスを動画に変換add_voiceover.py- 既存動画にナレーションを追加multi_scene.py- 複数シーンの動画を作成edit_video.py- エフェクト、トランジション、オーバーレイを適用
API費用の見積もり
- DALL-E 3: 1画像あたり約$0.04~0.08
- Replicate: 生成1回あたり約$0.01~0.10
- LumaAI: 5秒あたり$0~0.50(無料枠あり)
- Runway: 1秒あたり約$0.05
- OpenAI TTS: 1K文字あたり約$0.015
- ElevenLabs: 1K文字あたり約$0.30(高品質)
例
サンプル出力とプロンプトについてはexamples/フォルダを参照してください。