produce-anime-explainer-video は何をしますか？
Fish Audio、Whisperタイムスタンプ、多様なモーション、QAを用いて、ワードアライメントされたアニメ手描き解説動画を制作するためのCodexスキル。
概要
このスキルを使用すると、テキストスクリプトから自動的に単語単位で音声と同期したアニメーション解説動画を生成できます。Fish Audioによる音声合成、Whisperによるタイムスタンプ、そしてバラエティに富んだモーションを活用し、最終的な動画の品質をQAで保証します。
対応プラットフォーム
- Codex
前提条件
- Fish Audio APIキー
- Whisper（ローカルまたはAPI経由）
- 画像生成またはアニメーション用のツール（例: After Effects、Blender、またはカスタムパイプライン）
使用方法
- スクリプトを準備します。
- スキルを実行し、スクリプトを入力として渡します。
- スキルが自動的に以下の処理を実行します:
- Fish Audioで音声を生成
- Whisperで単語レベルのタイムスタンプを取得
- タイムスタンプに基づいてアニメーションモーションを生成
- QAパスで動画を検証
- 出力された動画ファイルを確認します。
設定
環境変数または設定ファイルで以下の項目を指定できます:
FISH_AUDIO_API_KEY: Fish AudioのAPIキーWHISPER_MODEL: Whisperモデルの指定（デフォルト:large-v3）MOTION_VARIETY: モーションのバラエティレベル（low,medium,high）QA_ENABLED: QA機能の有効化（true/false）
出力形式
- 動画ファイル: MP4（H.264コーデック）
- 音声ファイル: WAVまたはMP3
- タイムスタンプJSON: 単語ごとの開始時間と終了時間を含む
トラブルシューティング
- 音声が生成されない: Fish Audio APIキーが正しく設定されているか確認してください。
- タイムスタンプがずれる: Whisperのモデルを変更するか、音声品質を向上させてください。
- モーションが単調:
MOTION_VARIETYをhighに設定してみてください。