Claude Codeでフレーム抽出と音声コンテキストを用いた動画分析
Claude Codeに動画認識レイヤーを追加し、フレーム抽出、音声テキスト化、ローカル動画やYouTube URLに関する質問応答を可能にします。
前提条件
Claude Code、Node.js 20+、ffmpeg、オプションでyt-dlp、Gemini APIまたはWhisper/OpenAI音声バックエンド
インストール
環境に合わせて上流のインストール方法またはセットアップパスを使用してください:
上流からの要件と注意点:
- | ローカル(Whisper) | whisper.cppまたはPython openai-whisper | 無料、完全オフライン | brew install whisper-cpp + 自動モデルダウンロード |
- │ MCPサーバー(Node.js) │
- Node.js 20+(MCPサーバー用)
基本的な使用法または入門メモ:
-
1. プラグインをインストール
-
Claude Code内で、以下のコマンドを一つずつ実行します:
-
/plugin marketplace add https://github.com/jordanrendric/claude-video-vision
-
上流ドキュメントから抽出:https://raw.githubusercontent.com/jordanrendric/claude-video-vision/HEAD/README.md