Communitygithub.com

Aseel1600/Edit01

fish.audio (S1 / S2 世代モデル) を使用して表現力豊かな多言語ナレーションを生成し、reference_id を介してクローンした声を再利用します。ユーザーが fish.audio/Fish Audio TTS を好む場合、特定のプレイグラウンド音声モデルを希望する場合、または高い感情表現を伴う音声クローンナレーションが必要な場合に使用します。

Edit01 とは?

このスキルは、fish.audio の Text-to-Speech (TTS) API を活用して、高品質で表現力豊かな多言語ナレーションを生成するためのツールです。ユーザーは fish.audio プレイグラウンドで作成したクローンボイスを `reference_id` として指定して再利用でき、特定の音声モデル(`s1`, `s2-pro`, `s2.1-pro` など)を選択して、感情タグ(`[laugh]`, `[whispers]` など)を用いた自然な抑揚のある読み上げを実現します。コード補完エージェント(Claude Code, Cursor, Codex など)向けに設計されており、環境変数 `FISH_AUDIO_API_KEY` を設定するだけで利用可能です。このツールは OpenMontage フレームワークと統合されており、TTSSelector または FishAudioTTS プロバイダを直接呼び出して、音声ファイルを生成し、指定された出力パスに保存します。また、レイテンシや音質の調整、コスト見積もり機能も備えており、プロトタイピングから本番利用までを効率的にサポートします。

対応~Claude Code~Codex CLI~Cursor
npx skills add https://github.com/Aseel1600/Edit01/tree/HEAD/.agents/skills/fish-audio-tts

お気に入りのAIに質問する

このエージェントスキルを事前に読み込んだ状態で新しいチャットを開きます。

ドキュメント

fish.audio TTS

.env に FISH_AUDIO_API_KEY が必要です(https://fish.audio/go-api/api-keys/ で作成)。 fish.audio プレイグラウンドで音声モデルを作成し、その ID を reference_id として渡すと、クローンした声を再利用できます。

現在の API

生のオーディオバイトを返す単一の同期的呼び出し:

POST https://api.fish.audio/v1/tts
Authorization: Bearer ${FISH_AUDIO_API_KEY}
Content-Type: application/json
model: <バックエンドモデル>     # HTTP ヘッダーでバックエンドを選択 (例: s1)

バックエンドモデルは、ボディフィールドではなく model HTTP ヘッダーで選択されます。OpenMontage では、これはツールの model 入力にマッピングされます。

バックエンドモデル

model は必須です — デフォルトはありません。以下のいずれかを指定します:

  • s2.1-pro — 最新世代。最高品質: インライン感情タグ、80以上の言語、マルチスピーカーに対応。本番ナレーション向け。
  • s2.1-pro-free — プロモーション向け s2.1-pro の無料アクセス。プロモーション期間中のみ、下書き、サンプル、検証実行が $0。詳細は fish.audio のお知らせ: 2026年8月31日まで無料、フェアユースの対象、SLA/レイテンシ保証なし、リクエストが保持される可能性あり、商用利用は制限されます。本番やクライアントのナレーションには絶対に使用しないでください。
  • s2-pro — 最初の S2 世代。安定した高品質で感情タグをサポート。
  • s1 — 以前のフラッグシップ。既存の統合との互換性のために維持。

課金は入力テキストの UTF-8 バイト単位(文字数ではありません)。CJK テキストと絵文字は、同じ表示長の ASCII 文字の 3〜4 倍のコストがかかります。現在のリスト価格: s1 / s2-pro / s2.1-pro = 100万バイトあたり $15、s2.1-pro-free = プロモーション期間中のみ $0(ツールの estimate_cost() は 2026年8月31日以降、有料の s2.1-pro レートに切り替わります)。大規模バッチの前に、https://docs.fish.audio/developer-guide/models-pricing/pricing-and-rate-limits で現在の料金を確認してください。

インライン感情タグ(S2 モデルのみ)

s2-pro / s2.1-pro / s2.1-pro-free は、テキストに埋め込まれたインライン感情タグを解釈します:

  • [laugh]、[whispers] などのタグで、文の途中で表現が変わります。
  • 例: "That's hilarious [laugh] but let me explain seriously."
  • s1 は感情タグを解釈しません — タグがそのまま読み上げられる可能性があるため、s1 をターゲットにする場合はタグを削除してください。

音声選択(reference_id)

  • fish.audio プレイグラウンドで音声を作成または選択し、そのモデル ID をコピーします。
  • それを reference_id として渡します。セレクターの一般的な voice_id は、reference_id がない場合のエイリアスとして受け入れられます。
  • reference_id がない場合、fish.audio は選択されたモデルのデフォルト音声を使用します。

インラインでのその場でのクローニング(リクエストごとに参照音声とテキストをアップロード)は、このツールではサポートされていません — 最初にプレイグラウンドで音声モデルを作成してください。

OpenMontage での使用法

TTS セレクターを使用して生成:

from tools.audio.tts_selector import TTSSelector

result = TTSSelector().execute({
    "preferred_provider": "fish_audio",
    "text": "Here's why compound interest quietly beats every get-rich-quick scheme.",
    "model": "s1",
    "reference_id": "<playground voice model id>",
    "output_path": "projects/my-video/assets/audio/narration.mp3",
})

またはプロバイダを直接呼び出し:

from tools.audio.fish_audio_tts import FishAudioTTS

result = FishAudioTTS().execute({
    "text": "Short sample line for approval.",
    "model": "s1",
    "reference_id": "<playground voice model id>",
    "output_path": "projects/my-video/assets/audio/fish_sample.mp3",
})

プロバイダは output_path に音声を書き込み、data.output と解決された model および reference_id を返します。

品質とレイテンシの調整

  • latency: normal(デフォルト、最高品質)、balanced(少し高速)、low(最速、品質が若干低下)。
  • normalize: デフォルト true。数値、日付、通貨が自然に読まれるように、オンにしたままにします。
  • prosody: オプションの { "speed": 1.0, "volume": 0 } でペース/音量を調整。
  • mp3_bitrate: 128 が適切なデフォルト。音楽が混在するミックスには 192 に上げます。
  • temperature: デフォルト 0.7。より表現豊かな読み上げには 0.9 に近づけることを推奨(感情タグに依存する場合に推奨)。下げるとより安定した予測可能な配信になります。
  • top_p / repetition_penalty: 通常はデフォルト(0.7 / 1.2)のままにします。

推奨ワークフロー

  1. 本番ナレーションの前に、選択した model + reference_id で 10〜15 秒のサンプルを生成します。
  2. ユーザーに音声の自然さ、感情、ペースを承認してもらいます。
  3. 承認後にのみ完全なナレーションを生成します。
  4. コストが重要なバッチ/ローカリゼーションバリアントの場合は、s2.1-pro-free(プロモーション期間中 $0。非商用の下書きのみ)でプロトタイプを作成し、最終版を s2.1-pro にアップグレードします。

トラブルシューティング

  • 401 Unauthorized: FISH_AUDIO_API_KEY が間違っているか欠落しています。
  • 402 / 支払いエラー: アカウントのクレジットが不足しています。
  • 404 / 無効な音声: reference_id が間違っているか、このアカウントが所有していません。
  • 空/短い音声: text が空でないこと、normalize が入力をすべて削除していないことを確認します。

安全性

API キーをログ、メタデータ、パッチ、プロジェクト成果物に印刷したり書き込んだりしないでください。.env.example には空の変数名のみを含めてください。

Individual skills in this repo

This repo contains 20 individual skills — each has its own dedicated page.

Aseel1600/Edit01

Generate AI videos from text prompts using multiple provider gateways. Use when: (1) Generating videos from text descriptions, (2) Creating AI-generated video clips for content production, (3) Image-to-video generation with a reference image, (4) Choosing between video generation providers (VEO, Kling, Sora, Runway, Seedance, MiniMax, Gemini Omni). Supports gateways: HeyGen API, fal.ai API, Kling official direct API, and the Gemini API (Gemini Omni Flash).

Aseel1600/Edit01

Create AI avatar videos with precise control over avatars, voices, scripts, scenes, and backgrounds using HeyGen's v2 API. Use when: (1) Choosing a specific avatar and voice for a video, (2) Writing exact scripts for an avatar to speak, (3) Building multi-scene videos with different backgrounds per scene, (4) Creating transparent WebM videos for compositing, (5) Using talking photos as video presenters, (6) Integrating HeyGen avatars with Remotion, (7) Batch video generation with exact specs, (8) Brand-consistent production videos with precise control.

Aseel1600/Edit01

Use p5.js/canvas for local procedural character effects: particles, weather, squash/stretch, walk cycles, and environmental motion.

Aseel1600/Edit01

Review local character animation with schema checks, Playwright browser previews, frame sampling, and FFmpeg/ffprobe final output checks.

Aseel1600/Edit01

Create videos from a text prompt using HeyGen's Video Agent. Use when: (1) Creating a video from a description or idea, (2) Generating explainer, demo, or marketing videos from a prompt, (3) Making a video without specifying exact avatars, voices, or scenes, (4) Quick video prototyping or drafts, (5) One-shot prompt-to-video generation, (6) User says "make me a video" or "create a video about X".

Aseel1600/Edit01

Generate Mandarin and multilingual narration with Volcengine Doubao Speech 2.0. Use when creating Chinese voiceovers, when the user prefers Doubao/Volcengine/火山引擎/豆包 TTS, or when narration needs character-level timestamp metadata for subtitles.

Aseel1600/Edit01

Video and audio processing with FFmpeg. Use for format conversion, resizing, compression, audio extraction, and preparing assets for Remotion. Triggers include converting GIF to MP4, resizing video, extracting audio, compressing files, or any media transformation task.

Aseel1600/Edit01

Use when implementing Disney's 12 animation principles with Framer Motion in React applications

Aseel1600/Edit01

All animation knowledge for HyperFrames — atomic motion rules, multi-phase scene blueprints, scene transitions, broader motion-design techniques, AND the seven runtime adapters (GSAP default, plus Lottie, Three.js, Anime.js, CSS keyframes, Web Animations API, TypeGPU). Use for any motion or animation task: pick 2-4 rules and compose, or load a blueprint, or look up runtime-specific API (e.g. GSAP eases / Lottie player / Three.js mixer). HyperFrames-native: single paused timeline, seek-safe, deterministic.

Aseel1600/Edit01

HyperFrames CLI dev loop. Use when running npx hyperframes init, add, catalog, capture, lint, validate, inspect, layout, snapshot, preview, play, render, publish, lambda, doctor, browser, info, upgrade, skills, compositions, docs, benchmark, telemetry, transcribe, tts, or remove-background, or when troubleshooting the HyperFrames build/render environment. Entry point for AWS Lambda cloud rendering (`hyperframes lambda deploy / render / progress / destroy / policies`).

Aseel1600/Edit01

The HyperFrames composition contract — build one renderable project. Use for composition structure, the `data-*` timing attributes, `class="clip"`, tracks, sub-compositions, variables, framework-owned media playback, deterministic-render rules, and validation. Read before writing composition HTML.

Aseel1600/Edit01

Non-animation creative direction for HyperFrames videos. Use for design spec (frame.md / design.md) handling, palettes, typography, narration, beat planning, audio-reactive visuals, composition patterns, and brand / style decisions. For atomic motion patterns and scene blueprints, use `hyperframes-animation`.

Aseel1600/Edit01

Audio and media assets for HyperFrames compositions, produced by one shared audio engine (`scripts/audio.mjs`) — multi-provider TTS (HeyGen / ElevenLabs / Kokoro local), background music + sound effects (HeyGen audio-library retrieval by default, with local Lyria / MusicGen BGM generation and a bundled SFX library as the no-credential fallback), Whisper transcription, background removal, and caption authoring. Use for voiceover / TTS, BGM, SFX / sound effects, transcription, captions / subtitles / lyrics / karaoke / per-word styling, voice + provider selection, and music-mood prompting.

Aseel1600/Edit01

Install and wire registry blocks and components into HyperFrames compositions. Use when running hyperframes add, installing a block or component, wiring an installed item into index.html, or working with hyperframes.json. Covers the add command, install locations, block sub-composition wiring, component snippet merging, registry discovery, and authoring a new block or component to contribute upstream (idea → scaffold → validate → PR).

Aseel1600/Edit01

Use when the user wants a short, design-led motion graphic where motion is the message: kinetic typography, stat or number count-up, chart/data-viz hit, logo sting, brand lockup, lower-third, callout, social overlay, animated headline/tweet/news item, motion poster, or quick captured-page highlight. Usually under 10s and up to ~30s, with no narration arc, voice-over, or live-action subject. Can render to MP4 or transparent overlay. Not for longer, multi-scene, narrated, or brand-reel pieces (use general-video), narrated website videos (website-to-video), topic explainers (faceless-explainer), product promos (product-launch-video), PR videos (pr-to-video), or captions on existing footage (embedded-captions). When unsure whether it's a quick motion-first piece or a longer / narrated treatment, see /hyperframes.

Aseel1600/Edit01

Use when the user has a music track (an audio file, or a video to pull audio from) and wants a beat-synced HyperFrames video, calm to hard-hitting. The music drives everything: one analyzer reads it once, the orchestrator lays out the frames and fills a per-frame plan, and one sub-agent builds each frame. Typography and templates are the floor — a complete video needs zero assets — but any images or videos the user supplies are cut into the frames on the same beat grid (beat-cut / ken-burns). The genre (lyric video, slideshow, kinetic promo) falls out of the per-frame choices; the pipeline never branches on it.

Aseel1600/Edit01

Best practices for Remotion - Video creation in React

Aseel1600/Edit01

Toolkit-specific Remotion patterns — custom transitions, shared components, and project conventions. For core Remotion framework knowledge (hooks, animations, rendering, etc.), see the `remotion-official` skill.

Aseel1600/Edit01

Port an existing Remotion (React) composition to HyperFrames HTML. Use ONLY when the user explicitly asks to port/convert/migrate/translate a Remotion source. Do NOT use: (a) authoring a new HyperFrames composition; (b) Remotion mentioned in passing; (c) Remotion code shared as reference only; (d) "same video as my Remotion one" without explicit migrate request — treat as fresh build. Doubt → `/general-video`. One-way, Remotion-only: no reverse export (HyperFrames→Remotion or any framework), no non-Remotion source (After Effects, Framer Motion, plain React/CSS) → out of scope, re-create via `/general-video`. Flags unsupported patterns (useState, useEffect, async calculateMetadata, third-party React libs, `@remotion/lambda`) and recommends runtime interop over lossy translation. Unsure whether to port vs. build fresh, or only a passing Remotion mention? → /hyperframes.

Aseel1600/Edit01

Animate SVG character rigs with GSAP, CSS transforms, Remotion frame control, and HyperFrames-compatible browser previews.

関連スキル