Communitygithub.com

Aseel1600/Edit01

豆包语音合成2.0で中国語および多言語ナレーションを生成します。中国語の音声吹き替えや、ユーザーが豆包/火山引擎/抖音TTSを好む場合、または字幕用に文字レベルのタイムスタンプメタデータが必要な場合に使用します。

Edit01 とは?

このスキルは、Volcengine(火山引擎)が提供するDoubao Speech 2.0(豆包语音合成2.0)を利用して、高品質な中国語および多言語ナレーションを生成するためのものです。主に中国語の音声コンテンツ制作(解説動画、eラーニング、ポッドキャストなど)を支援し、特に字幕用の文字単位のタイムスタンプメタデータを提供できる点が特徴です。このスキルはClaude CodeやOpenMontageなどのAIエージェントプラットフォームで使用することを想定しており、環境変数`DOUBAO_SPEECH_API_KEY`と`DOUBAO_SPEECH_VOICE_TYPE`を設定することで動作します。APIは同期・非同期の両方をサポートし、非同期エンドポイントでは`audio_url`と`sentences[].words[]`形式のタイミングメタデータを取得できるため、正確な字幕生成が可能です。ユーザーはテキスト、音声ID(voice_id)、出力パスなどを指定して呼び出し、またスピーチレートやサンプルレートなどのパラメータを調整できます。推奨されるワークフローとして、フルナレーションの前に短いサンプルを生成してユーザーに確認を取ること、字幕は推定文字数ではなくAPIから返されるタイムスタンプを基に作成すること、中国語の意味的なまとまりを考慮して分割することなどが挙げられます。APIキーがログやメタデータに漏洩しないよう、安全対策も徹底されています。

対応~Claude Code~Codex CLI~Cursor
npx skills add https://github.com/Aseel1600/Edit01/tree/HEAD/.agents/skills/doubao-tts

お気に入りのAIに質問する

このエージェントスキルを事前に読み込んだ状態で新しいチャットを開きます。

ドキュメント

Doubao TTS(豆包语音合成)

.envファイルにDOUBAO_SPEECH_API_KEYが必要です。 デフォルトの音声を設定するにはDOUBAO_SPEECH_VOICE_TYPEを設定するか、ツール呼び出し時にvoice_idを渡します。

現在のAPI

新しいコンソールのAPIキーフローを使用します:

X-Api-Key: ${DOUBAO_SPEECH_API_KEY}
X-Api-Resource-Id: seed-tts-2.0

新しいコンソールのAPIキーではX-Api-App-IdやX-Api-Access-Keyは使用しないでください。APIがload grant: requested grant not foundを返す場合、キータイプまたは認証ヘッダーが間違っている可能性があります。

長尺の動画ナレーションには、非同期エンドポイントの使用を推奨します:

POST https://openspeech.bytedance.com/api/v3/tts/submit
POST https://openspeech.bytedance.com/api/v3/tts/query

このエンドポイントはaudio_urlと、字幕作成に利用できるsentences[].words[]のタイミングメタデータを返します。

OpenMontageでの使用

TTSセレクタを使用して生成します:

from tools.audio.tts_selector import TTSSelector

result = TTSSelector().execute({
    "preferred_provider": "doubao",
    "text": "如果 AI 真的会改变未来,普通人到底该怎么参与?",
    "voice_id": "zh_female_vv_uranus_bigtts",
    "output_path": "projects/my-video/assets/audio/narration.mp3",
    "speech_rate": 0,
    "enable_timestamp": True,
})

または、プロバイダを直接呼び出します:

from tools.audio.doubao_tts import DoubaoTTS

result = DoubaoTTS().execute({
    "text": "短いサンプル試聴テキスト。",
    "voice_id": "zh_female_vv_uranus_bigtts",
    "output_path": "projects/my-video/assets/audio/doubao_sample.mp3",
})

プロバイダは以下を出力します:

  • output_path: ダウンロードされた音声ファイル
  • metadata_path: 完全なクエリ応答JSON。デフォルトは<output_path>.json

推奨ワークフロー

  1. フルナレーションの前に10〜15秒のサンプルを生成します。
  2. 音声の自然さ、アクセント、速度についてユーザーに承認を求めます。
  3. 承認後にのみフルナレーションを生成します。
  4. クエリJSONは保持してください。これが字幕タイミングの信頼できる情報源です。
  5. 推定文字数ではなく、sentences[].words[]からキャプションを構築します。
  6. タイムスタンプを適用する前に、中国語の意味的なフレーズ単位でキャプションをグループ化します。固定文字数でのみ分割しないでください。「在不押单个公司的情况下」や「可能会被慢慢稀释」のようなフレーズが壊れ、理解を損なう可能性があります。
  7. ユーザーが明示的に以前の実行時間に合わせるよう要求しない限り、動画の長さは承認された音声リズムに従わせます。

パラメータ

  • voice_id: Doubaoのspeaker / 音声タイプ。デフォルトはDOUBAO_SPEECH_VOICE_TYPEです。
  • resource_id: Doubao Speech 2.0の音声にはseed-tts-2.0を使用します。
  • speech_rate: 0が通常速度、100で2倍速、-50で0.5倍速です。
  • sample_rate: デフォルトは24000です。
  • enable_timestamp: デフォルトはtrueです。
  • return_usage: デフォルトはtrueで、利用可能な場合に使用量メタデータを要求します。

デフォルトではadditions.explicit_languageを渡さないでください。一部のエンドポイント/キーの組み合わせでは、zh-cnがunsupported additions explicit language zh-cnで拒否されます。

落ち着いた中国語解説動画の場合は、speech_rate: 0から始めてください。結果が承認された形式に対して長すぎる場合は、フルナレーションを再生成する前に、speech_rate: 25または50で短い比較サンプルを作成してください。ユーザーがDoubaoの自然なペースを好む場合、以前のプロバイダの時間に合わせるためだけに速度を上げないでください。

トラブルシューティング

  • load grant: requested grant not found: キータイプが間違っているか、認証ヘッダーが間違っています。新しいコンソールのAPIキーにはX-Api-Keyを使用してください。
  • speaker permission denied: 音声IDが間違っているか、選択したリソースに対して許可されていません。
  • quota exceeded: クォータ、生涯文字数、または同時実行数を超過しました。
  • タイムスタンプなし: enable_timestamp: trueを確認し、クエリJSONを保持し、選択したエンドポイントがsentencesを返したことを確認してください。

安全性

APIキーをログ、メタデータ、パッチ、またはプロジェクト成果物に印刷または書き込まないでください。.env.exampleには空の変数名のみを含めてください。

Individual skills in this repo

This repo contains 20 individual skills — each has its own dedicated page.

Aseel1600/Edit01

Generate AI videos from text prompts using multiple provider gateways. Use when: (1) Generating videos from text descriptions, (2) Creating AI-generated video clips for content production, (3) Image-to-video generation with a reference image, (4) Choosing between video generation providers (VEO, Kling, Sora, Runway, Seedance, MiniMax, Gemini Omni). Supports gateways: HeyGen API, fal.ai API, Kling official direct API, and the Gemini API (Gemini Omni Flash).

Aseel1600/Edit01

Create AI avatar videos with precise control over avatars, voices, scripts, scenes, and backgrounds using HeyGen's v2 API. Use when: (1) Choosing a specific avatar and voice for a video, (2) Writing exact scripts for an avatar to speak, (3) Building multi-scene videos with different backgrounds per scene, (4) Creating transparent WebM videos for compositing, (5) Using talking photos as video presenters, (6) Integrating HeyGen avatars with Remotion, (7) Batch video generation with exact specs, (8) Brand-consistent production videos with precise control.

Aseel1600/Edit01

Use p5.js/canvas for local procedural character effects: particles, weather, squash/stretch, walk cycles, and environmental motion.

Aseel1600/Edit01

Review local character animation with schema checks, Playwright browser previews, frame sampling, and FFmpeg/ffprobe final output checks.

Aseel1600/Edit01

Create videos from a text prompt using HeyGen's Video Agent. Use when: (1) Creating a video from a description or idea, (2) Generating explainer, demo, or marketing videos from a prompt, (3) Making a video without specifying exact avatars, voices, or scenes, (4) Quick video prototyping or drafts, (5) One-shot prompt-to-video generation, (6) User says "make me a video" or "create a video about X".

Aseel1600/Edit01

Video and audio processing with FFmpeg. Use for format conversion, resizing, compression, audio extraction, and preparing assets for Remotion. Triggers include converting GIF to MP4, resizing video, extracting audio, compressing files, or any media transformation task.

Aseel1600/Edit01

Generate expressive, multilingual narration with fish.audio (S1 / S2-generation models) and reuse cloned voices via reference_id. Use when the user prefers fish.audio/Fish Audio TTS, wants a specific playground voice model, or needs high-emotion voice-clone narration.

Aseel1600/Edit01

Use when implementing Disney's 12 animation principles with Framer Motion in React applications

Aseel1600/Edit01

All animation knowledge for HyperFrames — atomic motion rules, multi-phase scene blueprints, scene transitions, broader motion-design techniques, AND the seven runtime adapters (GSAP default, plus Lottie, Three.js, Anime.js, CSS keyframes, Web Animations API, TypeGPU). Use for any motion or animation task: pick 2-4 rules and compose, or load a blueprint, or look up runtime-specific API (e.g. GSAP eases / Lottie player / Three.js mixer). HyperFrames-native: single paused timeline, seek-safe, deterministic.

Aseel1600/Edit01

HyperFrames CLI dev loop. Use when running npx hyperframes init, add, catalog, capture, lint, validate, inspect, layout, snapshot, preview, play, render, publish, lambda, doctor, browser, info, upgrade, skills, compositions, docs, benchmark, telemetry, transcribe, tts, or remove-background, or when troubleshooting the HyperFrames build/render environment. Entry point for AWS Lambda cloud rendering (`hyperframes lambda deploy / render / progress / destroy / policies`).

Aseel1600/Edit01

The HyperFrames composition contract — build one renderable project. Use for composition structure, the `data-*` timing attributes, `class="clip"`, tracks, sub-compositions, variables, framework-owned media playback, deterministic-render rules, and validation. Read before writing composition HTML.

Aseel1600/Edit01

Non-animation creative direction for HyperFrames videos. Use for design spec (frame.md / design.md) handling, palettes, typography, narration, beat planning, audio-reactive visuals, composition patterns, and brand / style decisions. For atomic motion patterns and scene blueprints, use `hyperframes-animation`.

Aseel1600/Edit01

Audio and media assets for HyperFrames compositions, produced by one shared audio engine (`scripts/audio.mjs`) — multi-provider TTS (HeyGen / ElevenLabs / Kokoro local), background music + sound effects (HeyGen audio-library retrieval by default, with local Lyria / MusicGen BGM generation and a bundled SFX library as the no-credential fallback), Whisper transcription, background removal, and caption authoring. Use for voiceover / TTS, BGM, SFX / sound effects, transcription, captions / subtitles / lyrics / karaoke / per-word styling, voice + provider selection, and music-mood prompting.

Aseel1600/Edit01

Install and wire registry blocks and components into HyperFrames compositions. Use when running hyperframes add, installing a block or component, wiring an installed item into index.html, or working with hyperframes.json. Covers the add command, install locations, block sub-composition wiring, component snippet merging, registry discovery, and authoring a new block or component to contribute upstream (idea → scaffold → validate → PR).

Aseel1600/Edit01

Use when the user wants a short, design-led motion graphic where motion is the message: kinetic typography, stat or number count-up, chart/data-viz hit, logo sting, brand lockup, lower-third, callout, social overlay, animated headline/tweet/news item, motion poster, or quick captured-page highlight. Usually under 10s and up to ~30s, with no narration arc, voice-over, or live-action subject. Can render to MP4 or transparent overlay. Not for longer, multi-scene, narrated, or brand-reel pieces (use general-video), narrated website videos (website-to-video), topic explainers (faceless-explainer), product promos (product-launch-video), PR videos (pr-to-video), or captions on existing footage (embedded-captions). When unsure whether it's a quick motion-first piece or a longer / narrated treatment, see /hyperframes.

Aseel1600/Edit01

Use when the user has a music track (an audio file, or a video to pull audio from) and wants a beat-synced HyperFrames video, calm to hard-hitting. The music drives everything: one analyzer reads it once, the orchestrator lays out the frames and fills a per-frame plan, and one sub-agent builds each frame. Typography and templates are the floor — a complete video needs zero assets — but any images or videos the user supplies are cut into the frames on the same beat grid (beat-cut / ken-burns). The genre (lyric video, slideshow, kinetic promo) falls out of the per-frame choices; the pipeline never branches on it.

Aseel1600/Edit01

Best practices for Remotion - Video creation in React

Aseel1600/Edit01

Toolkit-specific Remotion patterns — custom transitions, shared components, and project conventions. For core Remotion framework knowledge (hooks, animations, rendering, etc.), see the `remotion-official` skill.

Aseel1600/Edit01

Port an existing Remotion (React) composition to HyperFrames HTML. Use ONLY when the user explicitly asks to port/convert/migrate/translate a Remotion source. Do NOT use: (a) authoring a new HyperFrames composition; (b) Remotion mentioned in passing; (c) Remotion code shared as reference only; (d) "same video as my Remotion one" without explicit migrate request — treat as fresh build. Doubt → `/general-video`. One-way, Remotion-only: no reverse export (HyperFrames→Remotion or any framework), no non-Remotion source (After Effects, Framer Motion, plain React/CSS) → out of scope, re-create via `/general-video`. Flags unsupported patterns (useState, useEffect, async calculateMetadata, third-party React libs, `@remotion/lambda`) and recommends runtime interop over lossy translation. Unsure whether to port vs. build fresh, or only a passing Remotion mention? → /hyperframes.

Aseel1600/Edit01

Animate SVG character rigs with GSAP, CSS transforms, Remotion frame control, and HyperFrames-compatible browser previews.

関連スキル