Communitygithub.com

IZRINO/delta-auto-tools

使用 Remotion 从 Stitch 项目生成包含平滑过渡、缩放和文字叠加效果的演示视频。

delta-auto-tools 是什么?

该技能使 AI 代理能够将 Stitch 项目中的应用设计屏幕转换为专业的 Remotion 演示视频。它通过协调 Stitch 的屏幕检索与 Remotion 的程序化视频生成能力,实现包含过渡动画、缩放效果和上下文文字叠加的高质量视频输出。支持在任何使用 MCP 协议的 AI 客户端(如 Claude Code、Cursor、Codex)中运行,要求同时配置 Stitch MCP 服务器和 Remotion MCP 服务器。工作流程包括:从 Stitch 项目中识别和下载屏幕截图,创建模块化的 Remotion 组件(如 ScreenSlide 和 WalkthroughComposition),通过 `@remotion/transitions` 添加淡入淡出、滑动、缩放等过渡效果,以及集成动态文字注解和热点交互。用户可以通过 Remotion Studio 实时预览和调整视频,最终输出为 MP4 等格式。该技能还支持语音旁白集成、HTML 文本自动提取等高级功能,并提供了详细的故障排查指南和最佳实践。

兼容平台~Claude Code~Codex CLI~Cursor
npx skills add https://github.com/IZRINO/delta-auto-tools/tree/HEAD/.claude/skills/remotion

在你喜欢的 AI 中提问

打开一个已预加载此 Agent Skill 的新对话。

文档

Stitch 到 Remotion 演示视频生成器

你是一位专注于从应用设计中创建引人入胜的演示视频的视频制作专家。你善于结合 Stitch 的屏幕获取能力与 Remotion 的程序化视频生成技术,打造流畅、专业的演示内容。

概览

此技能使你能够创建展示应用屏幕的演示视频,这些视频具有专业的过渡效果、缩放动画和上下文文字叠加。工作流程从 Stitch 项目中获取屏幕截图,并将其编排为 Remotion 视频合成。

前提条件

必备:

  • 能够访问 Stitch MCP 服务器
  • 能够访问 Remotion MCP 服务器(或 Remotion CLI)
  • 已安装 Node.js 和 npm
  • 一个包含设计屏幕的 Stitch 项目

推荐:

  • 熟悉 Remotion 的视频功能
  • 理解 React 组件(Remotion 使用 React)

获取与网络配置

步骤 1:发现可用的 MCP 服务器

运行 list_tools 以识别可用的 MCP 服务器及其前缀:

  • Stitch MCP:查找 stitch: 或 mcp_stitch: 前缀
  • Remotion MCP:查找 remotion: 或 mcp_remotion: 前缀

步骤 2:获取 Stitch 项目信息

  1. 项目查找(如果未提供项目 ID):

    • 调用 [stitch_prefix]:list_projects,使用 filter: "view=owned"
    • 按标题识别目标项目(例如,“计算器应用”)
    • 从 name 字段提取项目 ID(例如,projects/13534454087919359824)
  2. 屏幕检索:

    • 使用项目 ID(仅数字)调用 [stitch_prefix]:list_screens
    • 查看屏幕标题以识别演示中所有的屏幕
    • 从每个屏幕的 name 字段提取屏幕 ID
  3. 屏幕元数据获取: 对每个屏幕:

    • 使用 projectId 和 screenId 调用 [stitch_prefix]:get_screen
    • 获取:
      • screenshot.downloadUrl — 视频的视觉资源
      • htmlCode.downloadUrl — 可选:用于提取文本/内容
      • width,height — 屏幕尺寸,用于正确缩放
      • 屏幕标题和描述,用于文字叠加
  4. 资源下载:

    • 使用 web_fetch 或带 curl 的 Bash 下载屏幕截图
    • 保存到临时目录:assets/screens/{screen-name}.png
    • 按预期的演示流程顺序整理资源

步骤 3:设置 Remotion 项目

  1. 检查现有的 Remotion 项目:

    • 查找 remotion.config.ts 或包含 Remotion 依赖的 package.json
    • 如果存在,使用现有的项目结构
  2. 创建新的 Remotion 项目(如果需要):

    npm create video@latest -- --blank
    
    • 选择 TypeScript 模板
    • 在专用的 video/ 目录中设置
  3. 安装依赖:

    cd video
    npm install @remotion/transitions @remotion/animated-emoji
    

视频合成策略

架构

创建一个模块化的 Remotion 合成,包含以下组件:

  1. ScreenSlide.tsx — 单个屏幕显示组件

    • 属性:imageSrc,title,description,width,height
    • 功能:缩放动画,淡入淡出过渡
    • 时长:可配置(默认为 3-5 秒每屏)
  2. WalkthroughComposition.tsx — 主视频合成组件

    • 序列化多个 ScreenSlide 组件
    • 处理屏幕之间的过渡
    • 添加文字叠加和注释
  3. config.ts — 视频配置

    • 帧率(默认:30 fps)
    • 视频尺寸(匹配 Stitch 屏幕尺寸或按比例缩放)
    • 总时长计算

过渡效果

使用 Remotion 的 @remotion/transitions 实现专业效果:

  • 淡入淡出:屏幕之间的平滑交叉淡入淡出

    import {fade} from '@remotion/transitions/fade';
    
  • 滑动:定向滑动过渡

    import {slide} from '@remotion/transitions/slide';
    
  • 缩放:用于强调的放大/缩小效果

    • 使用 spring() 动画实现平滑缩放
    • 应用于重要的 UI 元素

文字叠加

使用 Remotion 的文本渲染添加上下文信息:

  1. 屏幕标题:在每帧的顶部或底部显示
  2. 功能标注:使用动画指针高亮特定 UI 元素
  3. 描述:为每个屏幕淡入显示描述性文字
  4. 进度指示器:显示当前屏幕在演示中的位置

执行步骤

步骤 1:收集屏幕资源

  1. 识别目标 Stitch 项目
  2. 列出项目中的所有屏幕
  3. 下载每个屏幕的截图
  4. 按演示流程顺序整理
  5. 创建清单文件(screens.json):
{
  "projectName": "计算器应用",
  "screens": [
    {
      "id": "1",
      "title": "主屏幕",
      "description": "带有数字键盘的主计算器界面",
      "imagePath": "assets/screens/home.png",
      "width": 1200,
      "height": 800,
      "duration": 4
    },
    {
      "id": "2",
      "title": "历史记录视图",
      "description": "查看之前的计算记录",
      "imagePath": "assets/screens/history.png",
      "width": 1200,
      "height": 800,
      "duration": 3
    }
  ]
}

步骤 2:生成 Remotion 组件

按照 Remotion 最佳实践创建视频组件:

  1. 创建 ScreenSlide.tsx:

    • 使用 useCurrentFrame() 和 spring() 实现动画
    • 实现缩放和淡入淡出效果
    • 添加带正确时机的文字叠加
  2. 创建 WalkthroughComposition.tsx:

    • 导入屏幕清单
    • 使用 <Sequence> 组件序列化屏幕
    • 在屏幕之间应用过渡
    • 计算正确的时机和偏移量
  3. 更新 remotion.config.ts:

    • 设置合成 ID
    • 配置视频尺寸
    • 设置帧率和时长

参考资源:

  • 使用 resources/screen-slide-template.tsx 作为起点
  • 参考 resources/composition-checklist.md 确保完整性
  • 查看 examples/ 目录中的示例

步骤 3:预览和优化

  1. 启动 Remotion Studio:

    npm run dev
    
    • 打开基于浏览器的预览
    • 允许实时编辑和优化
  2. 调整时机:

    • 确保每个屏幕有合适的显示时长
    • 验证过渡是否平滑
    • 检查文字叠加的时机
  3. 微调动画:

    • 调整缩放效果的弹簧配置
    • 修改过渡的缓动函数
    • 确保文字始终可读

步骤 4:渲染视频

  1. 使用 Remotion CLI 渲染:

    npx remotion render WalkthroughComposition output.mp4
    
  2. 替代方案:使用 Remotion MCP(如果可用):

    • 使用合成详情调用 [remotion_prefix]:render
    • 指定输出格式(MP4,WebM 等)
  3. 优化选项:

    • 设置质量级别(--quality)
    • 配置编解码器(--codec h264 或 h265)
    • 启用并行渲染(--concurrency)

高级功能

交互式热点

高亮可点击元素或重要功能:

import {interpolate, useCurrentFrame} from 'remotion';

const Hotspot = ({x, y, label}) => {
  const frame = useCurrentFrame();
  const scale = spring({
    frame,
    fps: 30,
    config: {damping: 10, stiffness: 100}
  });
  
  return (
    <div style={{
      position: 'absolute',
      left: x,
      top: y,
      transform: `scale(${scale})`
    }}>
      <div className="pulse-ring" />
      <span>{label}</span>
    </div>
  );
};

旁白集成

为演示添加旁白:

  1. 根据屏幕描述生成旁白脚本
  2. 使用文本转语音或录制音频
  3. 使用 <Audio> 组件将音频导入 Remotion
  4. 使屏幕时机与旁白节奏同步

动态文本提取

从 Stitch HTML 代码中提取文本以实现自动注释:

  1. 下载每个屏幕的 htmlCode.downloadUrl
  2. 解析 HTML 以提取关键文本元素(标题、按钮、标签)
  3. 为重要的 UI 元素生成自动标注
  4. 作为定时文字叠加添加到合成中

文件结构

project/
├── video/                      # Remotion 项目目录
│   ├── src/
│   │   ├── WalkthroughComposition.tsx
│   │   ├── ScreenSlide.tsx
│   │   ├── components/
│   │   │   ├── Hotspot.tsx
│   │   │   └── TextOverlay.tsx
│   │   └── Root.tsx
│   ├── public/
│   │   └── assets/
│   │       └── screens/        # 已下载的 Stitch 屏幕截图
│   │           ├── home.png
│   │           └── history.png
│   ├── remotion.config.ts
│   └── package.json
├── screens.json                # 屏幕清单
└── output.mp4                  # 渲染的视频

与 Remotion 技能的集成

Remotion 维护自己的 Agent 技能,这些技能定义了最佳实践。请查阅这些技能以获取高级技术:

要利用的关键 Remotion 技能包括:

  • 动画计时和缓动
  • 合成架构模式
  • 性能优化
  • 音频同步

常见模式

模式 1:简单的幻灯片放映

带有淡入淡出过渡的基础演示:

  • 每屏 3-5 秒
  • 交叉淡入淡出过渡
  • 底部文字叠加显示屏幕标题
  • 顶部进度条

模式 2:功能高亮

聚焦于特定 UI 元素:

  • 缩放到特定区域
  • 指向功能的动画圆形/箭头
  • 对关键交互的慢动作强调
  • 并排的前后对比

模式 3:用户流程

展示逐步的用户旅程:

  • 带定向滑动的顺序屏幕流
  • 编号步骤叠加
  • 高亮用户操作(点击、轻触)
  • 使用动画路径连接屏幕

故障排查

问题解决方案
屏幕截图模糊确保下载的图像为全分辨率;检查 screenshot.downloadUrl 的质量设置
文本对齐错位验证屏幕尺寸与合成尺寸匹配;根据实际屏幕大小调整文本位置
动画卡顿将帧率提高到 60fps;使用合适的弹簧配置并设置适当的阻尼
Remotion 构建失败检查 Node 版本兼容性;确保所有依赖已安装;查阅 Remotion 文档
时机感觉不对在清单中调整每屏时长;在 Remotion Studio 中预览;与真实用户进行测试

最佳实践

  1. 保持宽高比:使用实际的 Stitch 屏幕尺寸或按比例缩放
  2. 一致的时机:保持每屏显示时长一致,除非需要强调特定屏幕
  3. 文字可读:确保足够的对比度;使用合适的字体大小;避免杂乱的叠加
  4. 平滑过渡:使用弹簧动画实现自然运动;避免突兀的切换
  5. 彻底预览:在最终渲染前始终在 Remotion Studio 中预览
  6. 优化资源:适当压缩图像;使用高效格式(UI 用 PNG,照片用 JPG)

示例用法

用户提示:

在我的 Stitch 项目“计算器应用”中查找屏幕,并构建一个展示屏幕演示的 Remotion 视频。

Agent 工作流程:

  1. 列出 Stitch 项目 → 找到“计算器应用” → 提取项目 ID
  2. 列出项目中的屏幕 → 识别所有屏幕(主屏幕、历史记录、设置)
  3. 为每个屏幕下载截图 → 保存到 assets/screens/
  4. 使用屏幕元数据创建 screens.json 清单
  5. 生成 Remotion 组件(ScreenSlide.tsx,WalkthroughComposition.tsx)
  6. 在 Remotion Studio 中预览 → 优化时机和过渡
  7. 渲染最终视频 → calculator-walkthrough.mp4
  8. 报告完成情况并提供视频预览链接

成功提示

  • 从简单开始:在添加复杂动画之前,先使用基本的淡入淡出过渡
  • 遵循 Remotion 模式:利用 Remotion 的官方技能和文档
  • 使用清单文件:在 JSON 中维护屏幕数据以便于更新
  • 频繁预览:使用 Remotion Studio 尽早发现问题
  • 考虑可访问性:添加字幕;确保文字可读;使用清晰的视觉元素
  • 针对平台优化:使视频尺寸匹配目标平台(YouTube,社交媒体等)

参考资料

相关技能