Communitygithub.com

phoroth/AGENTIC

使用 Remotion,从 Stitch 项目生成带有平滑过渡、缩放和文字叠加效果的导览视频。

AGENTIC 是什么?

此技能可帮助 AI 代理从 Stitch 设计项目创建专业的应用导览视频。它结合了 Stitch MCP(用于检索屏幕截图)和 Remotion MCP(用于生成程序化视频)。工作流程包括:发现可用 MCP 服务器,检索 Stitch 项目屏幕及其元数据,下载截图,并构建一个模块化的 Remotion 合成。该合成支持淡入淡出、滑动和缩放过渡,自动文字叠加,以及进度指示、交互式热点和语音旁白等高级功能。视频可通过 Remotion CLI 或 MCP 服务器渲染为 MP4 或 WebM 格式。该技能对于需要自动生成应用演示、产品导览或用户流程视频的开发者尤为有用,支持所有 Remotion 兼容平台。

兼容平台~Claude Code~Codex CLI~Cursor✓Antigravity
npx skills add https://github.com/phoroth/AGENTIC/tree/HEAD/skills/remotion

在你喜欢的 AI 中提问

打开一个已预加载此 Agent Skill 的新对话。

文档

Stitch 到 Remotion 导览视频

你是一名专注于从应用设计创建引人入胜的导览视频的视频制作专家。你将 Stitch 的屏幕检索能力与 Remotion 的程序化视频生成相结合,制作出流畅、专业的演示内容。

概述

此技能允许你创建导览视频,以专业过渡、缩放效果和上下文文字叠加来展示应用屏幕。工作流程从 Stitch 项目中检索屏幕,并将其编排成一个 Remotion 视频合成。

前提条件

必需:

  • 访问 Stitch MCP 服务器
  • 访问 Remotion MCP 服务器(或 Remotion CLI)
  • 已安装 Node.js 和 npm
  • 包含已设计屏幕的 Stitch 项目

推荐:

  • 熟悉 Remotion 的视频能力
  • 理解 React 组件(Remotion 使用 React)

检索与网络

步骤 1:发现可用的 MCP 服务器

运行 list_tools 以识别可用的 MCP 服务器及其前缀:

  • Stitch MCP:查找 stitch: 或 mcp_stitch: 前缀
  • Remotion MCP:查找 remotion: 或 mcp_remotion: 前缀

步骤 2:检索 Stitch 项目信息

  1. 项目查找(如果未提供项目 ID):

    • 调用 [stitch_prefix]:list_projects,参数为 filter: "view=owned"
    • 根据标题识别目标项目(例如,“计算器应用”)
    • 从 name 字段中提取项目 ID(例如,projects/13534454087919359824)
  2. 屏幕检索:

    • 使用项目 ID(仅数字)调用 [stitch_prefix]:list_screens
    • 查看屏幕标题以识别导览的所有屏幕
    • 从每个屏幕的 name 字段中提取屏幕 ID
  3. 屏幕元数据获取: 对于每个屏幕:

    • 使用 projectId 和 screenId 调用 [stitch_prefix]:get_screen
    • 检索:
      • screenshot.downloadUrl — 视频的视觉资产
      • htmlCode.downloadUrl — 可选:用于提取文本/内容
      • width, height — 用于适当缩放的屏幕尺寸
      • 用于文字叠加的屏幕标题和描述
  4. 资源下载:

    • 使用 web_fetch 或带 curl 的 Bash 下载截图
    • 保存到临时目录:assets/screens/{screen-name}.png
    • 按照预期导览流程的顺序组织资源

步骤 3:设置 Remotion 项目

  1. 检查现有 Remotion 项目:

    • 查找 remotion.config.ts 或包含 Remotion 依赖项的 package.json
    • 如果存在,使用现有项目结构
  2. 创建新的 Remotion 项目(如果需要):

    npm create video@latest -- --blank
    
    • 选择 TypeScript 模板
    • 在专用的 video/ 目录中设置
  3. 安装依赖项:

    cd video
    npm install @remotion/transitions @remotion/animated-emoji
    

视频合成策略

架构

创建一个包含以下组件的模块化 Remotion 合成:

  1. ScreenSlide.tsx — 单个屏幕展示组件

    • 属性:imageSrc, title, description, width, height
    • 功能:放大动画,淡入淡出过渡
    • 持续时间:可配置(默认每个屏幕 3-5 秒)
  2. WalkthroughComposition.tsx — 主视频合成

    • 对多个 ScreenSlide 组件进行排序
    • 处理屏幕之间的过渡
    • 添加文字叠加和注释
  3. config.ts — 视频配置

    • 帧率(默认:30 fps)
    • 视频尺寸(匹配 Stitch 屏幕尺寸或适当缩放)
    • 总持续时间计算

过渡效果

使用 Remotion 的 @remotion/transitions 实现专业效果:

  • 淡入淡出:屏幕之间的平滑交叉淡入

    import {fade} from '@remotion/transitions/fade';
    
  • 滑动:定向滑动过渡

    import {slide} from '@remotion/transitions/slide';
    
  • 缩放:用于强调的缩放效果

    • 使用 spring() 动画实现平滑缩放
    • 应用于重要的 UI 元素

文字叠加

使用 Remotion 的文本渲染添加上下文信息:

  1. 屏幕标题:在每帧的顶部或底部显示
  2. 功能介绍:使用动画指针突出显示特定 UI 元素
  3. 描述:为每个屏幕淡入描述性文本
  4. 进度指示器:显示当前屏幕在导览中的位置

执行步骤

步骤 1:收集屏幕资源

  1. 识别目标 Stitch 项目
  2. 列出项目中的所有屏幕
  3. 下载每个屏幕的截图
  4. 按导览流程顺序组织
  5. 创建清单文件(screens.json):
{
  "projectName": "计算器应用",
  "screens": [
    {
      "id": "1",
      "title": "主屏幕",
      "description": "带数字键盘的主计算器界面",
      "imagePath": "assets/screens/home.png",
      "width": 1200,
      "height": 800,
      "duration": 4
    },
    {
      "id": "2",
      "title": "历史视图",
      "description": "先前计算的视图",
      "imagePath": "assets/screens/history.png",
      "width": 1200,
      "height": 800,
      "duration": 3
    }
  ]
}

步骤 2:生成 Remotion 组件

遵循 Remotion 最佳实践创建视频组件:

  1. 创建 ScreenSlide.tsx:

    • 使用 useCurrentFrame() 和 spring() 实现动画
    • 实现缩放和淡入淡出效果
    • 添加具有适当时机的文字叠加
  2. 创建 WalkthroughComposition.tsx:

    • 导入屏幕清单
    • 使用 <Sequence> 组件对屏幕进行排序
    • 在屏幕之间应用过渡
    • 计算适当的时机和偏移
  3. 更新 remotion.config.ts:

    • 设置合成 ID
    • 配置视频尺寸
    • 设置帧率和持续时间

参考资源:

  • 使用 resources/screen-slide-template.tsx 作为起点
  • 遵循 resources/composition-checklist.md 以确保完整性
  • 查看 examples/walkthrough/ 目录中的示例

步骤 3:预览和优化

  1. 启动 Remotion Studio:

    npm run dev
    
    • 打开基于浏览器的预览
    • 允许实时编辑和优化
  2. 调整时机:

    • 确保每个屏幕有适当的展示持续时间
    • 验证过渡是否平滑
    • 检查文字叠加时机
  3. 微调动画:

    • 调整缩放效果的 spring 配置
    • 修改过渡的缓动函数
    • 确保文本始终可读

步骤 4:渲染视频

  1. 使用 Remotion CLI 渲染:

    npx remotion render WalkthroughComposition output.mp4
    
  2. 替代方案:使用 Remotion MCP(如果可用):

    • 使用合成详情调用 [remotion_prefix]:render
    • 指定输出格式(MP4、WebM 等)
  3. 优化选项:

    • 设置质量级别(--quality)
    • 配置编解码器(--codec h264 或 h265)
    • 启用并行渲染(--concurrency)

高级功能

交互式热点

突出显示可点击元素或重要功能:

import {interpolate, useCurrentFrame} from 'remotion';

const Hotspot = ({x, y, label}) => {
  const frame = useCurrentFrame();
  const scale = spring({
    frame,
    fps: 30,
    config: {damping: 10, stiffness: 100}
  });
  
  return (
    <div style={{
      position: 'absolute',
      left: x,
      top: y,
      transform: `scale(${scale})`
    }}>
      <div className="pulse-ring" />
      <span>{label}</span>
    </div>
  );
};

旁白集成

为导览添加旁白:

  1. 根据屏幕描述生成旁白脚本
  2. 使用文本转语音或录制音频
  3. 使用 <Audio> 组件将音频导入 Remotion
  4. 将屏幕时机与旁白节奏同步

动态文本提取

从 Stitch HTML 代码中提取文本以自动生成注释:

  1. 为每个屏幕下载 htmlCode.downloadUrl
  2. 解析 HTML 以提取关键文本元素(标题、按钮、标签)
  3. 为重要的 UI 元素生成自动提示
  4. 作为定时文字叠加添加到合成中

文件结构

project/
├── video/                      # Remotion 项目目录
│   ├── src/
│   │   ├── WalkthroughComposition.tsx
│   │   ├── ScreenSlide.tsx
│   │   ├── components/
│   │   │   ├── Hotspot.tsx
│   │   │   └── TextOverlay.tsx
│   │   └── Root.tsx
│   ├── public/
│   │   └── assets/
│   │       └── screens/        # 下载的 Stitch 截图
│   │           ├── home.png
│   │           └── history.png
│   ├── remotion.config.ts
│   └── package.json
├── screens.json                # 屏幕清单
└── output.mp4                  # 渲染的视频

与 Remotion 技能集成

Remotion 维护着自己的 Agent Skills,这些技能定义了最佳实践。查看这些以获取高级技巧:

要利用的关键 Remotion 技能:

  • 动画时机和缓动
  • 合成架构模式
  • 性能优化
  • 音频同步

常见模式

模式 1:简单幻灯片

带淡入淡出过渡的基本导览:

  • 每个屏幕 3-5 秒
  • 交叉淡入过渡
  • 底部文字叠加显示屏幕标题
  • 顶部进度条

模式 2:功能突出显示

聚焦于特定 UI 元素:

  • 放大到特定区域
  • 指向功能的动画圆圈/箭头
  • 关键交互的慢动作强调
  • 并排放置前后对比

模式 3:用户流程

显示分步用户旅程:

  • 带有定向滑动的顺序屏幕流
  • 编号步骤叠加
  • 突出显示用户操作(点击、轻触)
  • 使用动画路径连接屏幕

故障排除

问题解决方案
截图模糊确保下载的图像为全分辨率;检查 screenshot.downloadUrl 质量设置
文本错位验证屏幕尺寸与合成大小匹配;根据实际屏幕尺寸调整文本位置
动画卡顿将帧率提高到 60fps;使用具有适当阻尼的 spring 配置
Remotion 构建失败检查 Node 版本兼容性;确保所有依赖项已安装;查阅 Remotion 文档
时机感觉不对在清单中调整每个屏幕的持续时间;在 Remotion Studio 中预览;与实际用户测试

最佳实践

  1. 保持宽高比:使用实际的 Stitch 屏幕尺寸或按比例缩放
  2. 一致的时机:除非要强调特定屏幕,否则保持屏幕显示持续时间一致
  3. 可读文本:确保足够的对比度;使用适当的字体大小;避免杂乱的叠加
  4. 平滑过渡:使用 spring 动画实现自然运动;避免突兀的切换
  5. 彻底预览:在最终渲染前始终在 Remotion Studio 中预览
  6. 优化资源:适当压缩图像;使用高效的格式(UI 使用 PNG,照片使用 JPG)

示例用法

用户提示:

查找我的 Stitch 项目“计算器应用”中的屏幕,并构建一个展示这些屏幕导览的 remotion 视频。

代理工作流程:

  1. 列出 Stitch 项目 → 找到“计算器应用” → 提取项目 ID
  2. 列出项目中的屏幕 → 识别所有屏幕(主页、历史、设置)
  3. 下载每个屏幕的截图 → 保存到 assets/screens/
  4. 使用屏幕元数据创建 screens.json 清单
  5. 生成 Remotion 组件(ScreenSlide.tsx, WalkthroughComposition.tsx)
  6. 在 Remotion Studio 中预览 → 优化时机和过渡
  7. 渲染最终视频 → calculator-walkthrough.mp4
  8. 报告完成并附上视频预览链接

成功秘诀

  • 从简单开始:在添加复杂动画之前,先从基本的淡入淡出过渡开始
  • 遵循 Remotion 模式:利用 Remotion 的官方技能和文档
  • 使用清单文件:将屏幕数据有序地保存在 JSON 中,便于更新
  • 频繁预览:使用 Remotion Studio 及早发现问题
  • 考虑可访问性:添加字幕;确保文本可读;使用清晰的视觉元素
  • 针对平台优化:使视频尺寸匹配目标平台(YouTube、社交媒体等)

参考

何时使用

当处理与其主要领域或上述功能相关的任务时,使用此技能。

限制

  • 仅在任务明确匹配上述范围时使用此技能。
  • 不要将输出视为特定于项目的验证、测试或专家评审的替代品。
  • 如果缺少必要的输入、权限、安全边界或成功标准,请停止并要求澄清。

相关技能