Remotion 到 HyperFrames
在构建前确认路线。 仅用于将现有的 Remotion (React) 合成源码移植到 HyperFrames。创作一个新的合成作品(即使受 Remotion 视频启发)→ 请使用创作工作流
/general-video。超出范围(单向,仅限 Remotion):不支持反向导出(HyperFrames → Remotion 或任何框架),并且非 Remotion 源码(After Effects、Framer Motion、纯 React / CSS)没有可翻译的 Remotion 源码 → 请通过/general-video重新创建。不确定,或只是附带提及 Remotion?请先阅读/hyperframes。
概述
将 Remotion (基于 React) 视频合成作品翻译成 HyperFrames (HTML + GSAP) 合成作品。大多数 Remotion 习语在 HyperFrames 中都有直接对应项——对于约 80% 的典型合成作品,翻译是机械的。该技能编码了这种映射关系,并通过拒绝翻译那些不适合 HF 基于时间轴的可 seek 模型的模式来防范有损失的 20%,并建议改用 PR #214 中的运行时互操作模式。
该技能附带一个分层测试语料库(共 4 个 T1–T4 测试用例),可根据测量的 SSIM 阈值对翻译进行评级。未经运行评估不要进行翻译——一个“看起来正确”但 SSIM 比验证基线低 0.05 的翻译是无声错误的。
何时使用
仅当用户明确要求从 Remotion 迁移时才使用此技能。示例触发短语:
- “将我的 Remotion 项目移植到 HyperFrames”
- “将此 Remotion 代码转换为 HyperFrames”
- “从 Remotion 迁移”
- “翻译此 Remotion comp”
- “将其重写为 HyperFrames HTML”
在以下情况下请勿使用此技能:
- (a) 用户正在创作一个新的 HyperFrames 合成作品,即使他们在 A/B 测试一个类似的 Remotion 视频。
- (b) 用户附带提及 Remotion 而未要求迁移。
- (c) 用户分享 Remotion 代码作为参考资料而非要求翻译。
- (d) 用户要求“与我的 Remotion 视频相同”而没有明确要求迁移源码——请将其视为全新的 HyperFrames 构建。
不支持(拒绝——这不是此技能的功能):
- 反向方向。 将 HyperFrames 合成作品导出回 到 Remotion(或任何其他框架)不是工作流——翻译仅限 Remotion → HyperFrames。请明确说明。
- 非 Remotion 源码。 After Effects 项目 (
.aep)、Framer Motion / 纯 React / CSS 动画或任何其他工具的源码不是 Remotion 合成作品——没有可翻译的 Remotion 源码。请通过/general-video原生重新创建它,或者如果 HyperFrames 无法表示则拒绝。
如有疑问,默认使用 /general-video(通用 HyperFrames 创作流程)创作原生 HyperFrames 合成作品。
工作流程
步骤 1:Lint 源码
在 Remotion 源码目录上运行 scripts/lint_source.py。lint 检测无法干净翻译的模式:
- 阻塞项(拒绝 + 推荐互操作):
useState、useReducer、具有非空依赖项的useEffect/useLayoutEffect、异步calculateMetadata、第三方 React UI 库(MUI、Chakra、Mantine、antd、shadcn、Radix、NextUI)。 - 警告项(丢弃该构造后翻译):
@remotion/lambda配置、delayRender、useCallback、useMemo、自定义 hooks。 - 信息项(附带注释翻译):
staticFile、interpolateColors。
如果触发了任何阻塞项,停止。阅读 references/escape-hatch.md 并提出建议消息。警告不会阻止翻译——在步骤 3 中丢弃有问题的构造并在 TRANSLATION_NOTES.md 中注明差距。@remotion/lambda 配置是典型的警告案例:技能会丢弃导入 + renderMediaOnLambda(...) 调用,但翻译合成作品的其余部分。
步骤 2:规划翻译
阅读 references/api-map.md——每个 Remotion API 及其 HF 对应项或按主题的参考索引。根据源码使用的内容确定需要哪些主题参考:
| 源码包含 | 加载参考 |
|---|---|
Composition、defaultProps、schema、calculateMetadata | parameters.md |
Sequence、Series、Loop、AbsoluteFill、Freeze | sequencing.md |
useCurrentFrame、interpolate、spring、Easing、interpolateColors | timing.md |
Audio、Video、Img、IFrame、staticFile、delayRender | media.md |
TransitionSeries、@remotion/transitions | transitions.md |
@remotion/lottie | lottie.md |
@remotion/google-fonts/<Family>、Font.loadFont、@font-face | fonts.md |
不要全部加载——只加载特定源码需要的部分。
步骤 3:生成 HF 合成作品
输出 index.html,包含:
- 根
<div id="stage">携带合成作品的data-composition-id、data-start="0"、data-duration(以秒为单位)、data-fps、data-width、data-height,以及每个标量 prop 对应的data-*属性。 - 一组扁平的场景 div,带有
data-start/data-duration/data-track-index。 - 用于布局的内联
<style>;CSS 设置每个动画属性的from状态。 - 底部一个包含一个暂停的
gsap.timeline({paused: true})的<script>标签。每个基于useCurrentFrame()的推导都变成一个位于正确偏移量上的该时间线的动画。 window.__timelines["<composition-id>"] = tl;将时间线注册到 HF 的运行时。
自定义 React 子组件内联为重复的 HTML,使用 prop 接口作为模板(参见 parameters.md 了解每个实例的 data-* 模式)。
步骤 4:验证
运行评估框架——完整指南参见 references/eval.md。快速路径:
# 渲染 Remotion 基线(在测试用例中 npm install 后)
cd remotion-src && npx remotion render <CompositionId> out/baseline.mp4
# 渲染 HF 翻译
cd ../hf-src && npx hyperframes render --skill=remotion-to-hyperframes --output ../hf.mp4
# SSIM 差异
../../scripts/render_diff.sh ./remotion-src/out/baseline.mp4 ./hf.mp4 ./diff
阈值:低于源码复杂度层级的 p05 约 0.02(参见 eval.md 中的验证阈值表)。如果差异失败,运行 scripts/frame_strip.sh 查看 哪些 帧出现了差异,然后重新阅读相关的时间/序列/媒体参考。
关键:两个渲染必须使用匹配的像素格式。在 Remotion 源码的 remotion.config.ts 中设置 Config.setVideoImageFormat("png") + Config.setColorSpace("bt709")——否则差异会测量编码器差异(SSIM 下降约 0.05),而不是翻译保真度。
步骤 5:记录差距
任何未干净翻译的内容(丢弃的音量渐变、近似的自定义演示、替换的字体)都会在 HF 输出旁生成 TRANSLATION_NOTES.md。格式参见 references/limitations.md。
此技能明确不做什么
- 翻译 React 状态机。 通过
useState+useEffect驱动动画的合成作品在 HyperFrames 基于时间轴的可 seek 模型下不是确定性的帧捕获目标。建议使用运行时互操作模式。 - 与 HyperFrames 一起运行 Remotion 的渲染管线。 那是 PR #214 中的运行时互操作模式——针对无法通过此技能 lint 的合成作品的独立解决方案。
(@remotion/lambda 不是 阻塞项——Lambda 配置是部署,而非动画。技能会将其作为警告丢弃并翻译其余部分。参见 references/escape-hatch.md。)
如何评估您自己的翻译
运行测试语料库编排器:
./assets/test-corpus/run.sh
它会运行 T1、T2、T3(渲染 + 差异)和 T4(lint 验证),打印每个层级的通过/失败表,并输出一个聚合的 JSON 报告。使用此功能验证技能在干净检出上端到端工作——并在编辑任何参考后进行回归检查。
已验证的基线(截至 2026-04-27):
| 层级 | 合成作品形状 | 平均 SSIM | 阈值 |
|---|---|---|---|
| T1 | 单元素淡入 | 0.974 | 0.95 |
| T2 | 多场景 + spring + 音频 + 图像 | 0.985 | 0.95 |
| T3 | 数据驱动、自定义子组件、计数动画 | 0.953 | 0.90 |
| T4 | 逃逸处理(8 个 lint 用例) | 8/8 通过 | 不适用 |