← 返回资源库

Codex + HyperFrames 自动剪辑教程:17 分钟英文视频如何变成 90 秒中文短片

一位中文 AI 创作者在 X 上展示了这样一条工作流:把 17 分钟英文视频交给 Codex,要求它理解原片、挑出重点、重写成 90 秒中文叙事,再调用 HyperFrames 完成裁剪、字幕、标题、信息卡和动画,最后输出 MP4。作者称自己全程没有打开剪映,只按了一次回车。

这个案例展示了 Agent 视频制作的潜力,但不等于“一句话稳定替代剪映”。原帖没有公开完整项目文件、模型设置、转录服务、失败次数、人工修改记录和总成本,所谓“全程没动手”只能视为作者的单次体验。

更准确的说法是:

Codex 可以充当项目经理和执行 Agent,读取本地素材、调用转录与 FFmpeg、编写 HyperFrames 工程、运行检查并渲染;HyperFrames 则把 HTML、CSS、媒体和可定位动画变成确定性的 MP4。

它把传统时间线编辑改造成“文件 + 代码 + 命令”的生产流程,适合需要反复生成同类视频的创作者和团队。

HyperFrames 是什么?

HyperFrames 官方 GitHub 仓库将它定义为一个开源视频框架:使用 HTML、CSS、媒体文件和可 seek 的动画描述画面,再通过无头浏览器逐帧捕获,最终由 FFmpeg 编码为 MP4。

它的核心特征包括:

  • 使用普通 HTML,而不是专有时间线格式;
  • 支持 CSS、GSAP、Lottie、Three.js、Anime.js 等动画方案;
  • 同一输入可以重复渲染相同帧,适合自动化和回归检查;
  • 提供 CLI、组件目录、Agent Skills、浏览器 Studio 和 Lambda 渲染路径;
  • 可与 Codex、Claude Code、Cursor 等支持技能的编码 Agent 配合;
  • 采用 Apache 2.0 许可证,没有按次渲染的开源许可费。

基础环境要求是 Node.js 22 或更高版本和 FFmpeg。官方给出的 Agent 安装命令是:

npx skills add heygen-com/hyperframes

手动创建与渲染项目的基本命令是:

npx hyperframes init my-video
cd my-video
npx hyperframes preview
npx hyperframes render

开源免费不代表整条工作流零成本。语音转写、翻译、图像生成、TTS、云存储和 Agent 模型可能分别产生费用,本地渲染也会消耗设备时间。

Codex 和 HyperFrames 各自负责什么?

环节 Codex / Agent HyperFrames
理解需求 阅读提示词、目标平台和品牌规则 不负责
读取素材 检查视频、音频、图片和项目文件 引用准备好的媒体
转录与分析 调用转录、脚本或命令,分析重点 不负责语言理解
剪辑规划 生成片段表、叙事顺序和设计方案 接收时间和画面结构
视觉制作 编写 HTML、CSS、动画和组件配置 预览并逐帧执行
渲染 运行 CLI、处理报错并检查产物 捕获帧、混音、编码 MP4
验收 调用 FFprobe、截图和检查脚本 提供 lint、inspect、preview 等能力

Codex 不是“内置视频剪辑器”,HyperFrames 也不是“自动理解视频的 AI”。案例能完成端到端流程,是因为 Agent 把多个本地工具和项目文件串在一起。

OpenAI 官方关于 Codex 自动化工作流的说明强调了三个原则:整理上下文、保留审批边界,以及把每次运行中的经验沉淀给下一次。官方 Shell 文档也提醒,能执行本地命令的 Agent 必须运行在受控环境中,并记录命令和输出。

从 17 分钟英文视频到 90 秒中文短片的完整流程

第一步:确认素材权利

原帖建议从 X、抖音和 YouTube 寻找热门视频并下载。这个步骤风险最高。

优先使用:

  • 自己拍摄或拥有版权的视频;
  • 客户书面授权你二次制作的素材;
  • 明确允许商业改编的 Creative Commons 素材;
  • 公共领域内容;
  • 平台内置 Remix 功能及其许可范围内的内容。

不要把“公开可观看”理解为“可以下载、翻译和重新发布”。YouTube 官方说明指出,用户可以下载自己上传的视频,但不能通过该功能下载其他用户的视频;其他下载方式还需同时考虑平台条款与版权。

第二步:建立固定项目目录

video-project/
  source/
  transcript/
  selects/
  assets/
  hyperframes/
  review/
  output/
  rights/

rights/ 用来保存授权书、许可页面和音乐凭证。自动化越强,越需要明确素材来源,否则 Agent 只会更快地放大错误。

第三步:提取音频并转录

Agent 可以使用 FFmpeg 抽取音频,再调用本地 Whisper 或你批准的转录服务。输出应包含时间戳、说话人和不确定词,而不只是纯文本。

转录后先人工抽查:

  • 人名、产品名和专业术语;
  • 数字、价格、日期和单位;
  • 反问、否定和讽刺;
  • 背景音乐或多人同时说话的位置。

第四步:先做“事实摘要”,再做中文改写

把原片压缩成三个文件:

  1. 带时间戳的原文转录;
  2. 只包含原片事实的结构化摘要;
  3. 90 秒中文脚本草稿。

这三个文件不要合并。分层后,审阅者才能看出中文旁白是忠实转述、合理解释,还是凭空增加了原片没有的观点。

第五步:生成选段表和分镜

片段 A:00:45–01:02
用途:提出核心问题
保留理由:原作者直接说明痛点
中文旁白:……
画面处理:保留原声 / 静音 / 局部放大
来源权限:已确认

不要让模型只凭“最有传播力”选段。还要检查上下文是否完整,避免把原作者一句带前提的话剪成相反结论。

第六步:用 HyperFrames 制作字幕和动效

Agent 根据分镜创建 HTML Composition,加入:

  • 原始视频片段;
  • 中文字幕和关键词强调;
  • 标题、数据卡和引用来源;
  • 图片或屏幕截图;
  • 受控转场和背景音乐;
  • 平台安全区与字幕边距。

HyperFrames 的优势是所有元素都能检查和修改,不必依赖一条黑盒时间线。品牌颜色、字号、Logo 和动画规则也可以沉淀成复用模板。

第七步:自动检查不能只看“渲染成功”

至少检查:

  • MP4 是否能正常播放;
  • 时长、分辨率、帧率和音频编码;
  • 字幕是否超出安全区;
  • 中文旁白是否与画面事实一致;
  • BGM 是否盖过人声;
  • 外部链接、数字和专有名词是否准确;
  • 是否存在版权、隐私或误导风险;
  • 文章和视频中是否正确标注原始来源。

第八步:人工批准后再发布

Agent 可以自动生成多个版本,但默认不要让它直接发布。最终责任仍属于账号运营者,尤其是翻译改编、产品功效、投资、医疗和新闻内容。

可直接改写使用的安全提示词

请把 source/ 中的已授权英文长视频,制作成一条面向中国普通用户的 60–90 秒竖屏中文解说视频。

权限与事实边界:
1. 只使用 rights/ 中已确认授权的素材;未确认的内容不得进入成片。
2. 不新增原视频没有的事实、数据、观点或产品体验。
3. 保留每个结论对应的原片时间戳,遇到不确定转录要标记而不是猜测。
4. 不冒充原作者,不暗示与原作者存在合作。

工作流程:
1. 用 FFmpeg 提取音频并生成带时间戳转录。
2. 输出事实摘要和候选片段表,等待我确认。
3. 根据确认后的片段写 60–90 秒中文叙事,语言自然,不用夸张标题党。
4. 创建 1080×1920 HyperFrames 项目,加入中文字幕、标题、信息卡和适度动画。
5. 保留必要的原始画面上下文,并在结尾标注原作者与来源链接。
6. 运行 lint、预览、关键帧截图和 FFprobe 检查。
7. 先输出低码率 review.mp4;只有我批准后再渲染正式版。

交付:
- transcript.md
- facts.md
- selects.csv
- script-zh.md
- storyboard.md
- HyperFrames 工程
- review.mp4
- final.mp4
- rights-and-sources.md

提示词中最重要的不是“自动完成”,而是两个暂停点:选段确认与发布确认。

它能完全替代剪映吗?

取决于你的工作类型。

HyperFrames 更适合:

  • 批量制作统一品牌风格的视频;
  • 把文章、网页、PR 或数据变成动画解释;
  • 自动生成多种画幅、语言和字幕版本;
  • 让 Agent 检查、修改并重新渲染;
  • 需要工程文件可审查、可复现的团队。

传统剪辑软件仍然更适合:

  • 大量依赖手感的镜头微调;
  • 复杂调色、降噪和声音设计;
  • 现场快速拖拽试错;
  • 非技术用户的日常剪辑;
  • 需要成熟素材库、模板商店和移动端操作的场景。

最现实的组合不是“永远删除剪映”,而是让 Codex + HyperFrames 负责可模板化的 70%,人工编辑器处理高判断密度的 30%。比例会因项目而异。

真实成本不只是软件订阅

成本 可能发生在哪里
Agent 模型 Codex 订阅或 API 用量
转录 本地算力或云端语音识别
配音 TTS、真人配音或声音授权
素材 图片、音乐、字体与视频许可
渲染 本地设备时间或云计算
人工 事实核验、脚本、审片和返工
风险 Content ID、下架、退款或授权纠纷

HyperFrames 没有按次渲染许可费,不等于完整生产零成本。与剪映年费比较时,应把硬件、Agent、API 和人工时间一起算进去。

如何把这套流程变成可收费服务?

客户长视频切片

把客户自己的访谈、直播、课程或播客整理成多条竖屏短视频。客户购买的是选题、事实保真和稳定交付。

多语言内容版本

在取得原作者授权后,把同一套内容制作成中文、英文、日文等版本,保留术语表和审校流程。

SaaS 产品演示

从官网、录屏和产品文档生成更新视频、功能介绍和发布素材。HTML 动效特别适合 UI、代码和数据展示。

品牌视频模板系统

为团队建立字体、颜色、字幕、转场、信息卡和片尾组件,后续每条视频只替换内容数据。

卖点不要写“AI 帮你剪视频”,而应写成具体结果:每周交付多少条、多少语言、什么尺寸、多久返稿、包含几轮修改。

常见问题

Codex 能直接剪视频吗?

Codex 可以分析文件、编写项目、调用 Shell 和协调工具,但最终剪切、合成与编码仍由 FFmpeg、HyperFrames 等软件完成。

HyperFrames 是免费的吗?

官方仓库采用 Apache 2.0 许可证,没有按次渲染费用。Agent、转录、TTS、素材和计算资源仍可能收费。

Windows 能使用吗?

HyperFrames 核心依赖 Node.js、浏览器和 FFmpeg,具体 Agent Skill 或第三方插件可能有额外平台要求。安装前应运行官方诊断命令并查看当前文档。

可以直接下载热门视频重新剪吗?

不能把公开访问等同于获得版权。应使用自有、书面授权、公共领域、许可明确或平台 Remix 允许的素材。

翻译成中文就算原创吗?

不一定。翻译和改编通常仍涉及原作品权利;增加字幕、旁白和动画也不会自动解决版权问题。

Agent 生成的视频需要人工检查吗?

需要。至少检查事实、转录、片段上下文、字幕、素材权利、音频、品牌规范和最终编码。

为什么先生成 review.mp4?

低码率预览更快,便于在正式高分辨率渲染前发现脚本、字幕和画面问题,减少返工成本。

总结

Codex + HyperFrames 的真正变化,不是让每个人一键生成完美视频,而是把剪辑从一次性手工操作变成可记录、可检查、可重复运行的工程。

它尤其适合结构稳定的内容:长视频切片、课程摘要、产品演示、多语言版本和品牌化短视频。要让这套工作流长期赚钱,需要解决的也不是“提示词够不够神”,而是素材授权、事实准确、模板质量、人工验收和稳定交付。

参考资料

文章灵感来源