一位中文 AI 创作者在 X 上展示了这样一条工作流:把 17 分钟英文视频交给 Codex,要求它理解原片、挑出重点、重写成 90 秒中文叙事,再调用 HyperFrames 完成裁剪、字幕、标题、信息卡和动画,最后输出 MP4。作者称自己全程没有打开剪映,只按了一次回车。
这个案例展示了 Agent 视频制作的潜力,但不等于“一句话稳定替代剪映”。原帖没有公开完整项目文件、模型设置、转录服务、失败次数、人工修改记录和总成本,所谓“全程没动手”只能视为作者的单次体验。
更准确的说法是:
Codex 可以充当项目经理和执行 Agent,读取本地素材、调用转录与 FFmpeg、编写 HyperFrames 工程、运行检查并渲染;HyperFrames 则把 HTML、CSS、媒体和可定位动画变成确定性的 MP4。
它把传统时间线编辑改造成“文件 + 代码 + 命令”的生产流程,适合需要反复生成同类视频的创作者和团队。
HyperFrames 是什么?
HyperFrames 官方 GitHub 仓库将它定义为一个开源视频框架:使用 HTML、CSS、媒体文件和可 seek 的动画描述画面,再通过无头浏览器逐帧捕获,最终由 FFmpeg 编码为 MP4。
它的核心特征包括:
- 使用普通 HTML,而不是专有时间线格式;
- 支持 CSS、GSAP、Lottie、Three.js、Anime.js 等动画方案;
- 同一输入可以重复渲染相同帧,适合自动化和回归检查;
- 提供 CLI、组件目录、Agent Skills、浏览器 Studio 和 Lambda 渲染路径;
- 可与 Codex、Claude Code、Cursor 等支持技能的编码 Agent 配合;
- 采用 Apache 2.0 许可证,没有按次渲染的开源许可费。
基础环境要求是 Node.js 22 或更高版本和 FFmpeg。官方给出的 Agent 安装命令是:
npx skills add heygen-com/hyperframes
手动创建与渲染项目的基本命令是:
npx hyperframes init my-video
cd my-video
npx hyperframes preview
npx hyperframes render
开源免费不代表整条工作流零成本。语音转写、翻译、图像生成、TTS、云存储和 Agent 模型可能分别产生费用,本地渲染也会消耗设备时间。
Codex 和 HyperFrames 各自负责什么?
| 环节 | Codex / Agent | HyperFrames |
|---|---|---|
| 理解需求 | 阅读提示词、目标平台和品牌规则 | 不负责 |
| 读取素材 | 检查视频、音频、图片和项目文件 | 引用准备好的媒体 |
| 转录与分析 | 调用转录、脚本或命令,分析重点 | 不负责语言理解 |
| 剪辑规划 | 生成片段表、叙事顺序和设计方案 | 接收时间和画面结构 |
| 视觉制作 | 编写 HTML、CSS、动画和组件配置 | 预览并逐帧执行 |
| 渲染 | 运行 CLI、处理报错并检查产物 | 捕获帧、混音、编码 MP4 |
| 验收 | 调用 FFprobe、截图和检查脚本 | 提供 lint、inspect、preview 等能力 |
Codex 不是“内置视频剪辑器”,HyperFrames 也不是“自动理解视频的 AI”。案例能完成端到端流程,是因为 Agent 把多个本地工具和项目文件串在一起。
OpenAI 官方关于 Codex 自动化工作流的说明强调了三个原则:整理上下文、保留审批边界,以及把每次运行中的经验沉淀给下一次。官方 Shell 文档也提醒,能执行本地命令的 Agent 必须运行在受控环境中,并记录命令和输出。
从 17 分钟英文视频到 90 秒中文短片的完整流程
第一步:确认素材权利
原帖建议从 X、抖音和 YouTube 寻找热门视频并下载。这个步骤风险最高。
优先使用:
- 自己拍摄或拥有版权的视频;
- 客户书面授权你二次制作的素材;
- 明确允许商业改编的 Creative Commons 素材;
- 公共领域内容;
- 平台内置 Remix 功能及其许可范围内的内容。
不要把“公开可观看”理解为“可以下载、翻译和重新发布”。YouTube 官方说明指出,用户可以下载自己上传的视频,但不能通过该功能下载其他用户的视频;其他下载方式还需同时考虑平台条款与版权。
第二步:建立固定项目目录
video-project/
source/
transcript/
selects/
assets/
hyperframes/
review/
output/
rights/
rights/ 用来保存授权书、许可页面和音乐凭证。自动化越强,越需要明确素材来源,否则 Agent 只会更快地放大错误。
第三步:提取音频并转录
Agent 可以使用 FFmpeg 抽取音频,再调用本地 Whisper 或你批准的转录服务。输出应包含时间戳、说话人和不确定词,而不只是纯文本。
转录后先人工抽查:
- 人名、产品名和专业术语;
- 数字、价格、日期和单位;
- 反问、否定和讽刺;
- 背景音乐或多人同时说话的位置。
第四步:先做“事实摘要”,再做中文改写
把原片压缩成三个文件:
- 带时间戳的原文转录;
- 只包含原片事实的结构化摘要;
- 90 秒中文脚本草稿。
这三个文件不要合并。分层后,审阅者才能看出中文旁白是忠实转述、合理解释,还是凭空增加了原片没有的观点。
第五步:生成选段表和分镜
片段 A:00:45–01:02
用途:提出核心问题
保留理由:原作者直接说明痛点
中文旁白:……
画面处理:保留原声 / 静音 / 局部放大
来源权限:已确认
不要让模型只凭“最有传播力”选段。还要检查上下文是否完整,避免把原作者一句带前提的话剪成相反结论。
第六步:用 HyperFrames 制作字幕和动效
Agent 根据分镜创建 HTML Composition,加入:
- 原始视频片段;
- 中文字幕和关键词强调;
- 标题、数据卡和引用来源;
- 图片或屏幕截图;
- 受控转场和背景音乐;
- 平台安全区与字幕边距。
HyperFrames 的优势是所有元素都能检查和修改,不必依赖一条黑盒时间线。品牌颜色、字号、Logo 和动画规则也可以沉淀成复用模板。
第七步:自动检查不能只看“渲染成功”
至少检查:
- MP4 是否能正常播放;
- 时长、分辨率、帧率和音频编码;
- 字幕是否超出安全区;
- 中文旁白是否与画面事实一致;
- BGM 是否盖过人声;
- 外部链接、数字和专有名词是否准确;
- 是否存在版权、隐私或误导风险;
- 文章和视频中是否正确标注原始来源。
第八步:人工批准后再发布
Agent 可以自动生成多个版本,但默认不要让它直接发布。最终责任仍属于账号运营者,尤其是翻译改编、产品功效、投资、医疗和新闻内容。
可直接改写使用的安全提示词
请把 source/ 中的已授权英文长视频,制作成一条面向中国普通用户的 60–90 秒竖屏中文解说视频。
权限与事实边界:
1. 只使用 rights/ 中已确认授权的素材;未确认的内容不得进入成片。
2. 不新增原视频没有的事实、数据、观点或产品体验。
3. 保留每个结论对应的原片时间戳,遇到不确定转录要标记而不是猜测。
4. 不冒充原作者,不暗示与原作者存在合作。
工作流程:
1. 用 FFmpeg 提取音频并生成带时间戳转录。
2. 输出事实摘要和候选片段表,等待我确认。
3. 根据确认后的片段写 60–90 秒中文叙事,语言自然,不用夸张标题党。
4. 创建 1080×1920 HyperFrames 项目,加入中文字幕、标题、信息卡和适度动画。
5. 保留必要的原始画面上下文,并在结尾标注原作者与来源链接。
6. 运行 lint、预览、关键帧截图和 FFprobe 检查。
7. 先输出低码率 review.mp4;只有我批准后再渲染正式版。
交付:
- transcript.md
- facts.md
- selects.csv
- script-zh.md
- storyboard.md
- HyperFrames 工程
- review.mp4
- final.mp4
- rights-and-sources.md
提示词中最重要的不是“自动完成”,而是两个暂停点:选段确认与发布确认。
它能完全替代剪映吗?
取决于你的工作类型。
HyperFrames 更适合:
- 批量制作统一品牌风格的视频;
- 把文章、网页、PR 或数据变成动画解释;
- 自动生成多种画幅、语言和字幕版本;
- 让 Agent 检查、修改并重新渲染;
- 需要工程文件可审查、可复现的团队。
传统剪辑软件仍然更适合:
- 大量依赖手感的镜头微调;
- 复杂调色、降噪和声音设计;
- 现场快速拖拽试错;
- 非技术用户的日常剪辑;
- 需要成熟素材库、模板商店和移动端操作的场景。
最现实的组合不是“永远删除剪映”,而是让 Codex + HyperFrames 负责可模板化的 70%,人工编辑器处理高判断密度的 30%。比例会因项目而异。
真实成本不只是软件订阅
| 成本 | 可能发生在哪里 |
|---|---|
| Agent 模型 | Codex 订阅或 API 用量 |
| 转录 | 本地算力或云端语音识别 |
| 配音 | TTS、真人配音或声音授权 |
| 素材 | 图片、音乐、字体与视频许可 |
| 渲染 | 本地设备时间或云计算 |
| 人工 | 事实核验、脚本、审片和返工 |
| 风险 | Content ID、下架、退款或授权纠纷 |
HyperFrames 没有按次渲染许可费,不等于完整生产零成本。与剪映年费比较时,应把硬件、Agent、API 和人工时间一起算进去。
如何把这套流程变成可收费服务?
客户长视频切片
把客户自己的访谈、直播、课程或播客整理成多条竖屏短视频。客户购买的是选题、事实保真和稳定交付。
多语言内容版本
在取得原作者授权后,把同一套内容制作成中文、英文、日文等版本,保留术语表和审校流程。
SaaS 产品演示
从官网、录屏和产品文档生成更新视频、功能介绍和发布素材。HTML 动效特别适合 UI、代码和数据展示。
品牌视频模板系统
为团队建立字体、颜色、字幕、转场、信息卡和片尾组件,后续每条视频只替换内容数据。
卖点不要写“AI 帮你剪视频”,而应写成具体结果:每周交付多少条、多少语言、什么尺寸、多久返稿、包含几轮修改。
常见问题
Codex 能直接剪视频吗?
Codex 可以分析文件、编写项目、调用 Shell 和协调工具,但最终剪切、合成与编码仍由 FFmpeg、HyperFrames 等软件完成。
HyperFrames 是免费的吗?
官方仓库采用 Apache 2.0 许可证,没有按次渲染费用。Agent、转录、TTS、素材和计算资源仍可能收费。
Windows 能使用吗?
HyperFrames 核心依赖 Node.js、浏览器和 FFmpeg,具体 Agent Skill 或第三方插件可能有额外平台要求。安装前应运行官方诊断命令并查看当前文档。
可以直接下载热门视频重新剪吗?
不能把公开访问等同于获得版权。应使用自有、书面授权、公共领域、许可明确或平台 Remix 允许的素材。
翻译成中文就算原创吗?
不一定。翻译和改编通常仍涉及原作品权利;增加字幕、旁白和动画也不会自动解决版权问题。
Agent 生成的视频需要人工检查吗?
需要。至少检查事实、转录、片段上下文、字幕、素材权利、音频、品牌规范和最终编码。
为什么先生成 review.mp4?
低码率预览更快,便于在正式高分辨率渲染前发现脚本、字幕和画面问题,减少返工成本。
总结
Codex + HyperFrames 的真正变化,不是让每个人一键生成完美视频,而是把剪辑从一次性手工操作变成可记录、可检查、可重复运行的工程。
它尤其适合结构稳定的内容:长视频切片、课程摘要、产品演示、多语言版本和品牌化短视频。要让这套工作流长期赚钱,需要解决的也不是“提示词够不够神”,而是素材授权、事实准确、模板质量、人工验收和稳定交付。
参考资料
- HyperFrames 官方 GitHub 仓库
- OpenAI Developers:Codex 自动化重复工作
- OpenAI Developers:本地 Shell 工具与安全建议
- YouTube:Copyright on YouTube
- YouTube:可安全变现的内容与商业使用权