视频逆向拆解:分镜、提示词与复刻方案
逐镜头拆解参考视频的画面制作、剪辑、声音和素材需求。rea-video 结合命令行工具与 Agent 技能,生成带关键帧和证据的报告,并整理提示词与复刻方案。
可用于 Claude Code · Codex
前置要求
- Python 3.10+
- ffmpeg / ffprobe
- Git
概览
你会得到什么
- HTML/Markdown 报告、镜头关键帧拼图、分镜总览、音频分析,以及字幕和包装图层的时间信息。
- 逐镜头证据、制作方式判断与复刻路线,可由能看图的助手复核,也可选接视频模型辅助分析。
- 分别整理实拍、AI 生成、代码动画与自备素材的制作计划,可选接入 capsule-cinema 并拼回时间线。
教程
从参考视频整理制作方案
看到一条喜欢的视频,你可能分不清哪些镜头需要拍摄、哪些可以生成,字幕和音效又该放在哪里。rea-video 先拆镜头、提取关键帧和声音信息,再让能看图的助手复核,整理成带证据的报告与复刻方案。
它主要交付分析材料和制作计划。真正制作时,实拍需要你的素材,代码动画交给开发工具,AI 视频可另接 capsule-cinema 生成。
与 Cook、Stageshow 怎么选
- Cook围绕参考图或视频反复制作、对比和改进作品,侧重制作迭代。
- Stageshow用 React 重建产品界面和鼠标操作,侧重产品演示。
- rea-video 先研究参考视频的分镜、拍法、剪辑、声音与素材,再决定每一部分怎样制作。
它借鉴了软件逆向工具 REA 的证据思路,是独立项目,不需要先安装 REA。
观察分镜与换素材效果
页面上有两段官方媒体:
| 媒体 | 看什么 |
|---|---|
| 换装四路对照,约 12 秒 | 从左到右是原片、OiiOii 复刻、作者复刻、汉服书房版;比较人物、衣服和场景变化,以及动作和切换节奏的保留 |
| 混合制作方式的短片,约 19 秒 | AI 角色、代码界面和真实录屏交替出现;同一条视频并不只有一种制作方式 |
四路对照由拆解结果结合 capsule-cinema 和生成模型制作,不是 rea-video 单独分析后直接导出的效果。
打开官方混合制作短片报告,对照视频观察镜头表、生成单元与素材清单。作者报告记录了 10 个镜头,并把画面分为代码/模板与 AI 视频。
仓库里的样片经过压缩,实际文件为 480×854;报告记录的是原始分析输入 1080×1920。用样片练习时,关注报告结构与复核方法,分析数值可能不同。
安装技能与配套命令行工具
准备 Python 3.10 或更新版本、Git、ffmpeg 和 ffprobe。本教程使用 Claude Code 或 Codex,并让助手读取图片完成复核;首次练习不需要额外的视频模型密钥。
- 在终端中运行:
# 下载仓库,并安装 CLI 与技能
git clone https://github.com/JuneYaooo/rea-video
cd rea-video
bash scripts/install_skill.sh
rea-video --help
安装脚本会安装 Python 依赖,并把技能链接到已存在的 ~/.claude、~/.codex 或 ~/.agents 目录。遇到系统 Python 不允许直接安装时,它会尝试 pipx 或仓库内 .venv。安装使用仓库路径,之后保留这个目录。
- 确认终端能显示
rea-video --help的命令列表;如果脚本提示~/.local/bin不在 PATH,按提示加入后重新打开终端。 - 重新打开 AI 编程工具,让它读取 rea-video 技能。若工具启动环境与终端不同,把能运行的 CLI 路径一并提供。
音频分离在首次使用时会下载约 67 MB 的模型。外部 VLM 是可选的多模态模型服务,能直接看视频和听音轨;需要时再按配置说明接入。
完成第一次拆解并检查报告
- 先用仓库自带的混合制作方式的样片熟悉流程。仍在仓库目录的终端执行:
# 用中文输出报告;本轮不调用外部 VLM
rea-video decompose docs/cases/videos/dual_role.mp4 -o out/dual-role --lang zh
rea-video summary out/dual-role/breakdown.json
- 在浏览器打开
out/dual-role/report.html。查看storyboard.jpg的镜头顺序,以及报告中的制作方式、剪辑包装、声音和素材清单。shots/保存每镜的首帧、中间帧和尾帧拼图;stems/保存分离后的声音。 - 把输出目录交给能看图的 AI 编程助手,发送下面的本站练习请求:
使用 rea-video 技能复核 [out/dual-role 的绝对路径],用中文更新报告。
先看分镜总览,再查看低置信镜头的关键帧拼图,独立判断制作方式。
运行 review 生成复核任务,在 review_answers.json 中填写证据和判断。
没有看过的镜头不要补答案;无法确认的声音来源保留待确认。
把答案通过 apply-review 并入,再读取 summary,解释主要改判和复刻路线。
本轮只分析,不生成视频。
助手会使用下面这组官方命令:
rea-video review out/dual-role
# 助手查看 review_tasks.json 中的图片,并填写 review_answers.json 后执行
rea-video apply-review out/dual-role --by agent
rea-video summary out/dual-role/breakdown.json
检查更新后的报告是否出现复核证据,以及 AI、实拍、代码等分类的理由。判断制作方式时,检查形变、闪烁和几何稳定性等线索。复核后应使用新的 summary,而不是修改前的比例。
不开外部 VLM 时,能看图的助手可以补上静帧判断;没有听过音轨就不能据此确认人声、配乐或音效的来源。需要分析声音时,试听分离音轨,或接入支持音视频的模型。
先规划一个镜头的替换
在整片复刻前,先选一个镜头说明保留和替换的内容。下列请求由本站编写:
读取更新后的拆解报告,只规划镜头 [编号] 的商品替换。
商品参考图:[图片绝对路径]。
保留原镜头的机位、动作方向、时长和转场方式,改用我的商品外观。
区分必须补拍的真实素材、可生成的画面和后期字幕。
给出所需素材、提示词及该镜头的预览方案,先不调用付费生成。
查看方案时,核对商品外观有没有对应参考图,以及镜头运动能否与前后镜头衔接。再做一次局部调整:“只改商品颜色,保留人物、场景和镜头时长”,练习把修改限制在一个明确元素。
字幕、花字和贴纸作为后期包装单独制作,不把它们混进生成画面。换文案后,应按新台词重新安排文字与音效位置。
要生成或合成时再继续
AI 镜头的生成需要另装 capsule-cinema,配置它的 Python 环境和模型服务。先让助手按官方流程生成任务,运行 rea-video remake-run [jobs.json 路径] --dry-run 查看任务和费用,确认后再执行。
报告可把多个镜头规划成一个生成单元;当前自动执行仍是每镜调用一次,不能把报告中的合并规划当成实际调用次数。
自己拍摄或生成好镜头后,也可用 rea-video assemble 拼回原时间线。未提供替换素材的镜头仍用原片占位,声音默认沿用原片;先按合成日志补齐缺口,再作为自己的完整作品交付。参数与素材映射见官方复刻说明。
换成自己的参考视频
样片跑通后,把下面模板中的路径和目标换成自己的资料:
用 rea-video 分析:[本地视频绝对路径]。
报告语言:中文。
用途:[研究拍法/改成自己的商品广告/重建代码动画]。
重点分析:[分镜、镜头运动、字幕、声音等]。
要保留:[节奏、构图或具体动作]。
要替换:[人物、商品、场景或文案]。
已有素材:[图片、录屏、实拍和声音的路径]。
先输出并复核报告,再列出实拍、生成和代码制作计划,等我选定首个镜头。
优先从短片或一个片段开始。先确认一段的制作路线和素材,再扩展整片,便于判断哪些效果值得保留、哪些需要改用自己的拍摄或实现方式。