19 Commits
Author SHA1 Message Date
xhgit 452e38e9f7 feat(ai): 净化层空隙填补——镜头之间不留黑场
实测 V3 成片逐帧 QC:规划了 12 个镜头、净化层拦截 4 个垃圾
镜头后,剩余镜头保持原位置,时间轴出现 [8-21] 和 [29-37]
两段黑场(8 帧抽 4 帧黑屏)。

净化层在重叠平移之后新增空隙填补:视频轨按顺序向左压实,
任何镜头之间出现空隙即前移(新增/旧片段同样处理,自动补
update 操作)。新增空隙填补回归测试。
2026-11-14 20:13:35 +08:00
xhgit 3e73b46005 fix(ai): 过滤黑屏警告卡与 OP/ED 区域;add 的源时间范围必须在已分析片段内
实测 V2 成片前半段:全黑帧、演职员表叠加的片头画面、黑屏警告
提示卡——模型从采样数据里挑到了这些高分垃圾段。

修改:
1. 规划数据过滤黑屏/警告/提示卡/敏感说明等描述(JUNK_CARD)
2. 长素材(>5 分钟)排除前 110 秒 OP 区与最后 120 秒 ED 区,
   短片不受影响
3. 提示词明确:in/out 必须取自片段列表中的 start/end
4. 净化层强制:素材已有分析数据时,add 的 in/out 必须与已分析
   片段相交,否则忽略该操作(防模型编造源时间范围)
5. 新增 OP/ED 区域过滤与范围约束测试
2026-11-14 20:07:11 +08:00
xhgit c92a807c87 fix(ai): 重叠平移挤开旧片段时补生成 update 操作
实测:新建片段插入旧时间轴间隙、把旧片段挤开时,净化层只在
模拟里移动了旧片段,没有生成对应 update 操作——模拟通过校验、
实际应用时旧片段仍在原位,applyOperations 报「视频片段重叠」。
现在挤开旧片段时自动补一条 update 操作,模拟与实装一致。
新增回归测试(旧片段被挤开必须生成 update)。
2026-11-14 18:36:41 +08:00
xhgit 90502dc27e fix(ai): 新建模式下规划数据不再携带旧时间轴
实测 V2 规划失败:fresh 模式提示词要求先 remove 重建,但数据里
仍带着旧时间轴(含重复片段),模型把注意力放在旧片段的
「重复与逻辑混乱」上,最终返回空方案。
新建模式下 clips 置空、timelineDuration 归零,模型只看到素材与
新要求;应用侧仍会自动补上 remove 全部旧片段的操作。
新增测试:fresh 数据无旧片段、modify 数据保留旧片段。
2026-11-14 18:01:52 +08:00
xhgit 286beb8ee5 fix(ai): 净化层去重同源片段,禁止重复使用相同 in/out 范围
实测混剪成片:模型把同一集同一个镜头(相同 mediaId+in+out)用了 3 次。
净化层现在按 mediaId+in+out(0.1s 粒度)去重,重复的 add 直接忽略并记录
备注;提示词同步增加「禁止重复使用同一个源片段」规则。
新增净化测试用例(同源同范围 add 去重)。
2026-11-14 17:54:21 +08:00
xhgit d96ef11fe2 fix(ai): 规划数据排除片头片尾卡并按描述去重,裁剪保底每素材 3 段
实测《无职转生》4 集分析后规划返回空方案,原因:
1. 片头标题画面/演职员表评分最高,占据了每素材有限的段数名额
2. 静态画面重复帧产生大量相同描述,挤掉有效镜头
3. 预算裁剪最低压到每素材 2 段,模型实际只看到 8 个片段

修改:标题/演职员类片段从数据中排除;同素材内相同描述去重;
裁剪保底每素材 3 段;提示词补充「含蓄镜头同样可以表达人物关系」。
新增测试断言标题卡排除。
2026-11-14 15:09:05 +08:00
xhgit de12d3ba9e fix(ai): 规划提示词补回用户要求——指令此前从未发送给模型
严重回归:PR #3 重写提示词时遗漏了「用户要求」段落,instruction 参数
从未写入提示词。模型只看到项目数据与规则,只能从对话历史里间接
推断用户意图,导致大量「未收到具体的中文剪辑要求」空方案。
本次把用户指令以独立段落写回提示词,并加测试断言指令必须出现。
2026-11-14 15:05:06 +08:00
xhgit 28904bffea feat(ai): 分析结果按素材指纹缓存,跨项目复用无需重新分析
- 视觉/技术分析结果持久化到 cache/analysis/<指纹>.json,
  导入同一素材时自动加载缓存分析,新项目无需重复分析
- 技术分析抽帧跳过已存在的帧文件,重复分析只做场景检测
- 分析完成(技术或视觉)后自动写入缓存
2026-11-14 13:33:36 +08:00
xhgit 60d7adcc1f fix(ai): 视觉能力测试容忍常见键名变体,失败时提示更换模型
实测 gemma4:latest 通过视觉测试时返回的 JSON 缺少 color 字段,
用户被「图片测试返回格式错误」卡住,素材永远无法执行 AI 分析。
现在兼容 color / main_color / colour / 主要颜色 / 颜色 / 主色 等键名,
仍失败时明确提示更换视觉能力更强的模型。
2026-11-14 12:48:30 +08:00
xhgit af1791fc76 fix(ai): 裁剪不再把未分析素材裁空;无素材时给出导入提示
- 回归:项目无已分析片段且时间轴为空时,数据预算裁剪会把素材列表
  全部裁掉,模型误报「media 列表为空」。裁剪后若为空则保留素材列表,
  并改为裁 name 字段而非时长
- 项目确实没有素材时,提示词明确要求返回「先导入素材」的说明,
  与「素材未分析」的场景区分开
- 新增长对话+大量未分析素材的回归测试
2026-11-14 12:45:35 +08:00
xhgit d94e3eadfa feat(ai): 对话历史先压缩再发送,长会话关键意图不丢失
- buildHistoryBlock 把聊天历史压成「用户要求 + 助手执行摘要」的结构化记录
- 按预算逐级压缩:先缩短单条(120/80/50/30/20/15/10 字),再减少保留轮数(16→12→8→5→4),而不是简单截断
- 本地模型历史预算为总预算的 35%,云端更宽裕
- 规划时携带最近 16 轮原始消息(由压缩器决定保留量)
- 有音频素材且用户要求配乐/配音时,应添加 audio 轨并调整 volume
- 新增长对话压缩测试(12 轮历史不撑爆预算且末轮内容保留)
2026-11-14 12:24:42 +08:00
xhgit 6221828da2 fix(ai): 规划请求带上聊天历史;素材未分析时明确拦截;模型不存在提示修复办法
- 规划提示词携带最近 6 轮对话记录:解决用户说「把刚才这个删掉/重新剪」时
  模型看不到上下文、反复返回「未收到具体要求」空方案的问题
- 明确规则:有对话记录时不得以未收到要求为由返回空方案;指代必须结合记录理解
- 素材全部未分析时返回空方案并在摘要提示先执行「AI 分析」,
  禁止凭空假设内容或把整段素材放上时间轴
- 扩充新建意图识别:重新/重做/重剪/全部删掉/清空时间轴 均触发先清空再重建
- 模型不存在(404 not found)等常见错误附带下载/检查提示
- 新增 2 个测试:对话历史注入、未分析素材拦截、模型不存在提示
2026-11-14 12:22:17 +08:00
xhgit 513edf664b Merge pull request 'feat(ai): 按参数组接只选已分析素材并轮转保多样性;规划流程识别新建/修改意图' (#5) from feat/ai-assemble-plan-flow into main
Reviewed-on: http://git.xhmcl.com/xhgit/AI-cut/pulls/5
2026-11-14 03:24:12 +00:00
xhgit 8d83cee7c5 Merge pull request 'feat(ai): 新增 AI 操作净化层——越界截断、重叠平移、无效操作忽略' (#4) from feat/ai-op-sanitize into main
Reviewed-on: http://git.xhmcl.com/xhgit/AI-cut/pulls/4
2026-11-14 03:23:57 +00:00
xhgit 27faeb8e8a feat(ai): 按参数组接只选已分析素材并轮转保多样性;规划流程识别新建/修改意图
按参数组接(assemble):
- 存在已分析(有评分)素材时只使用这些素材,未分析素材不再乱入
- 按素材轮转取用镜头,避免单一素材堆砌,每素材数量有上限
- 摘要说明镜头来源数量与未使用素材,未分析时明确提示先做 AI 分析

规划流程(plan handler):
- 识别新建意图(如「制作一个 45 秒旅行视频」):先 remove 现有全部片段再重建,避免旧片段与新材料混在一起
- 接入 sanitizeOperations 净化层与 3 次修正重试,方案摘要显示自动修正数量
- 失败时在聊天中显示原因(此前只弹 toast)
- 本地模型提示词预算 3800 字符、云端 9000 字符;用户指令上限 3000 字符
2026-11-14 11:21:47 +08:00
xhgit aa17701241 feat(ai): 新增 AI 操作净化层——越界截断、重叠平移、无效操作忽略
模型输出中个别小错误(数值越界、引用不存在的素材/片段、视频轨重叠)不再导致整个剪辑方案被校验拒绝:
- add:截断越界数值(speed/volume/fade/色值/字号等),引用不存在或类型不符的素材时忽略该操作
- update:禁止改 id/mediaId/track,字段逐项截断,入点出点矛盾时忽略
- remove:引用不存在片段时忽略
- 视频轨重叠自动右移后置片段,而不是整体报错
- 返回 notes 记录所有自动修正,供方案摘要展示
2026-11-14 11:21:12 +08:00
xhgit 7d9a7a777e feat(ai): 规划提示词重写——按评分选材、数据预算控制与新建/修改模式
- 只发送有评分且非占位描述的片段,按 score 排序,每素材最多 8 段、全局最多 60 段
- 新增选材规则:优先高分片段、按主题匹配、多素材分散、禁止无关素材与编造音乐
- 提示词数据按预算逐级裁剪(本地模型 3800 字符),避免超出上下文窗口报错
- 区分新建创作与局部修改模式,新建时先清空再重建,修改时只动提及字段
- 明确数值范围与时间轴规则(不重叠、时长=(out-in)/speed、图片最长 60 秒)
2026-11-14 11:20:38 +08:00
xhgit b865f2979d fix(ai): 模型返回容错解析与失败自动重试,减少 AI 剪辑助手报错
- parseJson 支持思考标签、代码块、嵌套花括号与字符串内花括号的平衡扫描
- JSON 解析失败时自动重试一次:取消强制 format 并追加严格输出提示
- Anthropic 协议补齐 temperature=0.2,稳定输出
- 上下文超长等错误附带可操作的修复提示
2026-11-14 11:13:06 +08:00
xhgit b51ef85dbd feat: 开源轻映 AI 桌面剪辑工作台及抽帧复核功能 2026-11-14 09:26:34 +08:00