从观测到发布的完整链路
线上观测产出轨迹,离线回归判定是否退化,发布检查按四类门槛放行,灰度验证后全量或回滚,线上失败回流为新用例。
CLOSED LOOP
线上观测
轨迹与失败样本
离线回归
按变更类型选子集
发布检查
四类门
灰度
按流量或任务族
观察退化信号
全量
或回滚
回滚
THE FOUR GATES
正确性 · 安全性 · 成本 · 时延
正确性:回归集通过率不低于基线,关键任务必须全过。
安全性:越权、注入、隐私三项有专门的用例集,任一失败即阻塞。
成本:单任务平均 Token 不超过基线的 1.2 倍,超过需说明理由。
时延:首词与总时长分别设上限,超限的改动只允许在非交互路径上线。
线上失败不是终点:每一条都要回流成新用例,否则同一类问题会反复出现。