SQL 改写 Benchmark 基线记录
分支文档快照 · 同步于 2026-09-09 · 来源:origin/summer-intern @ 9f4cdc5 · 原路径:docs/project-management/sql-rewrite-week1/benchmark-baseline-template.md。正文描述的是该分支的方案或进展,合入与验收状态以当前看板为准。
批次信息
| 字段 |
内容 |
| 批次编号 |
W1-BENCH-001 |
| 执行日期 |
2026-07-09 |
| 执行人 |
初级开发 |
| 数据库类型 |
分布式数据库 |
| 数据库实例 |
记录实例名 |
| SQL 总数 |
记录数量 |
| 结果 CSV |
workspace/sqls_rewrite_result.csv |
| 关键日志 |
workspace/batch_run.log |
核心指标
| 指标 |
数值 |
计算口径 |
| 端到端达标率 |
记录百分比 |
达标 SQL 数 / SQL 总数 |
| 流程成功率 |
记录百分比 |
完整跑完预期阶段的 SQL 数 / SQL 总数 |
| 格式合规率 |
记录百分比 |
合法模型输出数 / 模型输出总数 |
| 语义通过率 |
记录百分比 |
语义验证通过的改写数 / 已改写 SQL 数 |
| 有效改写率 |
记录百分比 |
流程成功、语义通过且性能提升达标的 SQL 数 / 流程成功 SQL 数 |
Top 失败模式
| 排名 |
失败模式 |
缺陷类型 |
影响 SQL 数 |
主要阶段 |
建议负责人 |
下一步动作 |
| 1 |
记录失败模式 |
SQL 能力 |
记录数量 |
Phase 2.5 |
资深开发 |
记录动作 |
| 2 |
记录失败模式 |
Agent 编排 |
记录数量 |
Phase 2-RETRY |
资深开发 |
记录动作 |
| 3 |
记录失败模式 |
模型输出 |
记录数量 |
Phase 2 |
资深开发 |
记录动作 |
与上一批次对比
| 指标 |
上一批 |
本批 |
变化 |
结论 |
| 端到端达标率 |
记录百分比 |
记录百分比 |
记录变化 |
记录结论 |
| 流程成功率 |
记录百分比 |
记录百分比 |
记录变化 |
记录结论 |
| 格式合规率 |
记录百分比 |
记录百分比 |
记录变化 |
记录结论 |
| 有效改写率 |
记录百分比 |
记录百分比 |
记录变化 |
记录结论 |
本批结论
- 是否建立可信基线:是 / 否
- 是否能区分 SQL 能力问题和 Agent/模型工程问题:是 / 否
- 本周最值得优先处理的问题:记录 Top 1 问题
- 需要 PM 决策的事项:记录具体事项