plan.md
1.27 KB
Idearuncreate FDE Pipeline Plan
将大任务分解为子任务,分配给下级 Agent,并定期检查进度。
| # | 子任务 | 责任人 | 状态 | 上次检查 | 备注 |
|---|---|---|---|---|---|
| 1 | Phase 1: Hunt 调研 | Hunter | ✅ 完成 | 2026-04-13 | 已有 hunt 三件套 |
| 2 | Phase 2: Digest 重新生成测试集 | Digester | 🔄 待 dispatch | - | 旧测试集含故意失败场景,需替换为真实场景 |
| 3 | Phase 3: Evolve | Evolver | ⬚ 待开始 | - | 基于新测试集 |
| 4 | Phase 4: Deploy | Innovator | ⬚ 待开始 | - | 达标后部署 |
当前问题
Evolve 阶段完成后发现测试集设计缺陷:
- 10 个测试用例中有 9 个故意失败场景(缺图、无i18n、偏移异常)
- 唯一理想 case (test_036) 得分 59/60 = 98.33
- 基线分数 58.33 远低于目标 95 分
解决方案:
- 重新回到 Digest 阶段,生成合理的测试集:
- 理想场景 ≥5 个(预期高分)
- 典型场景 ≥3 个
- 困难场景(可解决)≥2 个
- 不应包含故意失败的场景(会让完美 SKILL 也失败)
验收标准
- 新测试集 avg 预期 ≥80%(困难用例预期分需合理)
- 测试集应为真实可解决场景
- 理想用例应达到 ≥90% 预期分