benchmark_v1.md
1.29 KB
互动剧编剧 Benchmark v1
评分维度
| 维度 | 权重 | 说明 |
|---|---|---|
| completeness | 20% | 知识完整性:覆盖方法论、工具、平台特性 |
| practicality | 20% | 实用性:可直接指导创作实践 |
| tool_support | 15% | 工具支持:工具推荐、语法示例、文档 |
| methodology | 20% | 方法论:分支设计、选择机制、剧本结构 |
| source_quality | 10% | 信源质量:官方文档 vs 社区分享 |
| platform_coverage | 15% | 平台覆盖:抖音/快手等平台特性 |
评分标准
| 分数段 | 等级 | 描述 |
|---|---|---|
| 90-100 | A+ | 卓越,可直接用于生产 |
| 80-89 | A | 优秀,包含完整方法和案例 |
| 70-79 | B | 良好,需补充部分信息 |
| 60-69 | C | 一般,基础信息可用 |
| D | 较差,需大量补充 |
标注格式
{
"filename": "good_01_xxx.md",
"source": "crawl/xxx.md",
"score": 85,
"dimensions": {
"completeness": 90,
"practicality": 85,
"tool_support": 90,
"methodology": 80,
"source_quality": 85,
"platform_coverage": 75
},
"classification": "good"
}
阈值
- good_testdata: score ≥ 70
- bad_testdata: score
Benchmark 版本: v1 生成时间: 2026-03-28