benchmark_v1.md 1.29 KB

互动剧编剧 Benchmark v1

评分维度

维度 权重 说明
completeness 20% 知识完整性:覆盖方法论、工具、平台特性
practicality 20% 实用性:可直接指导创作实践
tool_support 15% 工具支持:工具推荐、语法示例、文档
methodology 20% 方法论:分支设计、选择机制、剧本结构
source_quality 10% 信源质量:官方文档 vs 社区分享
platform_coverage 15% 平台覆盖:抖音/快手等平台特性

评分标准

分数段 等级 描述
90-100 A+ 卓越,可直接用于生产
80-89 A 优秀,包含完整方法和案例
70-79 B 良好,需补充部分信息
60-69 C 一般,基础信息可用
D 较差,需大量补充

标注格式

{
  "filename": "good_01_xxx.md",
  "source": "crawl/xxx.md",
  "score": 85,
  "dimensions": {
    "completeness": 90,
    "practicality": 85,
    "tool_support": 90,
    "methodology": 80,
    "source_quality": 85,
    "platform_coverage": 75
  },
  "classification": "good"
}

阈值

  • good_testdata: score ≥ 70
  • bad_testdata: score

Benchmark 版本: v1 生成时间: 2026-03-28