diff_report.md 1.57 KB

互动剧编剧 Benchmark v1 - 差异报告

版本信息

版本 日期 说明
v1 2026-03-28 初始版本,基于 hunter 数据标注

评分维度

维度 权重 来源说明
completeness 20% 知识完整性:覆盖方法论、工具、平台特性
practicality 20% 实用性:可直接指导创作实践
tool_support 15% 工具支持:工具推荐、语法示例、文档
methodology 20% 方法论:分支设计、选择机制、剧本结构
source_quality 10% 信源质量:官方文档 vs 社区分享
platform_coverage 15% 平台覆盖:抖音/快手等平台特性

标注结果汇总

来源文件 completeness practicality tool_support methodology source_quality platform_coverage 总分 分类
elite_01_twine.md 85 90 95 75 90 60 82.25 good
elite_02_ink.md 85 85 90 80 85 60 81 good
elite_03_renpy.md 80 85 85 75 80 65 78.5 good

统计

指标 值
good_testdata 3
bad_testdata 0
行业平均分 80.58

主要发现

优点

  • 工具类数据质量高(Twine/Ink/Ren'Py)
  • 官方文档完整,可信度高
  • 语法示例详尽

待改进

  • platform_coverage 普遍偏低(60-65分)
  • methodology 维度有提升空间(75-80分)
  • 缺乏中文学习资源

报告生成时间: 2026-03-28