benchmark_v1.md
1.9 KB
竞品侦察 Benchmark v1
评分维度
| 维度 | 权重 | 说明 |
|---|---|---|
| 数据覆盖度 | 25% | 国内外互动剧App覆盖完整性 |
| 评价抓取能力 | 25% | iOS/Android商店评价获取能力 |
| 数据准确性 | 20% | 数据来源可信度 |
| 技术可行性 | 15% | 实现难度与成本 |
| 监控持续性 | 15% | 自动化监控能力 |
评分标准
1. 数据覆盖度 (25%)
| 分数 | 标准 |
|---|---|
| 90-100 | 覆盖中国+美国+日韩 TOP 20 App |
| 70-89 | 覆盖中国+美国 TOP 10 App |
| 50-69 | 仅覆盖单一市场 TOP 5 |
| 数据严重缺失 |
2. 评价抓取能力 (25%)
| 分数 | 标准 |
|---|---|
| 90-100 | 同时支持iOS RSS + Google Play完整抓取 |
| 70-89 | 支持iOS RSS或GP任一平台完整抓取 |
| 50-69 | 支持搜索但无法获取评价详情 |
| 无法获取评价数据 |
3. 数据准确性 (20%)
| 分数 | 标准 |
|---|---|
| 90-100 | 官方API一手数据,历史数据完整 |
| 70-89 | 官方API或可信第三方数据 |
| 50-69 | 爬虫数据,存在偏差 |
| 数据来源不明或过时 |
4. 技术可行性 (15%)
| 分数 | 标准 |
|---|---|
| 90-100 | 开源库成熟,文档完善,维护成本低 |
| 70-89 | 有方案但需定制开发 |
| 50-69 | 技术难度高,需持续维护 |
| 无法实现 |
5. 监控持续性 (15%)
| 分数 | 标准 |
|---|---|
| 90-100 | 支持Cron定时任务,自动告警 |
| 70-89 | 支持定时但需人工触发 |
| 50-69 | 仅支持手动抓取 |
| 无法持续监控 |
阈值定义
- score ≥ 70 → good_testdata (可作为训练数据)
- score → bad_testdata (需要改进)
行业基线
| 指标 | 基线值 |
|---|---|
| industry_avg_score | 75 |
| 数据覆盖率 | 80% |
| 评价抓取成功率 | 85% |
版本: v1 生成日期: 2026-03-30