crawl_config.json
3.58 KB
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
88
89
90
91
92
93
94
95
96
97
98
99
100
101
102
103
104
105
106
107
{
"skill_name": "researcher",
"version": "1.0.0",
"description": "深度研究员技能配置 - 支持深度研究和剧本创作",
"输入源": {
"数据源类型": ["学术论文", "行业报告", "新闻资讯", "数据库", "专家访谈"],
"获取方式": ["API调用", "网页爬取", "RSS订阅", "数据库查询"],
"推荐资源": [
"Google Scholar - 学术论文搜索",
"36氪 - 科技行业资讯",
"艾瑞咨询 - 行业研究报告",
"QuestMobile - 移动互联网数据",
"Statista - 统计数据平台"
]
},
"研究流程": {
"步骤1_问题定义": {
"方法": ["头脑风暴", "文献回顾", "利益相关者访谈"],
"输出": "研究问题陈述"
},
"步骤2_信息收集": {
"方法": ["系统文献综述", "网络爬虫采集", "问卷调查", "深度访谈"],
"输出": "原始数据集"
},
"步骤3_信息验证": {
"方法": ["交叉验证", "专家审核", "数据完整性检查"],
"输出": "可信数据集"
},
"步骤4_深度分析": {
"方法": ["统计分析", "模式识别", "因果分析", "趋势预测"],
"输出": "分析洞见"
},
"步骤5_内容创作": {
"方法": ["报告撰写", "剧本创作", "可视化设计"],
"输出": "最终产出"
}
},
"输出格式": {
"研究报告": {
"结构": ["执行摘要", "研究背景", "方法论", "主要发现", "建议与结论", "附录"],
"格式": ["Markdown", "PDF", "PPT"]
},
"剧本创作": {
"结构": ["故事概念", "人物档案", "场景大纲", "完整剧本"],
"格式": ["专业剧本格式(Fountain)", "PDF", "Final Draft"]
},
"数据分析": {
"格式": ["JSON", "CSV", "Excel"],
"可视化": ["图表", "信息图", "Dashboard"]
}
},
"质量标准": {
"严谨性": {
"要求": "所有数据需有明确来源citation,时间戳,交叉验证",
"优先级": "P0"
},
"完整性": {
"要求": "研究需覆盖所有关键维度,无重大遗漏",
"优先级": "P1"
},
"创新性": {
"要求": "提供独特视角和新颖洞见",
"优先级": "P2"
},
"可执行性": {
"要求": "建议和方案需具体可实施",
"优先级": "P1"
}
},
"能力维度定义": {
"维度1_信息采集与验证": {
"描述": "多源信息收集和可信度评估能力",
"关键技能": ["网络爬虫", "数据清洗", "来源评估", "信息整合"]
},
"维度2_深度分析与洞见": {
"描述": "从复杂数据中发现规律和洞见的能力",
"关键技能": ["统计分析", "模式识别", "因果推理", "趋势预测"]
},
"维度3_内容创作与表达": {
"描述": "将研究成果转化为吸引人内容的能力",
"关键技能": ["报告撰写", "剧本创作", "故事化表达", "视觉呈现"]
},
"维度4_剧本创作方法论": {
"描述": "专业剧本写作能力",
"关键技能": ["故事结构设计", "人物塑造", "对白写作", "场景构建"]
}
},
"爬虫配置": {
"频率限制": "单站点请求间隔 >= 2秒",
"并发限制": "最多3个并发请求",
"重试策略": "失败重试3次,间隔递增",
"User_Agent": "Mozilla/5.0 (compatible; ResearcherBot/1.0)"
},
"验收标准": {
"研究维度": "至少定义 3+ 研究维度",
"剧本创作": "包含剧本创作方法论",
"配置完整性": "提供可执行的配置",
"数据追溯": "所有数据包含 source_url 和 crawl_time"
}
}