tools.md
1023 Bytes
工具使用备注
数据采集方法
- 优先使用各平台官方 API
- 遵守平台的速率限制和robots协议
- 必要时使用网页爬取(需处理反爬机制)
已适配平台
- 微博热搜榜:https://weibo.com/ajax/statuses/hot_redering
- 百度热榜:https://top.baidu.com/board
- 抖音热榜:https://www.douyin.com/aweme/v1/web/hot/search
- 快手热榜:https://www.kuaishou.com/short-video/feed
- 小红书:https://www.xiaohongshu.com/api/sns/web/v1/search/notes
- 知乎:https://www.zhihu.com/api/v4/answers
- B站:https://api.bilibili.com/x/web-interface/popular
安全规则
- 不要在日志中输出 API Key
- 不要在 memory 中存储密码
- API Token 使用 env 变量, 不要硬编码
文件操作
- 所有自主创建的文件仅限在 workspace/ 内操作
- 趋势数据保存在 workspace/trends/ 目录
数据处理
- 采集的数据需进行去重、清洗、分类
- 每个数据点必须标注 timestamp 和 source
- 确保数据格式标准化统一