docs: add recommended fetch intervals per parser
This commit is contained in:
parent
fce2d78cfc
commit
0f54c24987
17
README.md
17
README.md
@ -141,6 +141,23 @@ cd $SAGE_ROOT && python load_path.py
|
||||
| `regex` | 非结构化文本 | `item_regex` (命名捕获组) + `field_map` |
|
||||
| `rss` | RSS/Atom feed | 自动解析,无需额外配置 |
|
||||
|
||||
## 抓取频率建议
|
||||
|
||||
| 解析器 | 推荐间隔 | 原因 |
|
||||
|---------|:---:|------|
|
||||
| `weibo_hot` | 5-10 分钟 | 热搜榜实时变动 |
|
||||
| `zhihu_hot` | 10-15 分钟 | 热榜更新较快 |
|
||||
| `baidu_hot` | 10-15 分钟 | 同知乎 |
|
||||
| `toutiao_hot` | 15-20 分钟 | 新闻类更新稍慢 |
|
||||
| `bilibili_hot` | 30 分钟 | 视频热度积累需时间 |
|
||||
| `36kr_hot` | 30-60 分钟 | 一天几十条 |
|
||||
| `github_trending` | 2-4 小时 | 限速 60次/h |
|
||||
| `hackernews` | 15-30 分钟 | 首页排序变化频繁 |
|
||||
| `v2ex_hot` | 15-30 分钟 | 社区帖子更新快 |
|
||||
| `rsshub` | 取决于源 | RSS 源自身有间隔 |
|
||||
|
||||
默认 30 分钟是安全的——7 天半衰期模型下远远小于衰减窗口。
|
||||
|
||||
## 状态分类逻辑
|
||||
|
||||
```
|
||||
|
||||
Loading…
x
Reference in New Issue
Block a user