
GitHub 收藏203.3K近 7 天 +2.3K
代码最近更新2026 年 11 月 19 日
许可证开源 · AGPL-3.0
要不要花钱免费
能搜索全网、批量抓取网页与文档,并让 AI 自动检索收集数据。适合需要给 AI 喂网络资料的开发者。可以通过官方云服务或自己部署,在网页演练场试用或写代码调用。
用起来难吗要写代码在哪用官方云服务自己部署网页命令行能用的模型说明里没点名
能做什么
- 抓取网页并转为大模型可用格式
- 搜索网页并获取结果的全文内容
- 解析文档并提取为排版好的文字
- 爬取整站或快速列出全站链接
- 描述需求让 AI 自动寻找抓取数据
怎么开始
- 需要会写代码,先在官网注册账号获取接口密钥。
- 在网页演练场测试,或用命令行与代码库发起抓取。
- 把抓取结果直接喂给能自己动手办事的 AI 使用。
选它,如果你……
- 你想把整个网站或特定网页转成大模型好懂的内容。
- 你希望通过一句话让 AI 自动在网上搜索并收集信息。
- 你想在自己的程序里避开防爬限制并批量抓取网页。
别选,如果你……
- 你不会写代码,只想找个现成点击就能用的抓取软件。
怎么用
代码开源,可以免费下载使用。
多少钱、在哪买
免费使用。
看看它的样子
综合评价
一般更新放缓或问题处理差
- 更新很活跃近 90 天改代码 774 次;最近一次发版是 153 天前(v2.11.0)
- 问题处理差近 90 天新开 85 个问题,解决了 33 个,一般 92.6 天解决;外部提交的修改合进 732 个,待处理 699 个
- 用的人很多GitHub 收藏 20.3 万,近 7 天新增 2,325;169 人参与开发
- 用户口碑暂不计用户评价满 5 条后才算进来
提醒许可证较严:拿它对外提供服务,改过的代码也要公开
数字取自 GitHub 的公开记录(2026/11/19), 用户评价来自本页口碑。自己核对:项目主页、问题、外部提交的修改、发版记录。
怎么评的
只看公开、能核对的数据,不打分数,只给四档结论,每一项的依据都写在旁边。
- 更新:近 90 天改了多少次代码、最近一次发版是哪天。7 天内有改动并且改得多或常发版,算「很活跃」;30 天内有改动算「活跃」;半年内算「放缓」;半年以上没动或者已经归档,算「停更」。
- 问题处理:近 90 天新开的问题解决了几成、一般几天解决、外部提交的修改积压了多少。解决八成以上、一般一周内解决、积压不比合进去的多,算「好」;解决不到一半算「差」;其余算「一般」。新问题不到 10 个的不评。
- 用的人:GitHub 收藏 5 万以上算很多,1 万以上算多,1 千以上算一般。旁边写近 7 天新增多少、多少人参与开发。
- 用户口碑:用户评价满 5 条才算进来(注册不满 7 天的账号不算);平均分在 2.5 分及以下,总评降一档。
- 总评四档:还在更新、问题处理好、用的人多 → 推荐;还在更新 → 不错;更新放缓或问题处理差 → 一般;半年以上没更新 → 谨慎。许可证有附加条件、商用受限的,单独提醒,不影响总评。
- 收费软件(ChatGPT、Cursor 这类)没有公开的问题记录,就看 App Store:最近一次更新在 30 天内算「活跃」,半年内算「放缓」,半年以上算「停更」;打分人数 10 万以上算很多,1 万以上算多,1 千以上算一般;评分 4 分以上算好,2.5 分及以下算差,打分不到 100 人不评。再加上用户评价。
收藏数能刷,所以只占一项;更新和问题处理很难刷。数据每天更新,超过两周没更新的不评。
最近更新和热度
- v2.11.0
新增学术科研索引,支持免 key 调用主要接口与自动隐私脱敏
- v2.10
新增本地文档解析接口,支持无外连的锁定模式与网页直接提问
- v2.9.0
新增交互接口支持在网页点击填表,并加入正文净化与直接问答
GitHub 收藏
203,339 次净增 +9,8022026/10/21—2026/11/192026/11/19 · 203,339 次
查看每日记录
| 日期 | GitHub 收藏(次) |
|---|---|
| 2026/10/21 | 193,537 |
| 2026/10/22 | 193,986 |
| 2026/10/23 | 194,372 |
| 2026/10/24 | 194,740 |
| 2026/10/25 | 195,087 |
| 2026/10/26 | 195,389 |
| 2026/10/27 | 195,756 |
| 2026/10/28 | 196,145 |
| 2026/10/29 | 196,487 |
| 2026/10/30 | 196,813 |
| 2026/10/31 | 197,168 |
| 2026/11/01 | 197,459 |
| 2026/11/02 | 197,730 |
| 2026/11/03 | 198,074 |
| 2026/11/04 | 198,384 |
| 2026/11/05 | 198,736 |
| 2026/11/06 | 199,019 |
| 2026/11/07 | 199,318 |
| 2026/11/08 | 199,572 |
| 2026/11/09 | 199,877 |
| 2026/11/10 | 200,241 |
| 2026/11/11 | 200,627 |
| 2026/11/12 | 201,014 |
| 2026/11/13 | 201,331 |
| 2026/11/14 | 201,617 |
| 2026/11/15 | 201,856 |
| 2026/11/16 | 202,120 |
| 2026/11/17 | 202,416 |
| 2026/11/18 | 202,697 |
| 2026/11/19 | 203,339 |
用户口碑
还没有人点评。用过的话,写下第一条真实体验,帮后来的人少踩坑。
数据来源:GitHub,每天更新,更新时间 2026 年 11 月 19 日。 信息有误?告诉我们。
发布软件评论