unclecode/crawl4ai
面向 LLM 的异步爬虫,输出干净 Markdown,适合做 RAG 语料。
项目速览
- 星标
- 87,019
- Fork
- 9,060
- 主语言
- Python
- 开源许可证
- Apache-2.0
- 最近更新
- 2026-11-04(3 天前)
- 创建时间
- 2024-05-09
- 开放 Issue
- 311
- 所属分类
- 数据科学
crawl4ai 是什么
crawl4ai 是 unclecode 在 GitHub 上维护的开源项目,属于「数据科学」方向。面向 LLM 的异步爬虫,输出干净 Markdown,适合做 RAG 语料。目前该项目累计获得 87,019 个星标、9,060 次 Fork,主语言为 Python,采用 Apache-2.0 许可证,最近一次代码提交在 2026-11-04。
适合什么场景
如果你正在为「数据科学」方向寻找现成方案,crawl4ai 是值得放进候选清单的一个。判断它是否合适,建议重点看三件事: 仓库最近的提交频率与 Issue 响应速度、许可证是否与你的使用方式兼容、以及是否已有同类项目能覆盖你的需求。 下面的「同类项目」列出了同分类下的其他选择,可以直接横向对比星标、语言与许可证。
技术标签
使用前请确认
本站只提供介绍与索引,不托管代码、镜像或二进制文件。项目的实际行为、许可证条款与安全状况请以 GitHub 仓库为准; 商用前建议完整阅读 LICENSE 文件,并确认依赖项是否存在额外的授权限制。