深度GIT开源

unclecode/crawl4ai

面向 LLM 的异步爬虫,输出干净 Markdown,适合做 RAG 语料。

项目速览

星标
87,019
Fork
9,060
主语言
Python
开源许可证
Apache-2.0
最近更新
2026-11-04(3 天前)
创建时间
2024-05-09
开放 Issue
311
所属分类
数据科学

crawl4ai 是什么

crawl4ai 是 unclecode 在 GitHub 上维护的开源项目,属于「数据科学」方向。面向 LLM 的异步爬虫,输出干净 Markdown,适合做 RAG 语料。目前该项目累计获得 87,019 个星标、9,060 次 Fork,主语言为 Python,采用 Apache-2.0 许可证,最近一次代码提交在 2026-11-04。

适合什么场景

如果你正在为「数据科学」方向寻找现成方案,crawl4ai 是值得放进候选清单的一个。判断它是否合适,建议重点看三件事: 仓库最近的提交频率与 Issue 响应速度、许可证是否与你的使用方式兼容、以及是否已有同类项目能覆盖你的需求。 下面的「同类项目」列出了同分类下的其他选择,可以直接横向对比星标、语言与许可证。

技术标签

使用前请确认

本站只提供介绍与索引,不托管代码、镜像或二进制文件。项目的实际行为、许可证条款与安全状况请以 GitHub 仓库为准; 商用前建议完整阅读 LICENSE 文件,并确认依赖项是否存在额外的授权限制。