返回 GitHub 雷达在 GitHub 打开
unclecode/crawl4ai
42 天前首次出现未被群岛收录1. Crawl4AI 是一个将任意网页自动转换为干净、结构化 Markdown 格式的开源爬虫,专为大语言模型(LLM)、RAG 系统和数据管道设计。 2. 项目基于 Python 构建,通过异步浏览器池、智能缓存、自适应页面解析和 CLI/Docker 双重部署实现高效提取。 3. 拥有超 69k 星的高人气,支持深度爬取、会话保持和零密钥部署,适用于大规模 LLM 数据采集与知识检索增强场景。
Python创建于 2024 年 5 月最近提交 2026 年 7 月
累计 Star
76.0k
近 7 日新增
+694
近 30 日新增
+5,267
Fork
7,849
Star 趋势
共 18 个采集点 · 近 30 日 +5,2672026-06-232026-08-03
项目介绍
由 AI 摘自仓库 README1. Crawl4AI 是一个将任意网页自动转换为干净、结构化 Markdown 格式的开源爬虫,专为大语言模型(LLM)、RAG 系统和数据管道设计。
2. 项目基于 Python 构建,通过异步浏览器池、智能缓存、自适应页面解析和 CLI/Docker 双重部署实现高效提取。
3. 拥有超 69k 星的高人气,支持深度爬取、会话保持和零密钥部署,适用于大规模 LLM 数据采集与知识检索增强场景。
仓库信息
来自雷达
该项目由雷达自动扫描 GitHub 发现,含 Star 增速、提交活跃度与分类标签,中文摘要由 AI 生成。