Crawl4AI
Crawl4AI 是一款开源、对 LLM 友好的极速网页爬虫与抓取器,专为 LLM、AI 智能体和数据管道提供 AI 就绪的网络爬行与数据提取:生成干净 Markdown 直接适配 RAG 管道或流入 LLM,支持 CSS/XPath/LLM 结构化提取、细粒度浏览器控制(钩子/代理/隐身/会话复用)、并行爬行与实时提取,并提供可导入 Claude/Cursor 等编码助手的技能包;核心库完全开源、无需 API 密钥、无付费墙,Cloud API 即将推出。
★
★
★
★
★
8.6
/10
免费
✓ 免费版
开源
价格模式
免费
价格区间
核心库完全开源免费,无强制 API 密钥、无付费墙;Cloud API(大规模网页提取)处于封闭 Beta,商业化定价未公布。
是否开源
是
🌏 中国可用性与平替
✅ 中国可直接使用
该工具在中国大陆可直接访问使用,无需特殊手段。
国内平替(同类 · 中国可用)
Dify
开源的LLM应用开发平台
OpenHands
自主编码的AI软件工程助手
Unsloth
Unsloth 是开源、免费、100% 本地的 AI 模型桌面应用与训练框架,让你在 Mac / Windows / Linux 上运行与微调开放模型(文本 / 图像 / 视频 / 音频);内置 Agent 连接(Claude Code、Codex,兼容 OpenAI API)、私有 Web 搜索与自修复工具调用,训练比标准实现更快、更省显存。
Rea
开源(MIT)AI 智能体驱动的反向工程工具:从应用行为到底层原生二进制均可逆向,作为 Claude Code / Codex 的 agent skill / MCP 插件运行,集成 Ghidra / Hopper / 反编译器,覆盖静态分析、CTF、二进制分析;TypeScript 编写,官网 rea.tools
Spawn
AI 原生的"创造即玩法"多人游戏平台,无编辑器无画布,与自然语言 AI 伙伴 Savi 实时共建可玩的 3D 游戏世界,自研 ECS 引擎+WASM 物理+客户端权威网络
Microsoft Clipchamp
微软推出的 AI 在线视频编辑器(Clipchamp):浏览器/Windows 桌面端免下载即可录制、剪辑、分享高清视频;含 AI 语音生成(多语言可调)、AI 字幕(80+语言)、AI 音频降噪去背景噪声、屏幕/摄像头录制、免版税素材库,免费版可导出无浮水印 HD 视频
秒哒
百度智能云推出的国内首个对话式无代码应用开发平台,依托文心大模型与多智能体协作,3分钟生成原型、1小时迭代,支持H5/网站/小程序/App/小游戏全栈生成与一键发布
Aider
终端中的开源 AI 结对编程工具:连接主流/本地大模型,自动理解代码库、编辑代码、Git 提交并自检修复。
核心功能
- ✓ RAG检索增强
- ✓ 智能体
- ✓ 开源
- ✓ 有免费版
👍 优点
- + 完全开源、无付费墙、无强制 API 密钥,可直接本地运行
- + LLM 友好:输出干净 Markdown,直接适配 RAG 管道或流入 LLM
- + 结构化提取灵活:支持 CSS、XPath 与基于 LLM 的提取策略
- + 细粒度浏览器控制:钩子、代理、隐身模式、会话复用,适合反爬场景
- + 高性能:并行爬行、基于块的提取,支持实时用例与智能体工作流
👎 缺点
- - 主要面向开发者(Python/异步库),非技术用户上手门槛高
- - Cloud API 仍处封闭 Beta,规模化托管方案与定价尚未明确
- - 具体 Stars、版本成熟度等公开指标需以仓库实时为准
- - 高级浏览器交互(鉴权、反机器人)配置复杂,依赖使用经验
适合人群
最适合: 需要为 LLM/RAG 管道或 AI 智能体抓取并清洗网页数据的开发者与 AI 工程师;以及构建实时数据管道、知识库与编码助手技能包的团队
不适合: 无编程基础的纯业务用户;以及只想要开箱即用、免配置的托管抓取服务、不愿自行运维爬虫的用户