AnythingLLM Logo

AnythingLLM

AnythingLLM 是开源、可自托管的全功能本地 AI 聊天与知识库(RAG)桌面应用,支持文档上传、私有知识库构建、多模型切换、智能体技能与本地会议助理,所有数据在设备端处理,强调隐私与离线可用。

★ ★ ★ ★ ★ 8.3 /10
免费 ✓ 免费版 开源
价格模式
免费
价格区间
免费下载 + 开源自托管(MIT);部分 Magic 高级功能标注 Pro
是否开源
是
GitHub Stars
64,000

🌏 中国可用性与平替

⚠️ 受限 / 需特殊网络

该工具在中国大陆可能受限,部分功能或访问需特殊网络环境;如不便,可参考下方国内平替。

国内平替(同类 · 中国可用)
Hugging Face
AI模型与数据集共享平台
LlamaIndex
连接数据与大语言模型的 RAG/智能体框架,并提供 LlamaCloud 文档解析、索引与企业级 RAG 云服务。
Ollama
本地一键运行开源大语言模型
Amazon Bedrock
Amazon Bedrock 是 AWS 提供的、用于在生产规模构建生成式 AI 应用与智能体的全托管平台,汇聚来自 Anthropic、Meta、Mistral、Cohere、Stability 及亚马逊自研等数百个基础模型,并提供模型评估与选型、AgentCore 智能体编排、知识库 RAG、微调、企业级护栏(Guardrails)与成本优化(模型蒸馏、提示缓存、智能路由),服务全球超 100,000 家组织,按调用量计费且新用户可获最高 200 美元试用抵扣。
智谱 AI
智谱 AI(Z.ai)是国产原创 GLM 大模型厂商,提供全模态大模型 API(MaaS)、智谱清言对话、ZCode 多智能体 Harness 与 AutoGLM 自主智能体;注册赠 2000 万 tokens 免费试用,覆盖 GLM-5.3(1M 上下文、强 Coding)、GLM-5V-Turbo 等模型,支持模型微调与企业级落地。
Open WebUI
Open WebUI(openwebui.com)是「自托管 AI 平台 / 界面」:一条命令(pip/Docker,约 60 秒)即可在你自己的机器或服务器上跑起来,连接任意模型(Ollama、OpenAI、Anthropic 及任意 OpenAI 兼容端点),本地与云端混合、数据留在你手里。能力完整且可扩展——RAG 检索、Agents(Tools/Functions/Python pipelines)、语音、视觉、联网搜索,并能用 Python 自写函数与工具、从社区库一键安装/共享;企业版还提供 SSO、RBAC、审计日志、数据驻留与离线/气隙部署。GitHub 154K+ stars、社区 500K+ 成员、下载 4 亿+,生态极强。许可证是自定义「Open WebUI License(非标准 OSI)」:个人自托管免费,商业/企业用途需授权。
Pinecone
为 AI 而生的全托管向量数据库(Pinecone,2019 年创立):写入确认 <100ms、任意规模低延迟,索引自动平衡与后台升级,无需调优运维;新推 Nexus 代理知识引擎(单次查询交付治理化知识,官方称比 agentic RAG 快 30x、token 省 90%、准确率高 20%),支持 Claude Code / Cursor / Copilot / Codex / Gemini 插件集成;企业版含 SSO、RBAC、CMEK、私有网络与 SOC 2 II / HIPAA / GDPR / ISO 27001 合规;首个 index 免费,之后按量付费
腾讯 ARC 实验室
腾讯官方 AI 研究实验室(ARC Lab),自 2019 年起持续输出前沿论文并开源 70+ 项目,提供 InstantMesh、YOLO-World、PhotoMaker、DepthCrafter 等覆盖 3D、图像、视频的模型与在线体验

核心功能

👍 优点

  • + 数据全本地处理,极致隐私,无账号/密钥/额度
  • + 开源免费(MIT)且可自托管多用户
  • + 功能全面:文档RAG、知识库、会议助理、Agent 技能
  • + 跨平台桌面(macOS/Win/Linux)与 Docker,开箱即用

👎 缺点

  • - 性能依赖本机硬件,需本地算力
  • - 部分 Magic 功能标 Pro,可能限免
  • - 仅桌面/Docker,无移动端支持
  • - 企业级 SLA/官方保障未明确

适合人群

最适合: 注重隐私的个人或团队、需离线处理文档与会议的开发者、欲自托管 AI 助理的组织

不适合: 无本地算力且需重型模型者、纯移动端用户、依赖托管云 AI 客服的企业

你怎么看这个工具? (最多选 3 个)
已选 0/3