《智能体设计模式》中文版已发布, 点击阅读

PrivateGPT

面向隐私的生产就绪项目,提供离线/私有化的文档检索与 RAG API,支持多种本地与云端模型。

简介

PrivateGPT 是一个面向生产的私有化生成式 AI 框架,旨在在本地或私有云中安全运行文档检索、RAG(检索增强生成)与对话 API,保证数据不出环(100% 私有)。项目提供完整的 API、Gradio UI 与部署脚本,适合对隐私和合规有高要求的场景。

主要特性

  • 私有化优先:设计为在离线或内网环境中运行,确保数据不外泄。
  • 完整 RAG 管道:文档摄取、分片、嵌入生成与向量检索的端到端实现。
  • 多后端支持:兼容 LlamaIndex、Qdrant、Ollama 等常见组件与模型运行时。
  • 部署友好:提供 Docker Compose、云与本地部署配置与示例。

使用场景

  • 企业内网中的文档问答与知识库检索。
  • 受监管行业(医疗、法律)中需要严格数据隔离的 AI 应用。
  • 离线环境或对外网访问受限的研究/生产部署。

技术特点

  • 基于 FastAPI 的 OpenAI 兼容 API 层,使用 LlamaIndex 作为 RAG 基础组件。
  • 以 Python 为主,文档与前端(MDX/Gradio)提供良好使用示例与 UI。
  • 使用 Apache-2.0 许可证,社区活跃,发行与贡献通道完备。

评论区

PrivateGPT
资源信息
📚 检索增强生成 🧬 大语言模型 🛠️ 开发工具 🌱 开源