很多企业第一次做 AI 问答,会从一个聊天页面开始:接入大模型,写一段系统提示词,再上传几份 PDF。演示时能问能答,就认为知识库已经完成。

但从工程角度看,聊天界面只负责接收问题和展示答案。企业知识库真正要解决的是另一组问题:答案依据来自哪里,检索到了哪一版资料,当前用户有没有权限看,错误能不能定位,资料更新后旧答案怎样失效。

一、先把两个概念分开

普通聊天机器人主要由三部分组成:用户问题、提示词、大模型回答。它适合通用咨询、流程引导和开放式对话,但模型可能依据训练数据或当前上下文组织答案,并不天然了解企业最新制度。

企业知识库通常会在聊天入口和大模型之间增加一层受控的知识检索。常见的 RAG(Retrieval-Augmented Generation,检索增强生成)流程是:先检索企业资料中的相关片段,再把片段交给模型组织答案,同时保留文件名、章节、版本或链接。

所以,两者不是二选一。聊天机器人可以是入口,企业知识库提供依据和治理。

二、六个维度看清差别

维度 普通聊天机器人 企业知识库
回答依据 模型能力、提示词、当前对话 企业确认过的知识源与检索结果
知识更新 改提示词或更换模型 审核资料、更新索引、管理版本
权限 常见是账号或应用级控制 部门、角色、文档甚至字段级控制
引用 可能只给结论 返回文件、段落、版本或链接
错误追踪 很难知道为什么答错 可以检查召回片段、知识版本和反馈记录
适用场景 通用问答、简单 FAQ 制度、产品、售后、项目和内部资料问答

企业知识库与普通聊天机器人能力对比

真正的判断标准不是“回答是否像人”,而是回答有没有依据、没有依据时是否停止猜测、不同账号能否只能检索自己有权查看的内容。

三、一个可运行的知识库至少有五层

1. 知识源

包括制度、产品手册、操作说明、合同模板、网页、数据库记录等。每份资料至少需要负责人、有效版本、更新时间和权限级别。

2. 资料治理

需要处理重复文件、过期版本、扫描件、空白页、表格结构和标题层级。原始资料不清楚,后面的向量化也不会自动把内容变正确。

3. 检索层

大文件通常要切成片段,并保留标题、章节、来源和版本元数据。用户问法与文档术语不一致时,还要比较关键词、向量或混合检索的召回结果。

4. 回答与权限层

模型只应收到当前用户有权查看的片段。财务、合同、工艺和公开产品资料不能只靠一句提示词隔离。权限需要在检索时生效,而不是答案生成后再删除敏感词。

5. 反馈与更新层

每次测试最好保留问题、召回片段、回答、引用、用户反馈和处理结果。资料修改后要能确认新版本何时进入索引,旧版本是否停止返回。

四、为什么上传 PDF 容易在真实使用中失效

上传文件完成的是“让系统能读取”,并不代表系统能稳定检索。常见问题包括:

  • 同一制度存在新旧多个版本;
  • PDF 是扫描图片,文字提取不完整;
  • 表格被拆散,字段与表头失去关系;
  • 切分位置不合理,答案条件被截断;
  • 所有人共享同一个检索范围;
  • 只测试“能不能答”,没有测试引用是否正确。

微软 Azure AI Search 的 RAG 文档也把多来源数据、查询理解、内容切分、引用、安全与权限列为独立挑战。RAG 是一种工程模式,不是一键消除错误的功能开关。

五、第一期怎样验收

可以先选一个部门、30—50 个真实问题和一批有效资料,建立固定测试集:

  1. 是否检索到正确文件和段落;
  2. 是否显示可核对的来源与版本;
  3. 不同账号能否阻止越权检索;
  4. 没有依据时是否明确提示并转人工;
  5. 更新一份测试资料后,新旧版本是否正确切换;
  6. 错误回答能否追溯到资料、检索或生成环节。

准确率必须和测试样本、问题范围及复核方法一起记录。单独写一个百分比,无法说明系统在哪些问题上可靠,也无法指导下一轮优化。

企业知识库最小闭环

六、什么时候先别做复杂 RAG

如果资料只有几十条、问题高度固定,结构化 FAQ 和站内搜索可能已经够用。如果文件版本混乱、没有负责人、权限没有划分,也应该先做资料治理,而不是先买服务器或决定向量数据库。

企业知识库的第一期目标可以很小:一批可信资料、一组真实问题、一套权限和引用规则,以及一条错误进入人工处理的路径。先证明这套闭环能工作,再决定是否连接业务系统或扩大部门范围。

参考资料:

  • Microsoft Learn:Retrieval-augmented generation in Azure AI Search
  • NIST AI Resource Center
  • OWASP LLM Prompt Injection Prevention Cheat Sheet

成都啊哈克斯科技有限公司原创。部分内容由 AI 辅助整理,技术判断与公开表述已由人工复核。

Logo

DAMO开发者矩阵,由阿里巴巴达摩院和中国互联网协会联合发起,致力于探讨最前沿的技术趋势与应用成果,搭建高质量的交流与分享平台,推动技术创新与产业应用链接,围绕“人工智能与新型计算”构建开放共享的开发者生态。

更多推荐