Agent 的上限不在模型,而在团队知识:一套可落地的知识飞轮方法论

AIAgentKnowledge ManagementMCP

本文整理改写自腾讯技术工程团队的实践分享《Agent的上限,可能不在模型,而在团队知识》(作者:danteyang),保留其方法论骨架,剔除了原文中与技术无关的内容。

当团队开始用 Agent 做研发和运营,一个问题很快浮出来:Agent 的输出质量,直接取决于你能给它什么质量的知识。怎么让知识"产得出、找得准、喂得进、淘汰得掉",是每个上了 Agent 的团队都要解决的工程问题。

一、为什么 AI 时代需要重新建知识库

过去知识大多散落在需求文档、评审记录、代码审查评论、个人经验里。新人想搞清楚某个模块的历史决策,得翻文档系统、问老同事、再去代码仓库刨 commit message,费一两天是常事。更头疼的是,同样的坑不同的人反复踩,因为踩坑经验只留在了提 MR 那个人的脑子里。

过去知识管理就是**「人写 → 人找 → 人读」**。

现在 Agent 上了一线,问题变了:不是 Agent 读不了长文(大模型的上下文窗口读两千字毫无压力),而是真正卡住的两件事——

第一,检索精度。有几千篇文档,Agent 面对一个具体问题时,怎么从里面精准捞出相关的那两三篇?纯自然语言写的长文,语义边界模糊,召回容易漂移。

第二,注入效率。就算找对了文档,一篇复盘里可能只有一段结论跟当前场景相关,不可能每次都把整篇塞进去——token 有成本,上下文也有干扰。

结构化知识(带适用条件、核心结论、应做/不应做的卡片)解决的就是这两个问题。但有一点容易走偏:不要把"给人看的知识"和"给 Agent 看的知识"做成两套东西。好的结构化知识,人打开一样能读懂、能维护——就像写得好的 Skill 文档或 Prompt,人看起来也是清晰的。反过来,如果一条知识人看着都觉得莫名其妙,它的维护质量也不会好,时间一长就会腐败。所以原则是人机共读:一套知识库,人和 Agent 都是消费者。

❌ 传统模式✅ AI 时代模式为什么要变
人写人读流程自动生产、Agent 消费、人做决策纠偏靠人写一定失败,靠流程才能保证持续产出
长文档,只考虑人能读懂人机共读——人看着舒服、Agent 检索得准结构化让检索精准、注入高效,同时人看得懂才好维护、不易腐败
静态存储,只进不出飞轮自增强——有效期保鲜、自动退场复活知识规模一大,过时内容反而干扰 Agent 决策

一句话概括:传统知识库是"仓库",追求存得多;AI 时代的知识底座是"供给系统",追求匹配得准、注入得快、过时的能自动淘汰。

图片

二、先想清楚:服务谁、装什么、怎么算成功

做不好知识底座,多数时候不是技术问题,是目标没想清楚。一上来就选工具、搭平台,很可能最后建了个没人用的东西。动手前先回答四个问题:

问题要点
服务什么场景?不是"我要建知识库",而是"我要解决 XX 场景下 YY 效率低的问题",把目标锚定到业务痛点上
谁来消费、怎么消费?人和 Agent 往往都是消费者,知识结构要同时满足人能理解维护、Agent 检索注入精准高效
知识库里装什么?按四层盘点:L1 公共基础 → L2 业务领域 → L3 场景策略 → L4 事件增量,每层明确内容、责任人和保鲜频率
怎么算成功?给出可观测指标:注入命中率、画像覆盖率、盲搜下降率、返工下降率、对话采纳率等

目标一旦清楚,设计就顺了。比如"沉淀靠人一定失败"这个判断,会直接决定把知识沉淀绑死在研发流程的关键节点上——代码跑过去,知识就自动留下来。

图片

这里有个硬规则:没上线或没关联仓库的知识一律暂存,不准进 Agent 的引用池,上线了再自动转正。否则这道闸不卡住,知识库很快会被半成品、无效的文档淹没。

不管做研发还是运营,思路一样:找到流程里的"必经节点"(提测通过、上线完成、事件关闭……),把知识沉淀绑上去,让知识成为流程的副产品,而不是额外工作。准入双门禁的逻辑(客观信号验证才入池)是通用的。

三、六步搭建 AI 知识底座

别一上来就选工具。六步走下来,每步做完都有明确交付物,不容易烂尾。

Step 1:知识盘点——你现在有什么

先盘清家底,按四层分类:

层级内容举例
L1 公共基础全团队通用的开发规范、编码约定日志/存储/RPC/鉴权等代码示例
L2 业务领域按业务线组织的领域知识平台文档、接入指南、业务架构
L3 场景策略特定场景的决策规则和策略处置标准、管控 Prompt 模板
L4 事件增量从日常事件中提炼出的新规则/新经验事件处置后沉淀的新标准、需求上线后自动提炼的踩坑卡片

盘出来就能看到哪里是空白、哪里重叠,进而形成自己的知识库分层结构——一个 MCP 能力底座、若干知识库、若干 Agent 消费者。库的数量未必要多,但分层盘点的方法可以直接复用。

图片

Step 2:选型——你需要什么样的知识库

知识库有三种形态,各有擅长的场景,关键经验是别只建一个,组合用

类型适合场景实例
文档型篇幅较长的背景知识、教程、架构说明Wiki 文档 + 新人专区 + 复盘长文
结构化存储规则明确、需精确匹配,同时人看着也清晰好维护Git / 数据库结构存储,markdown/YAML/JSON 渲染的知识卡片
RAG 向量型知识量大、语义匹配为主向量检索存储

Step 3:工具平台选择——中台优先 + 适配层

有中台用中台,没有再自建。Agent 工具层需要一个适配层,把底层数据能力封装成标准化工具,MCP(Model Context Protocol,模型上下文协议)目前是比较主流的方案。

把底层数据能力(数据库查询、日志检索、模型调用等)按业务域拆成多个独立的 MCP Server 是关键设计点——不要把所有工具堆在一个 Server 里:大模型对单 Server 工具数有上限,工具太多会增加 token 消耗,业务之间也需要隔离。拆完之后各个 Agent 按需接入,只加载自己需要的那组工具,互不干扰。

MCP(Model Context Protocol):让 Agent 调用外部工具的标准协议,类似 Agent 世界的 USB 接口。RAG(Retrieval-Augmented Generation):检索增强生成,先搜知识库再让大模型回答。

Step 4:知识生产——四种模式并行

一条铁律:别指望人主动写。四种生产模式可以并行跑:

模式说明
A:绑定流程自动沉淀知识生产绑定在研发/运营的关键节点上,零人工操作
B:复盘 Agent 驱动更新Agent 每周分析会话记录,未命中的盲点自动提 MR,用户每次对话都是知识质量的隐式检验
C:Agent 自动生成运营输入事件背景,Agent 自动转化为结构化知识 + 准召评估,知识上线周期从天级降到分钟级
D:运营处置即时沉淀处置新事件的同时沉淀规则,下一个类似事件 Agent 立即能用

Step 5:知识治理——有进有出才能保鲜

只进不出的知识库几个月就成垃圾场。治理要做四件事:

  • 准入双门禁:已上线 + 已关联仓库才能正式进入 Agent 引用池
  • 三层质量分级:可直接使用 / 待确认 / 待验证,按可信度自动划分
  • 有效期保鲜:默认周期到期重校验,过期且零引用自动归档
  • 自动退场 + 复活兜底:零引用过期的归档,仍有引用或被认可的自动复活——防止误杀有价值知识

图片

治理工作台让知识 Owner 能看到待审核、即将过期、待完善的知识,人工只需集中精力在高价值复核上,基本不需要人盯着,系统自己会代谢。

Step 6:分发与消费——让知识找到使用者

传统做法靠 Agent 自己搜,搜不到就白搭。更好的思路是平台主动注入:Agent 启动任务前,系统已经按场景把相关知识打包好塞进去了。

传统模式主动注入模式
Agent 自己搜索(不确定是否调用)平台主动注入(100% 确定到达)
长文档,Agent 难以消费结构化卡片 / YAML / Prompt 模板
使用无记录注入即记账,可追溯每条知识的消费情况

每个 Agent 各有各的知识订阅——需求评审 Agent 只看需求模板和历史踩坑,运营 Agent 只看判定标准和 bad case 规则。知识包作为分发的容器,按仓库专属包和公共包两种组织,不做撒网式推送。

图片

哪些能直接搬、哪些需要定制?

可直接复用的:四问定目标的框架、节点绑流程的思路、准入双门禁、三层质量分级、有效期 + 退场复活机制、知识包作分发容器、注入即记账。

需要因地制宜的:具体触发节点要换成自己业务的关键流程节点;知识卡片的字段结构要根据 Agent 消费场景设计;MCP 工具拆分取决于业务域划分;保鲜频率要按知识更新速度调整。

四、让知识转起来的飞轮

建好知识库是第一步,让它自己转起来才算真跑通:交付越多 → 知识越厚 → Agent 越强 → 交付更快。这个循环一旦启动,团队的能力是随使用量一起涨的。

图片

飞轮六环节是:生产 → 提炼 → 注入 → 消费 → 反馈 → 保鲜,形成自增强闭环。

图片

飞轮能转下去,靠的是几个设计上的巧劲:

用即积累。复盘 Agent 每周扫一遍会话记录,碰到回答不了的问题就自动提 MR 补知识——用户的每次对话实际上都在帮知识库查缺补漏。

注入即记账。每条知识被谁用了、用了几次,系统自动记录,不靠人填报,哪些知识热门、哪些从没被翻过,打开看板一目了然。

敢于不沉淀。很多需求做完其实没什么值得沉淀的东西,系统会判断跳过——知识库的密度比体量重要。

运营侧还有个问题:怎么让人愿意参与?比管理手段更有效的办法是通过工具建设,让知识沉淀这件事本身,让人感觉不到额外工作量——比如在完成一个需求的端到端开发过程中,人与 AI 对话交互期间就被动地沉淀下知识,并自动归到对应的人身上。贡献榜和自评引用是锦上添花,核心还是流程自动化把活干了。

图片

下面是团队日常运营用的飞轮看板,知识规模、质量、时效、AI 调用效果四个维度一屏可见,所有数据由"注入即记账"机制自动产生:

图片

避坑指南——四条反模式:

反模式后果 → 解法
强压 KPI 逼贡献人被逼写的知识质量低、维护意愿更低 → 流程自动沉淀为主,激励为辅
只进不出无限膨胀知识越堆越多,信噪比越来越低 → 有效期保鲜 + 自动退场复活
隐性知识无法显性化专家离职带走全部 know-how → 复盘专项 + 换岗交接清单 + 专家萃取
贡献者与组织权责不对等写了很多但没人认可,动力自然消退 → 贡献榜量化 + 自评可引用 + 管理者考核参考

五、跑起来之后,变化在哪里

做了知识系统建设之后的变化,简单说:让人避免再干重复检索、重复踩坑的活,腾出来去做更多的决策判断和创造。具体有四层价值:

价值说明
组织记忆人员流动不再带走关键知识,故障复盘成为"错题本"和行动标尺,新人能站在前人肩膀上
新人加速三阶段培养体系(入门期 → 成长期 → 产出期),新人上手周期显著压缩
知识平权不管在哪个小组、入职多久,Agent 能获取的知识是一样的,减少"问对人才能拿到答案"的信息不对称
自增强飞轮使用越多 → 知识越厚 → Agent 越强 → 产出越高 → 更多人愿意用,持续加速的正循环

更关键的是要让这套体系持续运转,不是搞了一次"知识运动"就静止不动——知识规模要能持续增长,知识保鲜要靠自动化机制而不是人盯着,Agent 调用频次要能反映知识真的在被消费。

人的角色变了:不是知识的搬运工,是知识质量的把关人。Agent 干重复的大头,人做判断和纠偏。心智负担很低——正常做需求、正常上线,知识沉淀就跟着完成了,不需要额外"写文档"这个动作。

如果团队要建设知识体系,建议从一个具体场景的闭环切入,别贪全,跑通一个再横向扩展。飞轮开始转,比转得快更重要。

评论

登录后参与评论 登录

加载中…

返回博客列表