加载中…

知识学习

知识学习把企业微信与 QQ 群聊里的高分问答蒸馏为通用知识入库,并提供知识缺口分析与学习记录,让 AI 越用越聪明。

知识学习为旗舰版(Ultra)能力。

功能概览

页面分为四个子模块(顶部切换):

子模块 作用
规则设置 配置入库阈值、自动通过、TTL、蒸馏模型、多线程知识拆分与提示词
优质候选 高分「问题类」议题,AI 蒸馏后可人工采纳入库
知识缺口 转人工 / 投诉 / 负面 / 超时等负样本,提示补知识方向
学习记录 历次入库明细,支持回滚

「优质候选」「知识缺口」「学习记录」默认按近 7 天日期筛选,可按考核群等条件过滤(规则设置无日期筛选)。

群聊中的图片消息(截图、单据等)会被自动识别为文字进入对话转写(呈现为「[图片: 识别内容]」),话题拆分与蒸馏都能看到图片内容,员工「甩截图答疑」的知识同样能被沉淀。

规则设置

多线程知识拆分

在「规则设置」中可开启 多线程知识拆分:

一个议题按话题拆成多条独立知识,适合多人多话题交织的群聊;关闭则一议题一条。

关闭时(默认)

维度 行为
粒度 一议题一条知识:整段对话当作一个问答来蒸馏、入库
优质候选 每个议题一行;点「蒸馏采纳」即可编辑并入库
适用场景 一个议题里基本只有一个客户问题、一条主线答复
AI 调用 对议题做一次蒸馏 + 去重

开启后

维度 行为
粒度 同一议题可按话题拆成多条独立知识(每个话题单独入库,单议题最多 8 个)
处理流程 两轮 AI:先按消息归属划分话题线程,再逐话题评估是否值得学习并蒸馏
线程重建 由后台定时任务自动预重建达复核阈值的候选(每企业每轮最多 10 条),打开「优质候选」页时话题通常已就绪;无需人工触发,个别未及重建的可点「重建线程」手动生成
优质候选 议题卡片可展开,显示「X 个话题」;每个话题可单独蒸馏采纳、修订知识、忽略
话题分 每个话题获得独立的话题分(0–100),衡量该话题答案本身的准确性与完整性,与议题质量分相互独立(详见下文「质量分与话题分」)
调整归属 若 AI 把某条消息归错话题,可用调整归属(拖拽消息到正确话题列)后重新蒸馏
自动通过 按话题维度判定是否自动入库(配对置信度、是否值得学习、去重等);由后台任务执行,无需打开优质候选页
适用场景 群聊里多人同时问不同问题、或一个议题内交织多个话题

开启后仍与关闭时相同的部分

  • 复核阈值、自动通过阈值、TTL、蒸馏模型与提示词等规则仍在此页统一配置;
  • 知识缺口、学习记录、回滚机制不变;
  • 语义去重(>0.9 合并 / 冲突)仍作用于每条待入库知识;
  • 非被考核员工的补充答复会计入答案底稿并标注;机器人 / 自动回复默认可作答案参考(作上下文)。

何时建议开启

  • 考核群里经常出现「一个问题还没答完,另一个客户又插问别的事」;
  • 你希望一次高分议题沉淀多条可检索知识,而不是混成一大段笼统问答。

何时保持关闭

  • 议题结构简单,一问一答为主;
  • 希望流程最简、AI 调用最少。

分数与自动入库

配置项 说明
复核阈值 质量分 ≥ 此值进入「优质候选」供人工审核(默认 85)
自动通过阈值 质量分 ≥ 此值且开启「自动通过」时,蒸馏去重后自动写入知识库(默认 95)
知识 TTL(天) 入库知识超过 TTL 未被更新将自动归档(停用、不再检索);被 AI 回答实际引用的知识会自动续期(每次命中将有效期重置为「命中时间 + TTL 天数」,同一条知识每天最多续一次)
自动通过开关 开启后满足自动阈值的高分问答可无人值守入库(默认关闭)

自动通过阈值必须 ≥ 复核阈值。

质量分与话题分

开启「多线程知识拆分」后,页面上会出现两种分数,衡量的对象不同:

质量分(议题) 话题分(话题)
打分对象 整个议题(一段完整对话) 议题内的每个话题
衡量什么 员工服务质量:首响速度、态度、准确、完整、合规加权(见服务绩效) 该话题答案本身的知识质量:准确性(权重 60%)+ 完整性(权重 40%)
怎么评 绩效评分链路,对照知识库参考 话题拆分后单独评估;库内已有相似知识时对照库内知识判断准确性,无参照则按常识判断
用在哪里 决定议题是否进入优质候选(复核阈值)、自动通过的议题门槛 展示在每个话题卡片最前,辅助判断该条是否值得入库;自动通过要求话题分也达标

为什么需要话题分:议题质量分是整段对话的综合观感——一个高分议题里可能同时有答得好和答得差的话题,单看议题分无法分辨。话题分把粒度落到每条待入库的问答上,让「哪条值得进知识库」一眼可判:分数高说明这条问答准确且完整,可放心采纳;分数偏低建议先核对答案再入库。

  • 悬停话题分方块可查看准确性 / 完整性两个维度的得分(0–5)与评分理由;
  • 显示「—」表示未评分:功能上线前生成的旧话题,点「重建线程」或「调整归属」后会自动补分;被 AI 判定「不值得沉淀」的话题不参与评分;
  • 未评分的话题不会自动入库,仅可人工采纳。

自动入库必须满足的条件

后台任务会定期扫描高分议题,全部条件同时满足才会自动写入知识库;任一不满足则留在「优质候选」等待人工处理。

通用前提(两种模式均适用)

条件 说明
开启「自动通过」 规则设置中开关为开
议题质量分 ≥ 自动通过阈值 以服务绩效评分结果为准
问题类议题 客户消息分类为「问题类」,非投诉 / 建议等
未被忽略 未在「优质候选」中对该议题(或话题)执行「忽略」
未被回滚 该议题没有「已回滚」的学习记录——在「学习记录」人工回滚过的知识不会被自动重新入库,如需重新沉淀请人工「蒸馏采纳」
已配置知识蒸馏模型 与规则设置中的蒸馏模型要求一致
去重结果可入库 与库内相似度 >0.9 时:无近似 → 新增;高度重复 → 合并更新(自动覆盖的旧条目会被打「待复核」标供人工事后核对,其相近条目也会收到提醒,见知识库管理);冲突(与已有知识矛盾)→ 跳过,不自动入库

关闭「多线程知识拆分」时(一议题一条)

  • 该议题尚未有任何生效中的入库记录;
  • 蒸馏预览会同步生成答案质量分(与话题分同口径:准确性 + 完整性,0–100,展示为候选行的「话题分」方块);该分未评分或低于自动通过阈值时不自动入库,留在候选转人工;
  • 后台对该议题执行一次蒸馏 + 去重,通过后自动写入知识库。

开启「多线程知识拆分」时(按话题入库)

除通用前提外,每个话题还需同时满足:

条件 说明
话题分 ≥ 自动通过阈值 该话题自身的话题分需达标(与议题门槛同一阈值);未评分(显示「—」)的话题不自动通过,转人工处理
值得学习 AI 判定该话题值得沉淀,且置信度 ≥ 0.90
消息归属可靠 话题内客户 / 员工消息配对置信度 ≥ 0.90
答案含被考核员工回复 答案底稿须包含被考核员工的有效答复;仅由非考核同事或机器人补充、无被考核员工回复的话题不自动通过,须人工确认
无需人工复核标记 系统未标记该话题需人工复核
已完成蒸馏 已有可用的蒸馏问答(问题 / 答案非空)
去重可入库 该话题的去重结果为「新增」或「合并」,非「冲突」

限频保护(多话题模式)

  • 同一议题每轮自动通过最多 2 个话题;
  • 同一企业每轮自动通过总预算最多 10 条(跨议题累计);
  • 候选线程预重建每企业每轮最多 10 个议题(后台约每 5 分钟一轮,渐进消化积压,与自动通过预算相互独立)。

自动通过与线程预重建均由后台定时任务执行,无需打开「优质候选」页面。线程预重建与自动通过解耦:即便关闭「自动通过」,候选的话题拆分仍会在后台提前算好;只是不会自动写入知识库,仍需人工「蒸馏采纳」。不满足自动条件的条目仍会出现在优质候选中。

每个议题至多预重建一次。若某议题的话题归属需人工确认,后台不会反复重算:该议题卡片会显示「调整归属」与「强制重建」,可拖拽消息到正确话题后生成知识单元,或确认后让 AI 重新拆分。

入库状态:自动入库 / 复审入库 / 人工入库

「优质候选」列表可按入库状态筛选;已入库的议题或话题会显示对应标签,含义如下:

状态 含义 典型路径
待蒸馏采纳 尚未写入知识库 质量分达复核阈值,等待人工「蒸馏采纳」,或等待自动通过任务处理
自动入库 系统无人值守写入,且未再被人为修改 满足上文全部自动条件 → 后台蒸馏、去重、入库(学习记录来源为「自动通过」)
复审入库 先自动入库,后有人工修订 原为自动入库;之后在「优质候选」对该话题点了「修订知识」并保存,知识内容已被人工改过
人工入库 全程由人工确认后写入 在「优质候选」点「蒸馏采纳」,编辑问答 / 分类 / 关键词后确认入库(学习记录来源为「人工采纳」)

三者区别小结

  • 自动入库:零人工干预,内容与 AI 蒸馏结果一致;适合规则清晰、置信度高的话题。
  • 复审入库:入库路径仍是自动通过,但内容经人工校对或补充;学习记录仍记为自动通过,列表用「复审入库」区分「是否被改过」。
  • 人工入库:从候选到确认均由人工完成;适用于未达自动条件、去重冲突需强制新增、或主管希望逐条审核的场景。

三种状态入库的知识在检索侧同等生效;差异主要体现在审计(「学习记录」中的来源字段)与优质候选列表的筛选、标识上。对「复审入库」条目再次「修订知识」仍视为已入库,状态保持「复审入库」。

蒸馏模型

  • 默认勾选「与绩效评分模型相同」,复用服务绩效 → 绩效配置中的模型;
  • 也可单独选择更轻量的知识蒸馏模型;
  • 语义去重默认使用平台向量能力(接入自有阿里云百炼 Key 后自动使用自有 Key),与对话模型无关。

知识蒸馏提示词

可展开「知识蒸馏提示词」自定义蒸馏阶段的业务语境(行业背景、什么值得沉淀、answer 是否用 Markdown 等)。

说明 内容
作用范围 仅 蒸馏阶段:关闭多线程拆分时,整议题蒸馏一次;开启后,在话题划分完成后再逐话题蒸馏
不作用范围 话题归属(仅多线程拆分时由系统自动完成)与 JSON 输出格式 由系统固定拼接,无需、也不应在提示词里写 JSON 或 msg_id 规则
默认文案 与「一议题一条」和「多话题拆分」均兼容的通用表述;切换多线程开关时,若仍为系统内置默认,会自动刷新为新默认
自定义 如你写的货代行业语境,可长期保留;切换模式不会覆盖已自定义内容

不确定时点「恢复默认」即可。

优质候选

页面顶部提供运营统计卡片(跟随日期筛选,随列表一同刷新):

  • 入库:自动入库 / 复审入库 / 人工入库 / 冲突跳过 / 回滚 各计数,与「学习记录」按入库时间筛选的结果一致;优质候选页状态下拉筛「自动入库 / 复审入库 / 人工入库」时,列表同样以入库记录为准(包含历史入库记录和曾被隐藏的议题),日期按入库时间而非议题创建时间;
  • 待蒸馏采纳:仍按知识单元 / 议题待采纳口径,与入库计数分开;
  • 话题分分布:≥95 / 85–94 / <85 / 未评分 四档条形(仅统计值得沉淀的话题);
  • 待办:待蒸馏采纳数、待人工归属确认数、关联待复核数(知识库中有相近条目被更新、待人工复核口径的条目数,点击直达知识库的「待复核」筛选,该计数为当前状态、不随日期筛选变化);另附「被判不值得沉淀但人工仍采纳」的观测计数(用于评估 AI 误杀率,反哺提示词调优)。

展示服务绩效中高分「问题类」议题:

  1. 列表显示质量分、AI 蒸馏后的问答预览、相似度提示(与库内已有知识);
  2. 点击「蒸馏采纳」打开抽屉,可编辑问题 / 答案 / 分类后确认入库(分类从目录选择);
  3. 采纳时若与库内知识冲突(答案矛盾),抽屉内会并排展示「库内已有」与「本次蒸馏」供对比,处置三选一:更新旧条目(用本次内容修订旧知识并刷新有效期)/ 强制新增 / 跳过(仅记录冲突);
  4. 已入库条目标记「已入库」;已入库话题可点「修订知识」直接更新,无需先回滚。少数历史/重建后的条目只有学习记录、没有话题卡片:列表仍展示已入库问答,并提示到「知识库」改内容、或到「学习记录」回滚撤回;
  5. 可从列表隐藏(不影响绩效 / 存档原始数据)。

关闭多线程知识拆分时:每个议题一行,操作与上述 1–5 一致;行内同时显示话题分方块(该条蒸馏答案的质量分,口径同话题分,悬停可看准确 / 完整明细)。

开启多线程知识拆分后:

  • 点击议题行展开,每个话题卡片最前显示话题分(0–100,衡量该条答案的准确与完整,见上文「质量分与话题分」),其后是配对置信度、蒸馏预览与操作按钮;悬停话题分可查看准确性 / 完整性明细与评分理由;
  • 对值得学习的话题:蒸馏采纳(话题分高可放心采纳,偏低建议先核对答案);对已入库话题:修订知识;
  • 若服务绩效的议题评分曾在某话题的消息上扣分,该话题卡片会显示琥珀提示条「议题评分曾在此话题扣分」及扣分原因(仅提示,不拦截采纳);
  • 被判「不值得沉淀」但 AI 置信度不高的话题,会标注「AI 不确定,建议人工确认」,建议人工复核后决定是否「仍要采纳」;
  • 归属有误时:调整归属 → 拖拽消息到正确话题 → 保存后转后台重蒸馏(期间可离开页面,完成后自动更新该议题,话题分一并重新计算);
  • 不需要的话题可 忽略(仅从候选列表隐藏);
  • 批量采纳:勾选多个可采纳话题(值得沉淀、未入库、蒸馏问答齐备)后,点顶部「批量采纳」按顺序自动入库;与库内知识冲突的自动跳过并保留在列表可逐条处理;筛选区「全选话题分 ≥90」可一键勾选当前页高分话题;中途离开页面时已提交的继续执行,剩余中止并在汇总中说明;
  • 存量议题若有未评分话题(话题分功能上线前生成),会显示「重新重建」按钮,确认后重新拆分话题并补齐话题分(已入库的议题不提供该入口);
  • 议题的话题由后台自动预重建,通常打开即已就绪;仅当个别议题尚未生成话题时,可点 重建线程 手动触发 AI 拆分。
  • 重建后仍是 0 个话题时会提示原因(如对话以闲聊为主、没有被考核员工的有效回复、话题均被判不值得沉淀);上次拆分为空的议题,可再点「重建线程」重新拆分;话题归属不清时,卡片改为提供「调整归属」与「强制重建」。
  • 已入库的议题不能重建:卡片上不显示「重建线程」「强制重建」,系统也会拒绝重建请求并提示先回滚——重建会重新拆分话题,导致知识库里的知识仍然生效、话题却又回到「待采纳」。如确需重新拆分,先在「学习记录」回滚该议题的记录。对已入库议题「调整归属」时,只允许调整尚未入库的话题。
  • 删除已入库的候选:点卡片右上角删除图标,会提示「该候选已入库」;点「前往学习记录回滚」会直接打开「学习记录」并只显示这个议题的记录(页面顶部有「只看该议题」提示条,其它筛选暂不生效),对「生效中」的记录点「回滚」即可把知识从知识库撤回。点提示条上的「查看全部记录」、修改学习记录筛选或切换到其它页签,都会退出「只看该议题」。

支持按质量分、创建时间或最高话题分排序;可按入库状态(待蒸馏采纳 / 自动入库 / 复审入库 / 人工入库)、分类(当前筛选结果中实际出现过的知识分类)、话题分(≥95 / ≥90 / ≥85)筛选。选中分类后,议题展开只显示该分类下的话题。含义见上文「入库状态:自动入库 / 复审入库 / 人工入库」。

知识缺口

汇总不宜直接入库但值得关注的会话信号:

  • 超时未解决、投诉、负面情绪等标签;
  • 负样本仅供参考,不会自动写入知识库;
  • 点击缺口行的「补充知识」可直接跳转知识库并自动预填客户问题,补上答案保存即可;也可自行到知识库针对性补充。

可按日期、考核群、缺口类型筛选。

学习记录

查看每次入库的历史:

筛选项 可选值
来源 自动通过 / 人工采纳
状态 生效中 / 已回滚 / 已归档
去重结果 新增 / 合并 / 冲突

对「生效中」且已关联知识库条目的记录,可执行回滚(从知识库撤回);回滚后,对应话题在「优质候选」中会恢复为待采纳状态,且不会被「自动通过」再次自动入库(即使仍满足自动条件;保守起见,同议题的其他话题也将一并转为人工采纳)——如需重新沉淀,请在「优质候选」人工「蒸馏采纳」。误操作也可删除记录本身。

可按日期、考核群及上表筛选项过滤。

推荐工作流

  1. 在「规则设置」配好阈值与模型;群聊话题交织时可开启「多线程知识拆分」;
  2. 定期浏览「优质候选」,人工采纳高价值问答(多话题议题展开后逐条处理);
  3. 查看「知识缺口」,补全知识库薄弱环节;
  4. 在「学习记录」审计入库历史,必要时回滚。

沉淀的筛选标准

优先沉淀:

  • 高频问题:很多客户都会问的;
  • 优质答案:服务绩效评为高分、口径准确的;多话题议题优先采纳话题分高的条目;
  • 可复用:不依赖特定客户上下文、换个客户也成立的。

闭环

会话发生 → 存档留存 → 绩效评分 → 高分问答蒸馏入库 → AI 回答变好。坚持这个闭环,知识库会持续自我增强。

相关阅读