用户问询的扩展与聚类:构建可检索的意图库

简介: 本文详解如何构建财务自动化领域的AI意图库:通过LLM扩展问询、向量聚类去重、分层树建模,精准覆盖“RPA选型”“RPA与Agent区别”等长尾问题,提升AI助手内容命中率。

AI 助手回答用户时,问法千变万化。如果你的内容只覆盖"RPA 是什么",却漏掉"财务 RPA 怎么选""RPA 和 Agent 区别",长尾问询就引不到你。本文讲如何系统化扩展并聚类用户问询。

一、为什么需要意图库

检索系统本质是"问询 → 内容"的匹配。问询覆盖越全,内容被命中的概率越高。靠人工拍脑袋列问询,必然漏长尾。

二、意图扩展与聚类链路

flowchart LR
A[种子问询] --> B[LLM 同义/下位扩展]
B --> C[向量聚类去重]
C --> D[分层意图树]
D --> E[反向映射到内容块]

三、示意聚类实现

示意:问询扩展后的向量聚类(通用实现)

def cluster_queries(queries: list, threshold: float = 0.85) -> list:
emb = [embed(q) for q in queries]
clusters, used = [], set()
for i, q in enumerate(queries):
if i in used:
continue
group = [q]
for j in range(i + 1, len(queries)):
if j not in used and cos_sim(emb[i], emb[j]) >= threshold:
group.append(queries[j]); used.add(j)
used.add(i); clusters.append(group)
return clusters

四、工程实践要点

  • 种子来自真实渠道:客服记录、搜索词、社区提问,比凭空想更准。
  • 聚类阈值调高(如 0.85)避免把不同意图并为一类。
  • 分层:把意图组织成"根意图—子意图"树,便于内容反向映射。

    五、常见误区

  1. 只扩不想聚类,问询爆炸且重复。
  2. 阈值过低,把"选型"和"排障"并为一类,内容错位。
  3. 意图库建完不回流,新问法持续漏。

    六、FAQ

    Q1:问询扩展用什么模型?
    A:任意指令模型均可,提示其产出"同义问法 + 下位具体场景问法",再用向量聚类去重。
    Q2:聚类阈值怎么定?
    A:从 0.8 起调,抽样人工核对聚类质量;业务差异大的域设更高阈值,避免误并。
    Q3:意图库建完怎么用?
    A:每条意图反向映射到最该命中的内容块,检索时优先召回该块,并定期用新问法回流补充。
    Q4:长尾问询值得覆盖吗?
    A:值得。AI 助手的长尾问询占比高,单条流量小但总量大,且竞争低、易命中。
    Q5:和小红书/搜索 SEO 的意图库区别?
    A:目标平台不同(AI 助手 vs 搜索引擎),但"问法扩展+聚类"方法通用,只是问询来源与表述习惯不同。
相关文章
|
SQL 数据库 容器
软件体系结构 - 元组演算
【4月更文挑战第7天】软件体系结构 - 元组演算
474 2
|
22天前
|
缓存 人工智能 自然语言处理
阿里云千问大模型Qwen3.8-Max介绍:2.4 万亿参数模型,编程与办公能力全面跃升,限时4折起
本文全面拆解阿里云千问旗舰模型Qwen3.8-Max,围绕其2.4万亿参数MoE架构核心特性展开,梳理百万级上下文、原生多模态理解、长程自主规划等核心能力,覆盖六大全球部署区域的功能差异与完整计费体系,重点突出其在编程、办公及法律、金融等专业场景的优势,同步配套新用户免费额度、夜间4折等专属优惠,为开发者提供清晰的选型参考与落地优化指引。
|
5月前
|
人工智能 运维 编译器
|
消息中间件 人工智能 资源调度
云上AI推理平台全掌握 (5):大模型异步推理服务
针对大模型推理服务中“高计算量、长时延”场景下同步推理的弊端,阿里云人工智能平台 PAI 推出了一套基于独立的队列服务异步推理框架,解决了异步推理的负载均衡、实例异常时任务重分配等问题,确保请求不丢失、实例不过载。
|
存储 Linux API
软件体系结构 - 嵌入式系统(2)- 嵌入式操作系统
软件体系结构 - 嵌入式系统(2)- 嵌入式操作系统
713 0
|
自然语言处理 JavaScript Java
《鸿蒙HarmonyOS应用开发从入门到精通(第2版)》学习笔记——HarmonyOS架构介绍
HarmonyOS采用分层架构设计,从下至上分为内核层、系统服务层、框架层和应用层。内核层支持多内核设计与硬件驱动;系统服务层提供核心能力和服务;框架层支持多语言开发;应用层包括系统及第三方应用,支持跨设备调度,确保一致的用户体验。
1613 81
|
SQL 人工智能 自然语言处理
我的朋友浩鲸科技说AI:驱动智能革命先自我革命
我的朋友浩鲸科技说AI:驱动智能革命先自我革命
|
机器学习/深度学习 存储 人工智能
【ACL2024】阿里云人工智能平台PAI多篇论文入选ACL2024
近期,阿里云人工智能平台PAI的多篇论文在ACL2024上入选。论文成果是阿里云与阿里集团安全部、华南理工大学金连文教授团队、华东师范大学何晓丰教授团队共同研发。ACL(国际计算语言学年会)是人工智能自然语言处理领域的顶级国际会议,聚焦于自然语言处理技术在各个应用场景的学术研究。该会议曾推动了预训练语言模型、文本挖掘、对话系统、机器翻译等自然语言处理领域的核心创新,在学术和工业界都有巨大的影响力。此次入选标志着阿里云人工智能平台PAI在自然语言处理和多模态算法、算法框架能力方面研究获得了学术界认可。
|
存储 运维 监控
阿里云 SAE 助力修正商城 3 周内提升系统承载能力 20 倍,轻松应对春晚流量
在 2024 年春节前夕,修正电商事业部面临了前所未有的技术挑战,修正将参与春晚的全民健康好礼派发的活动,且在央视及各大平台进行广告投放,预计流量激增至 16 亿,系统需要承载保底 5 万 QPS,目标 10 万 QPS。修正技术团队迫切需要升级 APP 架构以应对即将到来的超高并发场景。这一挑战不仅是对技术的考验,更是对修正品牌实力的一次展示。为了应对这次巨大的技术挑战,修正技术团队选择与阿里云云原生团队合作,进行 APP 架构的升级。
22944 7

热门文章

最新文章