【干货】微软SIGIR 2016演讲:基于但不限于知识库、万维网的问答系统

简介: 今天为大家推荐的是SIGIR 2016大会上,来自微软研究院自然语言处理方向的两位研究员——Scott Wen-tau Yih和Hao Ma的分享。 研讨会的主题是“基于但不限于知识库、万维网的问答系统”(Question Answering with Knowledge Base, Web and Beyond)。

今天为大家推荐的是SIGIR 2016大会上,来自微软研究院自然语言处理方向的两位研究员——Scott Wen-tau Yih和Hao Ma的分享。


研讨会的主题是“基于但不限于知识库、万维网的问答系统”(Question Answering with Knowledge Base, Web and Beyond)。


研讨会从搜索引擎的发展历程出发,以微软搜索引擎——Bing为例,从最初基于文字搜索的问答系统,发展到了以Cortana为代表的基于对话的问答系统。


15aef5fd74abed55a2e889a0f364689da9dda121


而这背后基于的原理都是如何让机器去更好的理解自然语言,比如可以用自然语言和用户交流的通用语言处理器,有效可以处理陈述句式或问句等。


da4b477a62213798572e44330d05f0811cbd45ed


现代问答系统中常见的问题分类主要有——


· 事实类问题:

    基于实体客观事实的信息查询;

    竞技类信息


· 描述性问题:

    观点类或指导性查询(例如“如何做”的问题)


· 多模式问题

    基于视觉的问答

    旅行助手


· 人工智能的能力测试

    阅读理解

    小学水平的科学或数学知识测试等


dd0807ee0b9f75476b7aac7ae7405fd56cff44d5


目前,在技术层面,搜索问答系统主要有以下几个方面的挑战——


· 问题分析:包括回答类型、格子填充、语义分析等

· 文本/数据分析

· 意译&匹配:包括如何处理问题的差异性、本体匹配等

· 搜索复杂度

a4cc5794b65b97a50addce35fabade8cd32ab72a


基于上述这些问题,研讨会的内容主要分为以下几个部分:


· 基于知识库的问答系统

    现代大规模知识库的介绍

    数据集和最先进的方法论


· 基于万维网的问答系统

    问题的设定与一般系统架构

    关键语言分析

    其他信息源的利用


· 测试机器智能的问答系统

    阅读理解

    推理测试


864c2a471b82c7e13873b0e56f6a58d97dc2dd5e

本文来源于"中国人工智能学会",原文发表时间"2016-07-14"

相关文章
|
9月前
|
自然语言处理 API 数据安全/隐私保护
通过阿里云Milvus和通义千问快速构建基于专属知识库的问答系统
本文展示了如何使用阿里云向量检索 Milvus 版和灵积(Dashscope)提供的通用千问大模型能力,快速构建一个基于专属知识库的问答系统。在示例中,我们通过接入灵积的通义千问 API 及文本嵌入(Embedding)API 来实现 LLM 大模型的相关功能。
通过阿里云Milvus和通义千问快速构建基于专属知识库的问答系统
|
9月前
|
Linux 异构计算 Docker
QAnything本地知识库问答系统:基于检索增强生成式应用(RAG)两阶段检索、支持海量数据、跨语种问答
QAnything本地知识库问答系统:基于检索增强生成式应用(RAG)两阶段检索、支持海量数据、跨语种问答
QAnything本地知识库问答系统:基于检索增强生成式应用(RAG)两阶段检索、支持海量数据、跨语种问答
|
人工智能 自然语言处理 算法
秒级开通,仅60元/月,即刻畅享私域知识库+LLM智能问答系统
chatGPT等LLM发展如火如荼,但实际使用中,时常出现胡说八道的问题。究其原因,是因为LLM存在知识茧房短板:模型一旦训练完成,对于数据样本外的知识知之甚少,在涉及企业私域知识等场景的问答效果不佳。由此,业界通常使用知识库+LLM方式来解决。部署LLM需要GPU,成本高昂。鉴于此,阿里云Lindorm多模数据库推出了智能问答体验版,秒级开通,仅60元/月。支持用户直接上传知识库文件,便捷构建具备私域知识+LLM的智能问答系统。欢迎加入钉钉群:35977898。参与功能试用和讨论。
734 3
秒级开通,仅60元/月,即刻畅享私域知识库+LLM智能问答系统
|
存储 人工智能 自然语言处理
领域知识图谱-中式菜谱知识图谱:实现知识图谱可视化和知识库智能问答系统(KBQA)
领域知识图谱-中式菜谱知识图谱:实现知识图谱可视化和知识库智能问答系统(KBQA)
领域知识图谱-中式菜谱知识图谱:实现知识图谱可视化和知识库智能问答系统(KBQA)
|
9天前
|
人工智能 资源调度 API
AnythingLLM:34K Star!一键上传文件轻松打造个人知识库,构建只属于你的AI助手,附详细部署教程
AnythingLLM 是一个全栈应用程序,能够将文档、资源转换为上下文,支持多种大语言模型和向量数据库,提供智能聊天功能。
2425 14
|
1月前
|
人工智能 搜索推荐 开发工具
24.7K Star!用 KHOJ 打造你的AI第二大脑,自动整合和更新多源知识,轻松构建个人知识库
KHOJ 是一款开源的个人化 AI 助手,支持多源知识整合、语义搜索、个性化图像生成等功能,帮助用户高效管理知识库。
365 23
24.7K Star!用 KHOJ 打造你的AI第二大脑,自动整合和更新多源知识,轻松构建个人知识库
|
2月前
|
机器学习/深度学习 人工智能 自然语言处理
PeterCat:一键创建开源项目 AI 问答机器人,自动抓取 GitHub 仓库信息、文档和 issue 等构建知识库
PeterCat 是一款开源的智能答疑机器人,能够自动抓取 GitHub 上的文档和 issue 构建知识库,提供对话式答疑服务,帮助开发者和社区维护者高效解决技术问题。
188 7
PeterCat:一键创建开源项目 AI 问答机器人,自动抓取 GitHub 仓库信息、文档和 issue 等构建知识库

热门文章

最新文章