明略科技HAO图谱Open API:开放企业级知识图谱构建能力

简介: 首个语音实时生成图谱的企业级知识图谱开发工具包。

由深度学习掀起的这波 AI 浪潮极度依赖数据,经过 10 年的发展,深度学习在一些场景应用上已经面临瓶颈。业内有一种声音得到了大量认同:人工智能的进一步发展与突破,需要从感知智能向认知智能的突破,知识图谱能有效从数据中挖掘出知识,以更具可解释性的 AI 指导人类在更多复杂场景中的智能决策和行动。


7 月 11 日,在 2020 WAIC 世界人工智能大会上,明略科技 HAO 图谱,作为目前世界上第一个语音实时生成图谱的企业级知识图谱开发工具包,首次公开亮相,成功入围了大会最高奖项 SAIL 奖(Super AI Leader)TOP30 的项目及 2020 年度 SAIL 榜单。


明略科技首席科学家、明略科学院院长吴信东在开发者日:开发 · 开源 · 社区主题论坛上正式宣布 HAO 图谱依托国家新一代人工智能开放创新平台开放 Text2KG API 接口,赋能开发者和企业级用户。


负责 HAO 图谱具体研发工作的是明略科学院知识工程实验室,我们与实验室主任张杰博士进行了交流,他向我们介绍了明略科技的 HAO 图谱技术及应用落地。


HAO 图谱,源自于 2018 年明略科技提出的 HAO 智能理论框架。HAO 智能旨在集成人类智能(HI)、人工智能(AI)和组织智能(OI),打通感知、认知和行动系统,帮助企业和组织实现智能化发展。其中,HAO 图谱属于认知系统的范畴。


HAO 图谱,可以独立运行,也可交付给企业技术团队进行二次开发,核心模块包括语音流监听,语音转文本,标点预测,口语顺滑,文本补全,实体关系抽取,实体对齐,以及图谱话题切换。


微信图片_20211204005034.png


具体来说,HAO 图谱的输入为一维的文字序列或语音流,系统工作时分为如下几步:

  1. 逐句翻译,形成大图:首先将输入序列逐句的做实体识别和关系抽取,绘制成图结构,每新增一句,就在原有的图结构上增加新节点和新边;
  2. 篇章摘要,找到重点:当整段文本或语音输入结束后,再在篇章级大图谱上,根据节点的语义、图结构、位置等特征识别出重点节点和边;
  3. 关联背景知识:将重点节点和关系映射到后台的领域知识图谱上,利用领域知识图谱扩展其语义信息。领域图谱包括:由大量实例组成的数据图谱、由因果关系组成的因果图谱、由领域本体结构和领域词表组成的语义工具;
  4. 图谱增强的应用:针对领域内的特定场景需求,基于图谱做可视化交互、分类、检索、推荐、文本生成等特定任务。


目前 HAO 图谱开放的 Text2KG API 接口,提供了文本转图谱的能力,但后台还做了一些面对 PDF、PPT、word 等半结构化文档的信息抽取接 


知识图谱技术在产业界正经历着应用的高速增长,学术领域前沿成果与实际落地应用场景间依然存在着巨大的鸿沟,设计、开发、部署一套知识图谱系统,会面临数据标注、模型训练调优、高并发高可用等一系列问题。「目前业内仍缺少一个工业级的稳定工具,HAO 图谱是第一个语音实时生成图谱的企业级知识图谱开发工具包。」张杰表示。


在实际的知识图谱构建流程中,标注数据、训练模型需要花费大量时间。而 HAO 图谱很大程度上解决了上述问题,让数据分析师或者是建模人员集中精力在业务层,而底层的收集数据、标注数据、训练模型、数据抽取以及与后台关联可以通过调用 HAO 图谱 Text2KG API 完成,避免了大量的重复工作。「根据实际的企业用户使用情况来看,可以帮助开发者节约 60% 左右的时间。」张杰介绍。

HAO 图谱所提供的模型,既包含通用模型,也包含特定领域的模型,如汽车、奶粉、美妆等。通过 API 接口,使用已经训练好的开放域模型和特定领域模型,开发者可以集中精力在使用知识图谱解决实际的业务问题上。


知识图谱的应用涉及可视化、分类、检索、推荐和生成。目前,HAO 图谱已经被广泛应用在社交舆情分析、销售技能培训、金融交易反欺诈、案情研判、设备维护、城市及园区管理等不同场景。


在推荐领域,将领域知识有效融入算法,提高推断准确率一直是研究的难点之一。知识图谱,可将人类专家经验和规则,以及大量来自互联网、各个产业生产中获得的数据,有机结合,通过对不同实体(节点)之间关系的进行分析,获得洞察。「知识图谱蕴含一定的可解释性,因果关系相对比较明确,这一特点让它在金融、轨交、电力、公共安全等行业中得以较快落地。」


在社交媒体舆情分析场景中,基于知识图谱,可以把用户产生的评论,与后台已有的品牌数据结合,对产品特性进行观察,分析特定维度的用户舆情走势,随后把这些结果整合到 BI 系统,为运营人员提供用户需求洞察。在此基础之上,实现千人千面的个性化广告。


在智能导购场景中,比如,销售人员通过佩戴明略的智能工牌,在保障用户隐私和数据安全的前提下,将销售对话转为文字,进行话题分类,形成一个话题转移的知识图谱,计算出话题之间转移的概率,帮助销售人员复盘,分析流单的主要环节,改善话题转移和引导,提高成单率。


总之,HAO 图谱可以把企业数据按照业务逻辑抽象为陈述性知识或过程性知识,生成数据洞察以更易使用的方式为业务服务。「通过历史数据的分析和行业专家先验知识的输入,知识图谱可以很大程度上把行业知识复现出来,并实现能力的复用,明略科技能够在历史数据达到 10PB 级、日均增量数据超过 10TB 的环境下进行数据价值的挖掘,实现毫秒级的预测性分析,结合行业知识图谱形成决策和行动。」


目前,在企业智能化服务领域,明略科技已成长为一家明星公司。去年 8 月,明略科技成为第二批「国家新一代人工智能开放创新平台」建设单位,以开放、创新、共享为基本原则,持续建设软件与硬件平台、开源社区平台、培训平台,构建人工智能众创平台和标准验证实验室,设立人工智能产业基金,全面打造平台生态体系。HAO 图谱 Text2KG API 已在明略科技国家新一代人工智能开放创新平台官网上线。

文为机器之心报道,转载请联系本公众号获得授权

✄------------------------------------------------

相关文章
|
12天前
|
缓存 JavaScript 前端开发
深入浅出:使用Node.js构建RESTful API
【9月更文挑战第3天】在数字化浪潮中,后端开发如同搭建一座连接用户与数据的桥梁。本文将带领读者从零开始,一步步用Node.js搭建一个功能完备的RESTful API。我们将探索如何设计API的结构、处理HTTP请求以及实现数据的CRUD操作,最终通过一个简单的实例,展示如何在真实世界中应用这些知识。无论你是初学者还是有一定经验的开发者,这篇文章都会为你揭示后端开发的奥秘,让你轻松入门并掌握这一技能。
32 3
|
4天前
|
Go API 开发者
深入探讨:使用Go语言构建高性能RESTful API服务
在本文中,我们将探索Go语言在构建高效、可靠的RESTful API服务中的独特优势。通过实际案例分析,我们将展示Go如何通过其并发模型、简洁的语法和内置的http包,成为现代后端服务开发的有力工具。
|
3天前
|
JSON API 数据库
使用Python和Flask构建简单的RESTful API
使用Python和Flask构建简单的RESTful API
13 6
|
5天前
|
JSON 安全 API
构建高效后端API的五大原则
【9月更文挑战第10天】在数字化时代,后端API成为了连接用户与服务、实现数据流动的重要桥梁。本文将深入探讨如何设计并构建一个高效、可扩展且安全的后端API系统。我们将从RESTful架构开始,逐步深入到错误处理、安全性、性能优化和文档编写等方面,为读者提供一套完整的后端API构建指南。无论你是初学者还是有经验的开发者,这篇文章都将为你带来新的视角和思考。
|
7天前
|
JavaScript 测试技术 API
探索后端开发:构建高效API的艺术
【9月更文挑战第8天】本文旨在揭示后端开发中一个经常被忽视的领域——API设计。通过深入浅出的方式,我们将探讨如何构建一个既高效又易于维护的API。文章将涵盖设计原则、最佳实践以及一些常见的陷阱和解决方案。无论你是初学者还是有经验的开发者,这篇文章都将为你提供宝贵的见解和实用的技巧,帮助你在后端开发的道路上更进一步。
|
6天前
|
设计模式 测试技术 API
Micronaut魔法书:揭秘构建超光速RESTful API的绝密技术!
【9月更文挑战第10天】在现代Web开发中,构建RESTful API至关重要。Micronaut作为一款轻量级框架,能够快速创建高效API。本文探讨使用Micronaut构建RESTful API的最佳设计模式与实践,涵盖注解(如`@Controller`、`@Get`)、代码组织、REST原则、数据验证及测试等方面,帮助开发者构建结构清晰、可维护性强的API服务。示例代码展示了如何使用Micronaut实现用户管理API,强调了良好设计模式的重要性。
20 3
|
6天前
|
存储 安全 API
探索后端开发:构建高效API的艺术
【9月更文挑战第9天】在数字时代的浪潮中,后端开发如同一位默默无闻的艺术家,精心雕琢着每一个数据交互的细节。本文将带你走进后端的世界,从基础概念到实战技巧,一起学习如何打造高效、稳定且易于扩展的API。我们将通过深入浅出的方式,探讨后端开发的哲学与实践,让你在编码之旅中,找到属于自己的节奏和和谐。让我们一起跟随代码的脚步,解锁后端开发的无限可能。
|
10天前
|
缓存 Java 应用服务中间件
随着微服务架构的兴起,Spring Boot凭借其快速开发和易部署的特点,成为构建RESTful API的首选框架
【9月更文挑战第6天】随着微服务架构的兴起,Spring Boot凭借其快速开发和易部署的特点,成为构建RESTful API的首选框架。Nginx作为高性能的HTTP反向代理服务器,常用于前端负载均衡,提升应用的可用性和响应速度。本文详细介绍如何通过合理配置实现Spring Boot与Nginx的高效协同工作,包括负载均衡策略、静态资源缓存、数据压缩传输及Spring Boot内部优化(如线程池配置、缓存策略等)。通过这些方法,开发者可以显著提升系统的整体性能,打造高性能、高可用的Web应用。
33 2
|
15天前
|
存储 JSON API
构建高效后端API:实践与思考
【8月更文挑战第31天】本文深入探讨如何打造一个高效、可靠的后端API。我们将通过实际案例,揭示设计原则、开发流程及性能优化的关键步骤。文章不仅提供理论指导,还附带代码示例,旨在帮助开发者构建更优的后端服务。
|
13天前
|
JSON JavaScript 中间件
深入浅出Node.js: 从零开始构建RESTful API
【8月更文挑战第34天】 在数字时代的浪潮中,掌握如何构建高效、可靠的后端服务是每一位开发者的必备技能。本文将通过浅显易懂的语言和实际代码示例,带领初学者走进Node.js的世界,一步步搭建起自己的RESTful API。无论你是编程新手,还是想扩展技术栈的老手,这篇文章都将是你的良师益友。让我们一起探索Node.js的魅力,开启后端开发之旅!