明略科技HAO图谱Open API:开放企业级知识图谱构建能力

简介: 首个语音实时生成图谱的企业级知识图谱开发工具包。

由深度学习掀起的这波 AI 浪潮极度依赖数据,经过 10 年的发展,深度学习在一些场景应用上已经面临瓶颈。业内有一种声音得到了大量认同:人工智能的进一步发展与突破,需要从感知智能向认知智能的突破,知识图谱能有效从数据中挖掘出知识,以更具可解释性的 AI 指导人类在更多复杂场景中的智能决策和行动。


7 月 11 日,在 2020 WAIC 世界人工智能大会上,明略科技 HAO 图谱,作为目前世界上第一个语音实时生成图谱的企业级知识图谱开发工具包,首次公开亮相,成功入围了大会最高奖项 SAIL 奖(Super AI Leader)TOP30 的项目及 2020 年度 SAIL 榜单。


明略科技首席科学家、明略科学院院长吴信东在开发者日:开发 · 开源 · 社区主题论坛上正式宣布 HAO 图谱依托国家新一代人工智能开放创新平台开放 Text2KG API 接口,赋能开发者和企业级用户。


负责 HAO 图谱具体研发工作的是明略科学院知识工程实验室,我们与实验室主任张杰博士进行了交流,他向我们介绍了明略科技的 HAO 图谱技术及应用落地。


HAO 图谱,源自于 2018 年明略科技提出的 HAO 智能理论框架。HAO 智能旨在集成人类智能(HI)、人工智能(AI)和组织智能(OI),打通感知、认知和行动系统,帮助企业和组织实现智能化发展。其中,HAO 图谱属于认知系统的范畴。


HAO 图谱,可以独立运行,也可交付给企业技术团队进行二次开发,核心模块包括语音流监听,语音转文本,标点预测,口语顺滑,文本补全,实体关系抽取,实体对齐,以及图谱话题切换。


微信图片_20211204005034.png


具体来说,HAO 图谱的输入为一维的文字序列或语音流,系统工作时分为如下几步:

  1. 逐句翻译,形成大图:首先将输入序列逐句的做实体识别和关系抽取,绘制成图结构,每新增一句,就在原有的图结构上增加新节点和新边;
  2. 篇章摘要,找到重点:当整段文本或语音输入结束后,再在篇章级大图谱上,根据节点的语义、图结构、位置等特征识别出重点节点和边;
  3. 关联背景知识:将重点节点和关系映射到后台的领域知识图谱上,利用领域知识图谱扩展其语义信息。领域图谱包括:由大量实例组成的数据图谱、由因果关系组成的因果图谱、由领域本体结构和领域词表组成的语义工具;
  4. 图谱增强的应用:针对领域内的特定场景需求,基于图谱做可视化交互、分类、检索、推荐、文本生成等特定任务。


目前 HAO 图谱开放的 Text2KG API 接口,提供了文本转图谱的能力,但后台还做了一些面对 PDF、PPT、word 等半结构化文档的信息抽取接 


知识图谱技术在产业界正经历着应用的高速增长,学术领域前沿成果与实际落地应用场景间依然存在着巨大的鸿沟,设计、开发、部署一套知识图谱系统,会面临数据标注、模型训练调优、高并发高可用等一系列问题。「目前业内仍缺少一个工业级的稳定工具,HAO 图谱是第一个语音实时生成图谱的企业级知识图谱开发工具包。」张杰表示。


在实际的知识图谱构建流程中,标注数据、训练模型需要花费大量时间。而 HAO 图谱很大程度上解决了上述问题,让数据分析师或者是建模人员集中精力在业务层,而底层的收集数据、标注数据、训练模型、数据抽取以及与后台关联可以通过调用 HAO 图谱 Text2KG API 完成,避免了大量的重复工作。「根据实际的企业用户使用情况来看,可以帮助开发者节约 60% 左右的时间。」张杰介绍。

HAO 图谱所提供的模型,既包含通用模型,也包含特定领域的模型,如汽车、奶粉、美妆等。通过 API 接口,使用已经训练好的开放域模型和特定领域模型,开发者可以集中精力在使用知识图谱解决实际的业务问题上。


知识图谱的应用涉及可视化、分类、检索、推荐和生成。目前,HAO 图谱已经被广泛应用在社交舆情分析、销售技能培训、金融交易反欺诈、案情研判、设备维护、城市及园区管理等不同场景。


在推荐领域,将领域知识有效融入算法,提高推断准确率一直是研究的难点之一。知识图谱,可将人类专家经验和规则,以及大量来自互联网、各个产业生产中获得的数据,有机结合,通过对不同实体(节点)之间关系的进行分析,获得洞察。「知识图谱蕴含一定的可解释性,因果关系相对比较明确,这一特点让它在金融、轨交、电力、公共安全等行业中得以较快落地。」


在社交媒体舆情分析场景中,基于知识图谱,可以把用户产生的评论,与后台已有的品牌数据结合,对产品特性进行观察,分析特定维度的用户舆情走势,随后把这些结果整合到 BI 系统,为运营人员提供用户需求洞察。在此基础之上,实现千人千面的个性化广告。


在智能导购场景中,比如,销售人员通过佩戴明略的智能工牌,在保障用户隐私和数据安全的前提下,将销售对话转为文字,进行话题分类,形成一个话题转移的知识图谱,计算出话题之间转移的概率,帮助销售人员复盘,分析流单的主要环节,改善话题转移和引导,提高成单率。


总之,HAO 图谱可以把企业数据按照业务逻辑抽象为陈述性知识或过程性知识,生成数据洞察以更易使用的方式为业务服务。「通过历史数据的分析和行业专家先验知识的输入,知识图谱可以很大程度上把行业知识复现出来,并实现能力的复用,明略科技能够在历史数据达到 10PB 级、日均增量数据超过 10TB 的环境下进行数据价值的挖掘,实现毫秒级的预测性分析,结合行业知识图谱形成决策和行动。」


目前,在企业智能化服务领域,明略科技已成长为一家明星公司。去年 8 月,明略科技成为第二批「国家新一代人工智能开放创新平台」建设单位,以开放、创新、共享为基本原则,持续建设软件与硬件平台、开源社区平台、培训平台,构建人工智能众创平台和标准验证实验室,设立人工智能产业基金,全面打造平台生态体系。HAO 图谱 Text2KG API 已在明略科技国家新一代人工智能开放创新平台官网上线。

文为机器之心报道,转载请联系本公众号获得授权

✄------------------------------------------------

相关文章
|
26天前
|
机器学习/深度学习 人工智能 自然语言处理
GLM-4V-Flash:智谱 AI 免费开放的图像理解大模型 API 接口
智谱AI推出的GLM-4V-Flash是一款专注于图像理解的免费开放大模型,提供API接口支持用户上传图片URL或Base64编码图片获取详细的图像描述。该模型通过深度学习和卷积神经网络技术,简化了图像分析流程,提高了开发效率,适用于内容审核、辅助视障人士、社交媒体、教育和电子商务等多个应用场景。
132 14
GLM-4V-Flash:智谱 AI 免费开放的图像理解大模型 API 接口
|
9天前
|
安全 API 数据安全/隐私保护
自学记录HarmonyOS Next DRM API 13:构建安全的数字内容保护系统
在完成HarmonyOS Camera API开发后,我深入研究了数字版权管理(DRM)技术。最新DRM API 13提供了强大的工具,用于保护数字内容的安全传输和使用。通过学习该API的核心功能,如获取许可证、解密内容和管理权限,我实现了一个简单的数字视频保护系统。该系统包括初始化DRM模块、获取许可证、解密视频并播放。此外,我还配置了开发环境并实现了界面布局。未来,随着数字版权保护需求的增加,DRM技术将更加重要。如果你对这一领域感兴趣,欢迎一起探索和进步。
66 18
|
2月前
|
JSON 缓存 JavaScript
深入浅出:使用Node.js构建RESTful API
在这个数字时代,API已成为软件开发的基石之一。本文旨在引导初学者通过Node.js和Express框架快速搭建一个功能完备的RESTful API。我们将从零开始,逐步深入,不仅涉及代码编写,还包括设计原则、最佳实践及调试技巧。无论你是初探后端开发,还是希望扩展你的技术栈,这篇文章都将是你的理想指南。
|
1月前
|
JSON JavaScript 前端开发
深入浅出Node.js:从零开始构建RESTful API
在数字化时代的浪潮中,后端开发作为连接用户与数据的桥梁,扮演着至关重要的角色。本文将引导您步入Node.js的奇妙世界,通过实践操作,掌握如何使用这一强大的JavaScript运行时环境构建高效、可扩展的RESTful API。我们将一同探索Express框架的使用,学习如何设计API端点,处理数据请求,并实现身份验证机制,最终部署我们的成果到云服务器上。无论您是初学者还是有一定基础的开发者,这篇文章都将为您打开一扇通往后端开发深层知识的大门。
46 12
|
1月前
|
网络协议 API
检测指定TCP端口开放状态免费API接口教程
此API用于检测指定TCP端口是否开放,支持POST/GET请求。需提供用户ID、KEY、目标主机,可选指定端口(默认80)和地区(默认国内)。返回状态码、信息提示、检测主机、端口及状态(开放或关闭)。示例中ID和KEY为公共测试用,建议使用个人ID和KEY以享受更高调用频率。
55 14
|
2月前
|
监控 安全 API
深入浅出:构建高效RESTful API的最佳实践
在数字化时代,API已成为连接不同软件和服务的桥梁。本文将带你深入了解如何设计和维护一个高效、可扩展且安全的RESTful API。我们将从基础概念出发,逐步深入到高级技巧,让你能够掌握创建优质API的关键要素。无论你是初学者还是有经验的开发者,这篇文章都将为你提供实用的指导和启示。让我们一起探索API设计的奥秘,打造出色的后端服务吧!
|
2月前
|
JSON 缓存 测试技术
构建高效RESTful API的后端实践指南####
本文将深入探讨如何设计并实现一个高效、可扩展且易于维护的RESTful API。不同于传统的摘要概述,本节将直接以行动指南的形式,列出构建RESTful API时必须遵循的核心原则与最佳实践,旨在为开发者提供一套直接可行的实施框架,快速提升API设计与开发能力。 ####
|
2月前
|
JavaScript NoSQL API
深入浅出Node.js:从零开始构建RESTful API
在数字化时代的浪潮中,后端开发如同一座灯塔,指引着数据的海洋。本文将带你航行在Node.js的海域,探索如何从一张白纸到完成一个功能完备的RESTful API。我们将一起学习如何搭建开发环境、设计API结构、处理数据请求与响应,以及实现数据库交互。准备好了吗?启航吧!
|
2月前
|
JSON API 数据格式
探索后端开发:从零构建简易RESTful API
在数字时代的浪潮中,后端开发如同搭建一座桥梁,连接着用户界面与数据世界。本文将引导读者步入后端开发的殿堂,通过构建一个简易的RESTful API,揭示其背后的逻辑与魅力。我们将从基础概念出发,逐步深入到实际操作,不仅分享代码示例,更探讨如何思考和解决问题,让每一位读者都能在后端开发的道路上迈出坚实的一步。
|
2月前
|
JSON 前端开发 API
使用Python和Flask构建简易Web API
使用Python和Flask构建简易Web API
120 3