图扑软件联手阿里 Lindorm 数据库开启工业物联超融合存储模式

本文涉及的产品
可观测监控 Prometheus 版,每月50GB免费额度
简介: 阿里云原生多模数据库Lindorm针对工业物联网数据高并发写入,实时存取等特点,创新性地融合时序、索引、宽表等多模引擎能力,为存储、分析低价值密度、高通量、高实时性的工业物联网监控数据提供了高性价比的最优解决方案,大幅度降低了数据存储和存储系统运维成本。

阿里云原生多模数据库Lindorm针对工业物联网数据高并发写入,实时存取等特点,创新性地融合时序、索引、宽表等多模引擎能力,为存储、分析低价值密度、高通量、高实时性的工业物联网监控数据提供了高性价比的最优解决方案,大幅度降低了数据存储和存储系统运维成本。

image.png

图1 阿里云Lindorm数据库驱动的IT运维监控系统

客户简介

图扑软件成立于 2013 年,总部位于厦门,在北京、上海、天津、大连、 青岛等地设有分支机构。公司聚焦工业物联网监控运维可视化应用领域,为客户提供从咨询、设计、实施到售后的全方位可视化管理支持服务。图扑软件专注基于Web 的 2D 和 3D 图形界面组件技术,致力于让完全独立自主知识产权的 HT for Web 软件走向世界之巅。公司系列产品 HT for Web 已应用于电信、电力、交通、水利、石化、制造、医疗、工控等行业场景。

业务要求与挑战

5G、云计算、边缘计算等智能、互联技术的快速发展,推动了工业物联网IIoT场景下各种软件、硬件传感器数量激增,与之对映的采集数据量和数据类型快速增长,导致数据存储、检索难度更大。现有解决方案中,通常依赖自建单ElasticSearch检索引擎或OpenTSDB、Prometheus等时序引擎搭建数据存储,而采集数据类型多样化使得单模引擎存储方案技术复杂且运维成本高,市场需要新一代云原生且具备多模检索能力的存储系统。

某著名IT咨询公司预测,工业物联网市场规模在2025年可能达到3.7万亿美元,但统计数据显示,现在只有不到30%的供应商从中盈利,大多数企业都陷入了技术陷阱之中。新技术在创造新机遇带动产业升级的同时也带来了新的技术挑战,更加复杂的系统架构和更高的性能、稳定性要求制约了工业物联网系统实施落地,企业需要专业技术公司来帮助解决数据采集、传输、存储、分析及可视化全链数据处理系统建设难点。

解决方案

厦门图扑软件致力于解决工业物联网全链路数据处理最后一公里的数据可视化环节技术难点。面向工业物联网IIoT场景,图扑软件提供监控系统监控可视化解决方案,其产品可用于快速创建和部署,高度可定制化,并具有强大交互功能的拓扑图形及表盘图表等应用,非常适用于实时监控系统的界面呈现,广泛应用于电信网络拓扑和设备管理,以及电力、燃气等工业自动化 (HMI/SCADA) 领域。

对于需要实时采集海量数据的生产线、风电厂和智能交通态势感知数据的场景,为了实现实时数据采集、存储、索引和聚合,原存储方案中采用了ElasticSearch、Prometheus、Hbase分别存储从现场传感器、第三方系统和用户终端设备采集的时序指标、日志、用户体验、网络流量等数据,随着数据量增加,可视化展示界面场景复杂化,数据存储和运维成本激增,检索难度快速上升,严重制约了交付效果。

image.png

图2 数据存储系统改造前后方案对比

针对存储层面临的问题,厦门图扑软件基于阿里云Lindorm云原生多模数据库改造存储层架构,以单库多模超融合模式存储全量采集的监控数据(技术方案对比如图2所示),极大地简化了存储层架构,进而降低了运维成本。利用Lindorm自研的数据压缩存储和存储优化能力,海量低价值密度的监控数据存储成本也有大幅度降低。

为适应日趋复杂化多样化的终端设备、边缘设备、传感器以及第三方系统数据源采集、上报的异构数据,如图3所示,阿里云Lindorm在云端单实例融合了宽表、索引、时序等多种数据引擎能力,通过阿里云DTS/DMS或第三方开源数据交换/ETL软件(如Apache nifi、Sqoop等)打通多引擎数据交互通道,根据应用场景业务来适配数据。面向上层数据可视化、分析系统,Lindorm提供更为便捷的开发期SDK和REST API数据对接方案,同时兼容OpenTSDB、Prometheus、Hbase等原生接口,无缝对接主流生态,进一步简化了图扑软件集成部署成本。

image.png

图3 阿里云Lindorm多模数据融合存储架构

适用场景:

实时场景监控大屏展现

态势感知及风险监控

设备监控数据探伤检测

故障数据全量回溯分析

AI辅助异常检测等场景

客户价值:

超融合存储海量异构数据,大幅降低工业物联网场景数据存储、聚合成本;

高性能、高通量监控数据入库,提升可视化大屏数据时效性;

提供99.95% 高可靠性,保障业务持续稳定运行;

云端接入遍在可达,简化网络配置管理;

开箱即用免维护,进一步降低系统维护成本;

兼容OpenTSDB、Prometheus接口,无缝对接主流生态;

建设效果

目前图扑软件联合阿里云端支撑某行业领先泛在电力物联网及智能楼宇行业客户实现终端设备传感器云端数据采集、存储、检索,实现并发量100万TPS以上的传感器采集数据的并发写入,最高存储时序时间线40万能力,节约数据存储和系统维护成本达6成,实现效果如图4、图5所示。

image.png

图4 泛在电力物联网监控系统建设效果
图5 智能楼宇场景监控监控系统建设效果

来源: 阿里巴巴数据库技术 微信公众号
原文链接:https://mp.weixin.qq.com/s/EHOAhRdBlIUrxZZthKXgxQ

相关实践学习
钉钉群中如何接收IoT温控器数据告警通知
本实验主要介绍如何将温控器设备以MQTT协议接入IoT物联网平台,通过云产品流转到函数计算FC,调用钉钉群机器人API,实时推送温湿度消息到钉钉群。
阿里云AIoT物联网开发实战
本课程将由物联网专家带你熟悉阿里云AIoT物联网领域全套云产品,7天轻松搭建基于Arduino的端到端物联网场景应用。 开始学习前,请先开通下方两个云产品,让学习更流畅: IoT物联网平台:https://iot.console.aliyun.com/ LinkWAN物联网络管理平台:https://linkwan.console.aliyun.com/service-open
相关文章
|
17天前
|
SQL 数据采集 监控
局域网监控电脑屏幕软件:PL/SQL 实现的数据库关联监控
在当今网络环境中,基于PL/SQL的局域网监控系统对于企业和机构的信息安全至关重要。该系统包括屏幕数据采集、数据处理与分析、数据库关联与存储三个核心模块,能够提供全面而准确的监控信息,帮助管理者有效监督局域网内的电脑使用情况。
15 2
|
1月前
|
存储 关系型数据库 MySQL
PACS系统 中 dicom 文件在mysql 8.0 数据库中的 存储和读取(pydicom 库使用)
PACS系统 中 dicom 文件在mysql 8.0 数据库中的 存储和读取(pydicom 库使用)
27 2
|
2月前
|
存储 SQL 专有云
支持配置审计日志的存储数据库
审计日志作为企业监管平台的重要依据,同时也是“等保三级”认证的必要考察项之一。Dataphin V4.3版本支持设置平台日志的存储数据源,帮助用户快速获取审计日志,同时介绍了不同部署模式的Dataphin如何查看审计日志的方法。
112 5
|
2月前
|
存储 NoSQL 关系型数据库
可以存储文件的数据库有哪些?
可以存储文件的数据库有哪些?
98 6
|
2月前
|
存储 NoSQL 关系型数据库
可以存储文件的数据库有哪些?
可以存储文件的数据库有哪些?
461 0
|
3月前
|
SQL Oracle 关系型数据库
DBeaver,一款好用的开源数据库管理软件
DBeaver,一款好用的开源数据库管理软件
|
3月前
|
存储 C# 关系型数据库
“云端融合:WPF应用无缝对接Azure与AWS——从Blob存储到RDS数据库,全面解析跨平台云服务集成的最佳实践”
【8月更文挑战第31天】本文探讨了如何将Windows Presentation Foundation(WPF)应用与Microsoft Azure和Amazon Web Services(AWS)两大主流云平台无缝集成。通过具体示例代码展示了如何利用Azure Blob Storage存储非结构化数据、Azure Cosmos DB进行分布式数据库操作;同时介绍了如何借助Amazon S3实现大规模数据存储及通过Amazon RDS简化数据库管理。这不仅提升了WPF应用的可扩展性和可用性,还降低了基础设施成本。
81 0
|
5月前
|
存储 SQL 多模数据库
多模数据库Lindorm再升级:对接Dataphin,打通数据治理“最后一公里”
Lindorm通过与Dataphin的深度整合,进一步解决了数据集成和数据治理的问题,为企业提供更加高效和更具性价比的方案。
多模数据库Lindorm再升级:对接Dataphin,打通数据治理“最后一公里”
|
4月前
|
安全 数据管理
DataphinV4.1大升级:支持Lindorm开启高性价比数据治理,迎来“公共云半托管”云上自助新模式
DataphinV4.1大升级:支持Lindorm开启高性价比数据治理,迎来“公共云半托管”云上自助新模式
|
5月前
|
数据采集 安全 API
DataphinV4.1大升级: 支持Lindorm开启高性价比数据治理,迎来“公共云半托管”云上自助新模式
Dataphin 是阿里巴巴旗下的一个智能数据建设与治理平台,旨在帮助企业构建高效、可靠、安全的数据资产。在V4.1版本升级中,Dataphin 引入了Lindorm等多项新功能,并开启公共云半托管模式,优化代码搜索,为用户提供更加高效、灵活、安全的数据管理和运营环境,提升用户体验,促进企业数据资产的建设和价值挖掘。
1552 3
DataphinV4.1大升级: 支持Lindorm开启高性价比数据治理,迎来“公共云半托管”云上自助新模式

热门文章

最新文章