基于阿里云HiTSDB搭建工业物联网平台实践

本文涉及的产品
服务治理 MSE Sentinel/OpenSergo,Agent数量 不受限
简介: 基于阿里云全面的物联网、云计算与大数据技术搭建云端的企业能源管理物联网平台实现能耗数据采集、统计分析、平衡调度、节能优化等全面的能源管控协同平台。是企业生产运行保障的利器,也是大量企业实现云上管理的实践案例。

背景
工业企业的能耗占了全社会能耗的绝大多数,本方案基于阿里云全面的物联网、云计算与大数据技术搭建云端的企业能源管理物联网平台实现能耗数据采集、统计分析、平衡调度、节能优化等全面的能源管控协同平台。是企业生产运行保障的利器,也是大量企业实现云上管理的实践案例。

本方案有健壮的体系,实用的功能。尤其HiTSDB能轻松应对千万级工业传感器数据接入的能力,成为平台方案的亮点。

产品详情关注:https://promotion.aliyun.com/ntms/act/hitsdbdebute2018.html

平台架构

  • 边缘计算:
    采集的工业数据上传到阿里云的物联网套件,中间经过了MQTT协议的可靠传输。
  • 数据采集层:
    IOT Hub负责解析MQTT协议。为保证数据安全性,通过规则引擎转发到DataHub数据总线中,在Datahub中保留7天,确保数据不丢失。
  • 数据计算层:
    DataHub的数据会转发到MaxCompute中,这部分数据用于离线计算,离线计算结果存入关系型数据库。

Streaming实时计算模块,主要包括两方面功能:一是从DataHub读取实时数据解析、清洗后存储到HiTSDB中;一是通过实时数据计算企业设备的运行状态,相关计算结果也是存入关系数据库中。目前阿里云也提供了StreamComputer流计算产品可以和HiTSDB 进行无缝对接。

  • 数据应用层
    数据应用层基于HiTSDB和关系型两种数据源,提供各种应用产品服务。

HiTSDB在架构的核心作用

HiTSDB在整个架构中处于中枢地位,启动承上启下的作用。

  • 工业时序数据的存储场景,设备规模大,指标多样,精度高,HiTSDB可以支撑每秒千万的数据指标值的写入。通过压缩技术增加写入吞如,降低存储成本支撑平台海量工业数据存储需求。
  • 满足业务系统数据查询的功能和性能需求,由于业务产品需求,需经常对历史时序数据进行查询或聚合查询(如avg、max、min、first、last等),对响应时间有较高的要求。HiTSDB可以支撑百万级别的数据请求计算,平均RT小于1秒。
  • 为数据分析挖掘(能耗预测、设备诊断、生产优化等)提供稳定的基础数据源。

选择HiTSDB的优势:

  • 相比较社区开源的OpenTSDB整体性能提升10-50倍,提供99.9%的服务可靠性保证,更少的运维成本。
  • 好用的数据库管理、监控、查询的可视化界面。
  • 与阿里云其它云产品的数据无缝流转。与物联网套件IotHub的数据通道,实现从设备流转过来的数据经过物联网套件的无缝流入HiTSDB存储。如果数据需要经过特定的业务逻辑进行实时的计算,也可以通过StreamComputer计算,将计算结果无缝流入到HiTSDB。

业务应用功能

  • 能效看板
    能效看板模块将全厂及各二级单位的能效水平和波动情况可视化,为企业管理者展现能量系统健康状况的综合信息,使能源利用状况一目了然。
  • 在线监测
    在线监测模块将全厂能源流向消耗情况、生产设备启停状态、电力系统、蒸汽系统、水系统、的计量瞬时值可视化。该模块可将这些能耗相关数据实时显示在操作终端上,是实现企业信息化和生产过程透明化的关键步骤之一,避免关键数据出现“信息孤岛”,大幅提高生产效率,减少生产波动和减少人为浪费。
  • 告警追溯
    告警追溯模块可对能耗异常的车间、生产线或重点耗能设备进行直观展示,同时可自上而下追溯到出现能耗异常的设备及其运行工况参数。当重点用能设备、生产线或车间的能耗或能效指标(单耗)超出限额时,可在时间和空间维度上,按照时间->地点->事件的思路进行追溯。
  • 能耗预测
    能耗预测模块可根据企业生产的历史数据趋势情况,综合生产计划、用能负荷等因素,预测未来一段时间的能耗水平,同时对可中断设备用能负荷进行中断与否评估,使用户根据预测结果提前做好能耗平衡利用措施。
  • 节能优化
    利用海量数据,挖掘有用的信息,利用人工智能技术构建模型,产生有效的节能操作建议。在保障正常生产的前提下,优化主要耗能设备的操作,实现节能降耗的目的。

合作伙伴:广州博依特智能信息科技有限公司是工业大数据深度挖掘的开拓者,也是智能制造和绿色制造协同创新的实践者。博依特公司基于物联网、云计算和大数据技术,挖掘工业数据价值,为企业及客户提供安全、精准和全方位的服务,致力于成为中国领先的制造业大数据挖掘服务提供商。公司提供的能源管理解决放哪,广泛的应用于造纸行业、陶瓷行业、水泥行业等流程制造业,通过挖掘工业数据价值,帮助企业提升生产效益。

相关实践学习
钉钉群中如何接收IoT温控器数据告警通知
本实验主要介绍如何将温控器设备以MQTT协议接入IoT物联网平台,通过云产品流转到函数计算FC,调用钉钉群机器人API,实时推送温湿度消息到钉钉群。
阿里云AIoT物联网开发实战
本课程将由物联网专家带你熟悉阿里云AIoT物联网领域全套云产品,7天轻松搭建基于Arduino的端到端物联网场景应用。 开始学习前,请先开通下方两个云产品,让学习更流畅: IoT物联网平台:https://iot.console.aliyun.com/ LinkWAN物联网络管理平台:https://linkwan.console.aliyun.com/service-open
相关文章
|
1月前
|
机器学习/深度学习 人工智能 算法
【AAAI 2024】再创佳绩!阿里云人工智能平台PAI多篇论文入选
阿里云人工智能平台PAI发表的多篇论文在AAAI-2024上正式亮相发表。AAAI是由国际人工智能促进协会主办的年会,是人工智能领域中历史最悠久、涵盖内容最广泛的国际顶级学术会议之一,也是中国计算机学会(CCF)推荐的A类国际学术会议。论文成果是阿里云与浙江大学、华南理工大学联合培养项目等共同研发,深耕以通用人工智能(AGI)为目标的一系列基础科学与工程问题,包括多模态理解模型、小样本类增量学习、深度表格学习和文档版面此次入选意味着阿里云人工智能平台PAI自研的深度学习算法达到了全球业界先进水平,获得了国际学者的认可,展现了阿里云人工智能技术创新在国际上的竞争力。
|
3月前
|
机器学习/深度学习 PyTorch 算法框架/工具
在阿里云机器学习平台上布置一个PyTorch模型
在阿里云机器学习平台上布置一个PyTorch模型【1月更文挑战第21天】【1月更文挑战第105篇】
162 1
|
2月前
|
消息中间件 DataWorks 物联网
MQTT问题之接入阿里云物联网平台如何解决
MQTT接入是指将设备或应用通过MQTT协议接入到消息服务器,以实现数据的发布和订阅;本合集着眼于MQTT接入的流程、配置指导以及常见接入问题的解决方法,帮助用户实现稳定可靠的消息交换。
161 1
|
1月前
|
弹性计算 安全 定位技术
幻兽帕鲁服务器搭建攻略:【阿里云平台快速上手指南】
2024年,火爆畅销的《幻兽帕鲁》游戏让无数玩家着迷不已!那么,您是否急切想要拥有一个能与伙伴们一起畅快玩耍的游戏服务器呢?现在就跟随若城的脚步,一起动手搭建一个属于自己的《幻兽帕鲁》服务器吧!让这个新年有心意
|
2月前
|
弹性计算 Linux 数据安全/隐私保护
幻兽帕鲁服务器搭建攻略:阿里云平台快速上手指南
2024年,火爆畅销的《幻兽帕鲁》游戏让无数玩家着迷不已!那么,您是否急切想要拥有一个能与伙伴们一起畅快玩耍的游戏服务器呢?现在就跟随若城的脚步,一起动手搭建一个属于自己的《幻兽帕鲁》服务器吧!让这个新年有心意, 让这个寒假更有趣
75092 10
|
3天前
|
消息中间件 存储 JavaScript
阿里云IOC物联网异步处理基础概念
该内容介绍了异步处理基础和消息队列的相关概念。首先,同步处理指任务完成后才能执行其他操作,而异步则允许任务并行执行,不阻塞程序。异步能提高系统并发性和响应性,但也增加复杂性和资源消耗。接着,提到了消息队列,包括生产者、消费者、队列、broker和topic等概念,并指出在IoT中,设备作为生产者发送消息到特定topic,消费者从队列获取数据。最后,简要介绍了AMQP协议,它是用于应用程序间消息传递的开放标准,常用于分布式系统和物联网,如RabbitMQ和Apache Qpid。课程将以Apache Qpid为例接收IoT数据。
113 6
阿里云IOC物联网异步处理基础概念
|
3天前
|
人工智能 监控 安全
Springcloud数字化物联网智慧工地综合平台源码 劳务管理、设备管理、绿色施工
Springcloud数字化物联网智慧工地综合平台源码 劳务管理、设备管理、绿色施工
12 3
|
1月前
|
缓存 运维 监控
应用研发平台EMAS 常见问题之用华为的推送界面阿里云收不到如何解决
应用研发平台EMAS(Enterprise Mobile Application Service)是阿里云提供的一个全栈移动应用开发平台,集成了应用开发、测试、部署、监控和运营服务;本合集旨在总结EMAS产品在应用开发和运维过程中的常见问题及解决方案,助力开发者和企业高效解决技术难题,加速移动应用的上线和稳定运行。
382 2
|
1月前
|
存储 监控 安全
Java基于物联网技术的智慧工地云管理平台源码 依托丰富的设备接口标准库,快速接入工地现场各类型设备
围绕施工安全、质量管理主线,通过物联感知设备全周期、全覆盖实时监测,将管理动作前置,实现从事后被动补救到事前主动预防的转变。例如塔吊运行监测,超重预警,升降机、高支模等机械设备危险监控等,通过安全关键指标设定,全面掌握现场安全情况,防患于未然。
146 5
|
1月前
|
存储 数据采集 Apache
众安保险 CDP 平台:借助阿里云数据库 SelectDB 版内核 Apache Doris 打破数据孤岛,人群圈选提速4倍
随着业务在金融、保险和商城领域的不断扩展,众安保险建设 CDP 平台以提供自动化营销数据支持。早期 CDP 平台依赖于 Spark + Impala + Hbase + Nebula 复杂的技术组合,这不仅导致数据分析形成数据孤岛,还带来高昂的管理及维护成本。为解决该问题,众安保险引入 Apache Doris,替换了早期复杂的技术组合,不仅降低了系统的复杂性,打破了数据孤岛,更提升了数据处理的效率。
众安保险 CDP 平台:借助阿里云数据库 SelectDB 版内核 Apache Doris 打破数据孤岛,人群圈选提速4倍