阿里云物联网平台数据转发到DataHub示例

简介: 您可以使用规则引擎将数据转到DataHub上,再由DataHub将数据流转至实时计算、MaxCompute等服务中,以实现更多计算场景。本文主要演示通过规则引擎将消息流转到DataHub,并通过Dataconnector 将消费流转到MaxCompute的表。

概述

您可以使用规则引擎将数据转到DataHub上,再由DataHub将数据流转至实时计算、MaxCompute等服务中,以实现更多计算场景。本文主要演示通过规则引擎将消息流转到DataHub,并通过Dataconnector 将消费流转到MaxCompute的表。

Step By Step

物联网平台创建产品和设备

_

参考链接:产品及设备准备部分。

创建DataHub Project 和 Topic

1、创建Datahub Project
_

2、创建Topic
_

规则引擎配置

1、创建规则引擎、配置处理数据

参考链接 规则引擎配置配置部分。

2、配置转发数据
_
_

3、启动设备端SDK,消息流转
_

4、流转日志查询

_

创建Dataconnector

1、maxcompute创建表

CREATE TABLE `datahubforiot` (
    `devicename` string,
    `humidity` string,
    `temperature` string,
    `time` string
) 
 PARTITIONED BY (ds string,hh string,mm string)
LIFECYCLE 100;

2、创建Dataconnector

_

_

_

_

3、Dataworks SQL任务查询

_

参考链接

数据转发到DataHub

相关实践学习
实时数据及离线数据上云方案
本实验通过使用CANAL、DataHub、DataWorks、MaxCompute服务,实现数据上云,解决了数据孤岛问题,同时把数据迁移到云计算平台,对后续数据的计算和应用提供了第一步开山之路。
相关文章
HH
|
监控 物联网 API
阿里云物联网平台之日志服务中的消息体现
物联网平台控制台日志服务页,查询云端运行日志。
HH
611 0
阿里云物联网平台之日志服务中的消息体现
|
SQL 存储 消息中间件
物联网平台规则引擎使用说明
本次分享物联网平台规则引擎的详细使用说明
物联网平台规则引擎使用说明
|
JSON 物联网 数据格式
物联网平台数据流转到datahub时报错
记录一次物联网平台数据流转到datahub时的报错
394 0
物联网平台数据流转到datahub时报错
HH
|
JSON 监控 物联网
阿里云物联网平台之数据解析
物联网平台定义的标准数据格式为Alink JSON。但是低配置且资源受限或者对网络流量有要求的设备,不适合直接构造JSON数据与物联网平台通信,可将原数据透传到物联网平台。物联网平台提供数据解析功能,可以根据您提交的脚本,将数据在设备自定义格式和JSON格式之间转换。
HH
1907 0
|
存储 SQL 消息中间件
基于物联网平台 + Tablestore,如何打造设备元数据管理平台?
基于物联网平台 + Tablestore,如何打造设备元数据管理平台?
205 0
基于物联网平台 + Tablestore,如何打造设备元数据管理平台?
|
存储 SQL NoSQL
基于物联网平台 + Tablestore 打造设备元数据管理平台
从场景到实践,分享物联网设备元数据场景的业务特点、技术选型和案例实践。
366 0
|
消息中间件 物联网 API
生活物联网平台 - 数据AMQP方式推送
AMQP转储功能适用于生活物联网平台与企业服务器之间的消息流转,且为推荐方式。通过集成和使用AMQP SDK,即可实现身份认证、消息接收的能力。我们推荐使用AMQP的方式推送设备数据(如设备状态数据、设备控制记录等),用户信息数据等
356 0
生活物联网平台 - 数据AMQP方式推送
|
存储 物联网
物联网平台使用规则引擎实现消息流转到TSDB&问题总结
之前有做过topic之间流转,本次测试流转的TSDB
341 0
物联网平台使用规则引擎实现消息流转到TSDB&问题总结
|
机器学习/深度学习 网络协议 物联网
阿里云物联网平台设备日志上报示例Demo
物联网平台支持设备将本地日志上报到云端,在控制台进行查询和故障分析。在设备详情页,开启设备本地日志上报开关后,设备才能将本地日志上报到云端。
2306 0
|
SQL 分布式计算 DataWorks
阿里云物联网平台数据转发到DataHub示例
本文主要演示通过规则引擎将消息流转到DataHub,并通过Dataconnector 将消费流转到MaxCompute的表。
阿里云物联网平台数据转发到DataHub示例

相关产品

  • 物联网平台