数据上云系统 | 学习笔记

本文涉及的产品
云原生大数据计算服务MaxCompute,500CU*H 100GB 3个月
云原生大数据计算服务 MaxCompute,5000CU*H 100GB 3个月
简介: 快速学习数据上云系统

开发者学堂课程【YoC 基础软件平台应用介绍:数据上云系统 】学习笔记,与课程紧密联系,让用户快速学习知识。

课程地址:https://developer.aliyun.com/learning/course/59/detail/1082


数据上云子系统  


内容介绍:

上云子系统介绍

API相关介绍

云端注册及展示  


一、上云子系统介绍

image.png

如图,中间位置包含了两个核心部分。第一个是loT,第二个是uDATA。loT这一块主要负责完成不同云的对接,不同协议的对接,比如云端有阿里云,协议常用的有mktt等。uDATA主要负责数据的采集,以及反馈处理,像loT的产品中有很多会接不同的传感器,用户可以把这些传感器输入uDATA中,通过loT框架把这些数据复制到云端。 总的来说,通过loT统一的接口,规范了不同云的上云行为。这样就可以降低用户在使用不同云的学习等等。 uDATA将不同云的上云数据,进行了抽象。隐藏了不同云以及不同协议的速度运行差异


 二、API相关介绍

首先是LOT这部分,包含了四块 上云实例的创建以及销毁 事件的订阅,因为LOT操作当中很多是一些int操作。比如说每次上云结果的反馈,每次数据的反馈等等。这些结果都要以事件的形式通知到用户 主要是一些通道的控制,比如打开通道,关闭通道以及配置通道等。 最后一个是数据的一些收发

2.png uDATA相对来说简单很多,因为它本身来说只是一个建子对的方式用于将数据存储下来。可以看到,有udata_new,数据的get以及set。 然后看如何使用这些API来完成一个上云的流程

3.png先以上一个阿里云的alimqtt为例,首先要调用的是lot_new阿里alimqtt这个API调完之后要open这个channel,它的api就是channel_over。调用完成之后要去做一些uDATA初始化,以及一些通道配置。通道配置就是lot_channel_config,之后就需要启动,就是第四个框架这里。完成之后就可以正常的push数据了,接口 lot_channel_push。 那么收集的数据在第三的小框里面,配置的时候会传入一个接收的comback,里面是从云端接收下来的数据  


三、云端注册及展示

1.首先云端的配置总共分为三步

4.png 第一步,访问occ平台并登录,然后进入它的控制台会有一个产品添加,点开后根据上面的提示信息添加产品名称、类别等等 第二步是打开掩饰配置,去做一些产品类型的配置,以及演示开关打开 第三步是上云的配置,这些信息是需要登录到阿里云平台去获取。这三个信息找到之后输入到这里

2.云端配置完成之后需要对设备端进行一个许可证以及三要素的配置

5.png 第一步是从occ平台获取这些三要素和许可证,获取方式就是到许可证这一栏去下载。我们可以从图中框架里去点击下载,下载下来是一个压缩包,解压之后会有对应的许可证以及三要素。许可证是通过flash gramer软件,三要素是通过敞口终端。这条命令也在我们的压缩包文件里面 3.数据展示,数据展示之前需要获取一下设备的识别码,通过kvget的方式从设备里获取到,然后将设备绑定好。绑定完成之后选择对应的产品,在演示界面可以看到这些信息。例如刚才提到的灯开关的信息等  6.png

相关实践学习
基于MaxCompute的热门话题分析
本实验围绕社交用户发布的文章做了详尽的分析,通过分析能得到用户群体年龄分布,性别分布,地理位置分布,以及热门话题的热度。
SaaS 模式云数据仓库必修课
本课程由阿里云开发者社区和阿里云大数据团队共同出品,是SaaS模式云原生数据仓库领导者MaxCompute核心课程。本课程由阿里云资深产品和技术专家们从概念到方法,从场景到实践,体系化的将阿里巴巴飞天大数据平台10多年的经过验证的方法与实践深入浅出的讲给开发者们。帮助大数据开发者快速了解并掌握SaaS模式的云原生的数据仓库,助力开发者学习了解先进的技术栈,并能在实际业务中敏捷的进行大数据分析,赋能企业业务。 通过本课程可以了解SaaS模式云原生数据仓库领导者MaxCompute核心功能及典型适用场景,可应用MaxCompute实现数仓搭建,快速进行大数据分析。适合大数据工程师、大数据分析师 大量数据需要处理、存储和管理,需要搭建数据仓库?学它! 没有足够人员和经验来运维大数据平台,不想自建IDC买机器,需要免运维的大数据平台?会SQL就等于会大数据?学它! 想知道大数据用得对不对,想用更少的钱得到持续演进的数仓能力?获得极致弹性的计算资源和更好的性能,以及持续保护数据安全的生产环境?学它! 想要获得灵活的分析能力,快速洞察数据规律特征?想要兼得数据湖的灵活性与数据仓库的成长性?学它! 出品人:阿里云大数据产品及研发团队专家 产品 MaxCompute 官网 https://www.aliyun.com/product/odps 
相关文章
|
3天前
|
SQL Cloud Native 安全
CMH云迁移中心:企业一站式上云工具实践
本文介绍了云迁移的趋势与挑战,以及阿里云推出的云迁移中心(CMH)工具。随着企业上云进程的推进,越来越多的企业积极拥抱云原生技术,但复杂业务处理、成本控制、技术架构升级和快速迁移等问题成为主要挑战。CMH通过评估、准备、迁移和割接四个阶段,提供自动化和智能化的解决方案,帮助企业简化上云流程,提升效率。案例显示,CMH成功助力某跨国企业平稳迁移,未来将继续优化用户体验并探索智能化迁移方案。
|
4月前
|
存储 监控 调度
云迁移中心CMH:助力企业高效上云实践全解析
随着云计算的发展,企业上云已成为创新发展的关键。然而,企业上云面临诸多挑战,如复杂的应用依赖梳理、成本效益分析等。阿里云推出的云迁移中心(CMH)旨在解决这些问题,提供自动化的系统调研、规划、迁移和割接等功能,简化上云过程。CMH通过评估、准备、迁移和割接四个阶段,帮助企业高效完成数字化转型。未来,CMH将继续提升智能化水平,支持更多行业和复杂环境,助力企业轻松上云。
|
存储 弹性计算 安全
企业上云如何选择及操作注意事项(企业上云选择阿里云是绝对没错)
企业上云如何选择及操作注意事项(企业上云选择阿里云是绝对没错)
214 0
|
存储 数据库 对象存储
带你读《云存储应用白皮书》之24:1. 数据业务迁移上云方案
带你读《云存储应用白皮书》之24:1. 数据业务迁移上云方案
295 0
|
存储 SQL 运维
企业运维训练营之数据库原理与实践—数据库DAS简介和备份上云方案—数据上云(上)
企业运维训练营之数据库原理与实践—数据库DAS简介和备份上云方案—数据上云(上)
288 0
|
运维 关系型数据库 MySQL
企业运维训练营之数据库原理与实践—数据库DAS简介和备份上云方案—数据上云(下)
企业运维训练营之数据库原理与实践—数据库DAS简介和备份上云方案—数据上云(下)
122 0
|
SQL 存储 运维
企业运维训练营之数据库原理与实践—数据库DAS简介和备份上云方案—数据上云(中)
企业运维训练营之数据库原理与实践—数据库DAS简介和备份上云方案—数据上云(中)
155 0
|
数据库
《快递行业云上技术服务白皮书》——4. 快递行业技术服务最佳实践——4.1 核心业务上云最佳实践——4.1.3 业务迁移上云最佳实践(4)
《快递行业云上技术服务白皮书》——4. 快递行业技术服务最佳实践——4.1 核心业务上云最佳实践——4.1.3 业务迁移上云最佳实践(4)
114 0
|
弹性计算 运维 负载均衡
业务上云迁移概念|学习笔记
快速学习业务上云迁移概念
业务上云迁移概念|学习笔记
|
存储 弹性计算 安全
企业上云如何选择及操作注意事项(企业上云选择阿里云是绝对没错的)
面对云市场内众多的云厂商,企业应该如何选择呢?
246 0