【大数据新手上路】“零基础”系列课程--如何通过大数据开发套件Data IDE玩转大数据-阿里云开发者社区

开发者社区> 隐林> 正文

【大数据新手上路】“零基础”系列课程--如何通过大数据开发套件Data IDE玩转大数据

简介: 老板每天都要出这些业务数据(销售总额、总交易量、总点击次数、总加入购物车次数、总加入收藏夹次数...),我得想个一劳永逸的方法了…
+关注继续查看

免费开通大数据服务:https://www.aliyun.com/product/odps

老板每天都要出这些业务数据(销售总额、总交易量、总点击次数、总加入购物车次数、总加入收藏夹次数...),我得想个一劳永逸的方法了…


幸好,我有数加神器大数据开发套件Data IDE,搞定业务工作流调度,每日定时自动执行任务,分分钟输出计算结果。


妈妈再也不用担心我焦头奋战了……


本教程是一个大数据开发套件Data IDE零基础教程,通过Data IDE将多源异构的数据集导入云端MaxCompute,进行计算、分析;然后通过Data IDE系统调度定时处理,最终,通过Quick BI实现企业T-1天的业务报表及分析;
MaxCompute



实验开始前您需要

1) 拥有一定的hadoop数据开发经验。

2) 拥有阿里云官网实名认证账号,并且创建好账号Access Key。

3) 开通MaxCompute大数据开发套件Data IDEQuick BI

4) 实验数据集和相关代码下载。

 

本实验您将完成以下任务

1) 新建表,新建数据源,新建工作流任务。

2) 先将业务数据导入或同步到MaxCompute中,以便于数据加工

3) 通过写ODPS SQL对数据指标进行分析,并使用调度自动化数据的导入和加工过程。

4) 通过Quick BI拖拽实现领导驾驶舱。

【3分钟视频教程】阿里云大数据开发套件Data IDE介绍 https://yq.aliyun.com/edu/lesson/play/471

【40分钟视频教程】如何通过Data IDE玩转大数据 https://yq.aliyun.com/edu/lesson/play/472


【实验手册】如何通过大数据开发套件Data IDE玩转大数据.pdf


版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。

附件下载:https://developer.aliyun.com/topic/download?id=349

相关文章
我为什么要写:新书《离线和实时大数据开发实战》
新书《离线和实时大数据开发实战》 购买链接(机械工业出版社官方淘宝店铺) 感谢@薛奎 和@空无 大大写推荐书评。 空无和薛奎的书评 大数据技术一直是个领先互联网公司的必备核心技术,阿里巴巴最近10年一直在持续加大投入,并将大数据处理技术用于大量的大规模业务场景。每年双十一对实时、离线技术也都是极限的考验,而作者就是在这样的环境下成长起来,基于真实业务场景钻研相关的技术,既有实战也有
3114 0
基础设施的完善,推动应用形态不断变迁
我们把过去四十年分为五个重要的技术发展阶段,从时间轴上我们把它切分为:1980 - 2000,2000 - 2005,2005 - 2010,2010 - 2020 以及 2020 - 2025。物联网属于第五个阶段,从过去看未来,所以我们先回顾下整个技术发展史,先来看下前四个阶段分别经历了怎样的技术发展?在技术应用上的主要场景是什么?主流的应用形态是什么?诞生了什么样的新技术和新产品?在 198
58 0
基于大数据开发套件的增量同步策略
因为近期遇到用户在做ETL操作导入数据到MaxCompute的时候,对如何设置数据同步策略有疑惑,所以今天第一波我们来聊一下数据的同步策略,根据数据的特性,看看哪些数据适合增量同步,哪些适合全量同步,又是如何实现的?请认真看完下面的介绍,这些问题都不是事儿。
4347 0
大数据时代美国带来的经验与启示
       奥巴马及其团队创新性地将大数据应用到竞选活动中,通过分析挖掘近两年搜集、存储的海量数据,寻找和锁定潜在的己方选民,运用数字化策略定位拉拢中间派选民及筹集选举资金,成为将大数据价值与魅力发挥到淋漓尽致的典型。
1960 0
云开发平台开箱,3分钟零基础搭建个人Hexo博客
Hexo是一款基于Node.js的博客框架,可以将Markdown格式的文本渲染为HTML代码。所以,博客基本就是纯静态,维护相对方便。但是缺点也很明显——经常换编写环境使用不便,因为它的所有渲染代码都是在本地存储的。云开发因为提供全云端的开发环境,零基础实现hexo博客的一键创建和一键部署。
4865 0
+关注
隐林
阿里云大数据产品专家,擅长MaxCompute、机器学习、分布式、可视化、人工智能等大数据领域;
288
文章
38
问答
来源圈子
更多
MaxCompute(原ODPS)是一项面向分析的大数据计算服务,它以Serverless架构提供快速、全托管的在线数据仓库服务,消除传统数据平台在资源扩展性和弹性方面的限制,最小化用户运维投入,使您经济并高效的分析处理海量数据。
+ 订阅
文章排行榜
最热
最新
相关电子书
更多
《2021云上架构与运维峰会演讲合集》
立即下载
《零基础CSS入门教程》
立即下载
《零基础HTML入门教程》
立即下载