E-MapReduce助力建设企业级数据仓库
日志收集好后，就可以采取hive或者spark引擎分析日志了，比如出报表，则可以把算完的数据插入到emapreduce hbase中或者RDS mysql中，再通过 阿里云提供的quick bi出报表。每天早上就可以看到 前一天的业务状况等信息...
查看全文 >>
E-MapReduce 4月产品新功能
E-MapReduce 4月份新功能：1.EMR Hadoop集群弹性伸缩支持优雅下线，用户可以在弹性伸缩缩容规则中设置等待时长，降低对缩容task节点任务的影响。...更多产品详情，请点击https://www.aliyun.com/product/emapreduce
查看全文 >>
开源大数据周刊-第44期
E-MapReduce中Spark 2.x读写MaxCompute数据最新的aliyun-emapreduce-sdk将MaxCompute数据以DataSource的方式接入Spark 2.x，用户可以使用类似Spark 2.x中读写json/parquet/csv的方式来访问MaxCompute。资讯 数据API...
查看全文 >>
如何在E-MapReduce上提交Storm作业处理Kafka数据
2.cd aliyun-emapreduce-demo 3.mvn clean package 4.作业jar包在target/shaded/下面 3.Topic数据准备 登录到Kafka集群，按照如下步骤创建topic并准备一些数据： 1.创建一个test topic，分区数10，副本数2 usr/lib/...
查看全文 >>
【程序员（媛）国人之光】知（美）识（色）贩卖贴】非...
▼ 学习传送门 ▼https://developer.aliyun.com/group/apachesparkhttps://developer.aliyun.com/group/aliyunemrhttps://www.aliyun.com/product/emapreduce Tips： 首届 Apache Spark AI 智能诊断大赛参赛福利，...
查看全文 >>
E-MapReduce中Spark 2.x读写MaxCompute数据
最新的aliyun-emapreduce-sdk将MaxCompute数据以DataSource的方式接入Spark 2.x，用户可以使用类似Spark 2.x中读写json/parquet/csv的方式来访问MaxCompute. 0.DataSource a)DataSource提供了一种插件式的外部数据接...
查看全文 >>
开源大数据周刊-第2期
Aliyun-emapreduce-demo发布在github上，敬请关注。资讯播报 阿里云启动公益云计划 李连杰也喊话要拥抱大数据云栖大会·深圳峰会4月20日在深圳举行。大会上，阿里云正式启动了公益云计划，壹基金创始李连杰也参与...
查看全文 >>
重磅：阿里云 JindoFS SDK 全面开放使用，OSS 文件...
[JindoFS SDK](https://github.com/aliyun/aliyun-emapreduce-datasources/blob/main/docs/jindofs_sdk_how_to.md)作为JindoFS的客户端，提供了三大能力：1.面向Hadoop/Spark生态提供访问OSS对象存储的封装；2.访问...
查看全文 >>
使用Spark Streaming SQL进行PV/UV统计
cd aliyun-emapreduce-sdk git checkout-b master-2.x origin/master-2.x mvn clean package-DskipTests 编译完后,assembly/target目录下会生成emr-datasources_shaded_${version}.jar，其中${version}为sdk的版本。...
查看全文 >>
开源大数据周刊-第25期
Hbase数据迁移——实体机房集群跨网到EMR集群讲述了怎么把线下的hbase集群迁移到阿里云emapreduce平台 机器学习算法基础：Python和R语言实现机器学习基础算法的介绍 TensorFlow深度学习，一篇文章就够了TensorFlow...
查看全文 >>
