开发者社区> 大数据与机器学习> 开源大数据平台 E-MapReduce

开源大数据平台 E-MapReduce

关注

阿里云EMR是云原生开源大数据平台,为客户提供简单易集成的Hadoop、Hive、Spark、Flink、Presto、ClickHouse、StarRocks、Delta、Hudi等开源大数据计算和存储引擎,计算资源可以根据业务的需要调整。EMR可以部署在阿里云公有云的ECS和ACK平台。

0
今日
1616
内容
12
活动
5396
关注
|
XML JSON 缓存
|

Json实现根据关键词搜索请求淘宝商品列表数据方法,淘宝商品列表数据接口,淘宝API接口申请指南

Json实现根据关键词搜索请求淘宝商品列表数据方法,淘宝商品列表数据接口,淘宝API接口申请指南

274 0

Apache Kyuubi & Celeborn,助力 Spark 拥抱云原生

10月14日14:00-17:30,Apache Kyuubi & Celeborn 社区将在杭州举办「Apache Kyuubi & Celeborn (Incubating) 助力 Spark 拥抱云原生」Meetup,本次 Meetup 邀请到阿里云、网易数帆、Cisco、丁香园、Shopee 等技术大咖深入探讨交流基于 Apache Kyuubi & Celeborn 的技术实践,助力 Spark 拥抱云原生!讲师/嘉宾简介周克勇(一锤):阿里云 EMR Spark 引擎负责人,Apache Celeborn (Incubating) 的发起人潘成:网易数帆大数据技术专家,Apache Kyuubi PMC Member,Apache Celeborn (Incubating) PPMC Member朱夷(AngersZhuuuu):Shopee 技术专家, Spark PIC。 Apache Celeborn(Incubating) PPMC/Apache Spark active Contributor/ Apache HDFS/YARN contributorHe Zhao:Data Engineer at CiscoPengqi Li:Data Engineer at Cisco陈福:Apache Kyuubi PMC Member / Apache Celeborn (Incubating) Committer / 丁香园大数据基础平台负责人

1264 1
|
SQL 分布式计算 Cloud Native
|

杭州 Meetup| Apache Kyuubi & Celeborn,助力 Spark 拥抱云原生

10月14日13:00-17:30,Apache Kyuubi & Celeborn 社区将在杭州举办「Apache Kyuubi & Celeborn (Incubating) 助力 Spark 拥抱云原生」Meetup,欢迎报名参会!

828 0
|
存储 SQL 监控
|

阿里云“玩转云上 StarRocks3.0 湖仓分析”训练营火热报名中,开启数据分析新范式

阿里云 EMR OLAP 团队与 StarRocks 社区联合出品,玩转云上 StarRocks3.0 湖仓分析训练营,围绕 StarRocks3.0 系列解读、EMR Serverless StarRocks 存算分离功能与应用场景介绍,开启数据分析新范式!

876 0
|
数据库 数据安全/隐私保护
|

阿里云E-MapReduce集群-开源Ldap密码不安全问题解决方案

社区开源Ldap密码不安全问题解决方案

549 0
|
SQL 弹性计算 分布式计算
|

使用EMR+DLF+OSS-HDFS进行数据湖分析

本实验通过使用EMR,搭建EMR集群,对OSS-HDFS进行数据湖分析

759 0
|
分布式计算 Java API
|

阿里云E-MapReduce集群不同计算引擎sleep task使用笔记

需求:日常在E-MapReduce集群中进行相关测试,验证一些切换或变更是否会影响业务的运行导致任务failed。所以需要在测试集群中运行指定资源数(vcore及memory)或者指定运行时间的任务。 目前用到MapReduce和spark任务两种,其余的持续更新补充中……

510 0
|
存储 弹性计算 资源调度
|

阿里云E-MapReduce节点优雅下线-基于Yarn Node Labels特性

背景:阿里云E-MapReduce集群(简称EMR集群)部分节点需要下线迁移,但集群资源常年跑满,诉求是节点下线迁移过程中不影响任一任务执行。 本次方案基于Yarn Node Labels的特性进行资源隔离后下线。 下期对官网Graceful Decommission of YARN Nodes的方案进行验证,参考:https://hadoop.apache.org/docs/stable/hadoop-yarn/hadoop-yarn-site/GracefulDecommission.html。

685 1
|
XML JSON 缓存
|

Json实现根据商品ID请求天猫商品详情数据方法,天猫商品详情API接口,天猫API接口申请指南

Json实现根据商品ID请求天猫商品详情数据方法,天猫商品详情API接口,天猫API接口申请指南

527 1
|
XML JSON 缓存
|

Json实现根据商品ID请求淘宝商品详情数据方法,淘宝商品详情API接口,淘宝API接口申请指南

Json实现根据商品ID请求淘宝商品详情数据方法,淘宝商品详情API接口,淘宝API接口申请指南

353 0
|
XML JSON 缓存
|

Json实现根据商品ID请求1688商品详情数据方法,1688商品详情API接口,1688API接口申请指南

Json实现根据商品ID请求1688商品详情数据方法,1688商品详情API接口,1688API接口申请指南

331 0
|
XML JSON 缓存
|

Json实现根据商品ID请求京东商品详情数据方法,京东商品详情API接口,京东API接口申请指南

Json实现根据商品ID请求京东商品详情数据方法,京东商品详情API接口,京东API接口申请指南

332 0
|
XML JSON 缓存
|

Json实现根据商品ID请求唯品会商品详情数据方法,唯品会商品详情API接口,唯品会API接口申请指南

Json实现根据商品ID请求唯品会商品详情数据方法,唯品会商品详情API接口,唯品会API接口申请指南

294 0
|
XML JSON 缓存
|

Json实现根据商品ID请求阿里巴巴商品详情数据方法,阿里巴巴商品详情API接口,阿里巴巴API接口申请指南

Json实现根据商品ID请求阿里巴巴商品详情数据方法,阿里巴巴商品详情API接口,阿里巴巴API接口申请指南

257 0
|
XML JSON 缓存
|

Json实现根据商品ID请求亚马逊商品详情数据方法,亚马逊商品详情API接口,亚马逊API接口申请指南

Json实现根据商品ID请求亚马逊商品详情数据方法,亚马逊商品详情API接口,亚马逊API接口申请指南

335 0
|
XML JSON 缓存
|

Json实现根据商品ID请求易贝商品详情数据方法,ebay商品详情API接口,易贝API接口申请指南

Json实现根据商品ID请求易贝商品详情数据方法,ebay商品详情API接口,易贝API接口申请指南

301 0
|
XML JSON 缓存
|

Json实现根据商品ID请求微店商品详情数据方法,微店商品详情API接口,微店API接口申请指南

Json实现根据商品ID请求微店商品详情数据方法,微店商品详情API接口,微店API接口申请指南

281 0
|
XML JSON 缓存
|

Json实现根据商品ID请求速卖通商品详情数据方法,速卖通商品详情API接口,速卖通API接口申请指南

Json实现根据商品ID请求速卖通商品详情数据方法,速卖通商品详情API接口,速卖通API接口申请指南

257 0
|
XML JSON 缓存
|

Json实现根据商品ID请求lazada商品详情数据方法,lazada商品详情API接口,lazadaAPI接口申请指南

Json实现根据商品ID请求lazada商品详情数据方法,lazada商品详情API接口,lazadaAPI接口申请指南

248 0
|
XML JSON 缓存
|

Json实现根据商品ID请求拼多多商品详情数据方法,拼多多商品详情API接口,拼多多API接口申请指南

Json实现根据商品ID请求拼多多商品详情数据方法,拼多多商品详情API接口,拼多多API接口申请指南

250 0
|
分布式计算 资源调度 Kubernetes
|

Apache Kyuubi & Celeborn (Incubating) 助力 Spark 拥抱云原生

网易数帆软件工程师潘成,在 ASF CommunityOverCode Asia 2023(北京)的分享。

741 0
|
SQL 运维 DataWorks
|

EMR Serverless StarRocks + DataWorks 开启极速分析新体验

EMR Serverless StarRocks + DataWorks ,开启极速分析体验

1121 0
|
存储 分布式计算 大数据
|

CommunityOverCode Asia 精彩回顾|阿里云开源大数据 EMR 技术实践分享

阿里云开源大数据 EMR 在 CommunityOverCode Asia 的精彩分享。

643 0
我要发布