开源大数据平台 E-MapReduce-阿里云开发者社区-阿里云

开发者社区> 大数据与机器学习> 开源大数据平台 E-MapReduce

开源大数据平台 E-MapReduce

关注

阿里云EMR是云原生开源大数据平台,为客户提供简单易集成的Hadoop、Hive、Spark、Flink、Presto、ClickHouse、StarRocks、Delta、Hudi等开源大数据计算和存储引擎,计算资源可以根据业务的需要调整。EMR可以部署在阿里云公有云的ECS和ACK平台。

0
今日
1540
内容
11
活动
5357
关注
|
12月前
|
存储 数据可视化 大数据
|

带你读《2022年开源大数据热力报告》——热力“摩尔定律”和热力图谱

带你读《2022年开源大数据热力报告》——热力“摩尔定律”和热力图谱

231 0
|
12月前
|
存储 分布式计算 数据可视化
|

带你读《2022年开源大数据热力报告》——热力趋势一:用户需求多样化推动技术多元化

带你读《2022年开源大数据热力报告》——热力趋势一:用户需求多样化推动技术多元化

158 0
|
5月前
|
JSON API 数据格式
|

Json实现根据关键词搜索请求1688商品列表数据方法,1688商品列表数据接口,1688API接口申请指南

Json实现根据关键词搜索请求1688商品列表数据方法,1688商品列表数据接口,1688API接口申请指南

119 0
|
7月前
|
XML JSON 缓存
|

Json实现根据关键词搜索请求淘宝商品列表数据方法,淘宝商品列表数据接口,淘宝API接口申请指南

Json实现根据关键词搜索请求淘宝商品列表数据方法,淘宝商品列表数据接口,淘宝API接口申请指南

228 0
|
8月前
|
SQL 分布式计算 Cloud Native
|

杭州 Meetup| Apache Kyuubi & Celeborn,助力 Spark 拥抱云原生

10月14日13:00-17:30,Apache Kyuubi & Celeborn 社区将在杭州举办「Apache Kyuubi & Celeborn (Incubating) 助力 Spark 拥抱云原生」Meetup,欢迎报名参会!

723 0
|
8月前
|
存储 弹性计算 资源调度
|

阿里云E-MapReduce节点优雅下线-基于Yarn Node Labels特性

背景:阿里云E-MapReduce集群(简称EMR集群)部分节点需要下线迁移,但集群资源常年跑满,诉求是节点下线迁移过程中不影响任一任务执行。 本次方案基于Yarn Node Labels的特性进行资源隔离后下线。 下期对官网Graceful Decommission of YARN Nodes的方案进行验证,参考:https://hadoop.apache.org/docs/stable/hadoop-yarn/hadoop-yarn-site/GracefulDecommission.html。

553 1
|
8月前
|
XML JSON 缓存
|

Json实现根据商品ID请求1688商品详情数据方法,1688商品详情API接口,1688API接口申请指南

Json实现根据商品ID请求1688商品详情数据方法,1688商品详情API接口,1688API接口申请指南

281 0
|
8月前
|
XML JSON 缓存
|

Json实现根据商品ID请求阿里巴巴商品详情数据方法,阿里巴巴商品详情API接口,阿里巴巴API接口申请指南

Json实现根据商品ID请求阿里巴巴商品详情数据方法,阿里巴巴商品详情API接口,阿里巴巴API接口申请指南

214 0
|
10月前
|
SQL 分布式计算 监控
|

EMR Workflow 开启公测,100%兼容开源 Apache DolphinScheduler

EMR Workflow 是一个全托管的工作流和任务调度服务,100%兼容开源 Apache DolphinScheduler。它提供了易于使用的调度服务,您可以通过可视化的操作界面轻松地管理工作流和任务,高效构建数据仓库,并为生产任务的稳定运行提供保障。

607 1
|
11月前
|
SQL 运维 安全
|

基于web漏洞扫描及分析系统设计_kaic

随着信息技术的发展和网络应用在我国的普及,针对我国境内信息系统的恶意网络攻击也越来越多,并且随着黑客攻击技术的不断地更新,网络犯罪行为变得越来越难以应对,用户日常访问的网站是否安全对于普通网民而言难以辨别,保护人民不受不法侵害也是难上加难。如何识别网站的潜在危险性,以及网站出现安全性问题该如何防御,尽可能减少网站被攻击后造成的实际损失,是目前迫切需要解决的难题。 本文使用VMware虚拟机技术模拟真实的网络环境,使用渗透测试技术对模拟网络进行薄弱点测试信息收集、攻击测试等,再现了渗透测试的重要流程和技术方法。在对目标主机实施渗透测试时,会从系统层面和Web层面两个维度进行测试,扫描出存在的漏洞

234 0
|
5月前
|
XML JSON API
|

Json实现根据关键词搜索请求唯品会商品列表数据方法,唯品会商品列表数据接口,唯品会API接口申请指南,支持全站

Json实现根据关键词搜索请求唯品会商品列表数据方法,唯品会商品列表数据接口,唯品会API接口申请指南,支持全站

114 1
|
8月前
|
分布式计算 Java API
|

阿里云E-MapReduce集群不同计算引擎sleep task使用笔记

需求:日常在E-MapReduce集群中进行相关测试,验证一些切换或变更是否会影响业务的运行导致任务failed。所以需要在测试集群中运行指定资源数(vcore及memory)或者指定运行时间的任务。 目前用到MapReduce和spark任务两种,其余的持续更新补充中……

476 0
|
8月前
|
XML JSON 缓存
|

Json实现根据商品ID请求淘宝商品详情数据方法,淘宝商品详情API接口,淘宝API接口申请指南

Json实现根据商品ID请求淘宝商品详情数据方法,淘宝商品详情API接口,淘宝API接口申请指南

308 0
|
8月前
|
XML JSON 缓存
|

Json实现根据商品ID请求京东商品详情数据方法,京东商品详情API接口,京东API接口申请指南

Json实现根据商品ID请求京东商品详情数据方法,京东商品详情API接口,京东API接口申请指南

291 0
|
8月前
|
XML JSON 缓存
|

Json实现根据商品ID请求唯品会商品详情数据方法,唯品会商品详情API接口,唯品会API接口申请指南

Json实现根据商品ID请求唯品会商品详情数据方法,唯品会商品详情API接口,唯品会API接口申请指南

246 0
|
8月前
|
XML JSON 缓存
|

Json实现根据商品ID请求微店商品详情数据方法,微店商品详情API接口,微店API接口申请指南

Json实现根据商品ID请求微店商品详情数据方法,微店商品详情API接口,微店API接口申请指南

259 0
|
8月前
|
XML JSON 缓存
|

Json实现根据商品ID请求速卖通商品详情数据方法,速卖通商品详情API接口,速卖通API接口申请指南

Json实现根据商品ID请求速卖通商品详情数据方法,速卖通商品详情API接口,速卖通API接口申请指南

215 0
|
8月前
|
XML JSON 缓存
|

Json实现根据商品ID请求lazada商品详情数据方法,lazada商品详情API接口,lazadaAPI接口申请指南

Json实现根据商品ID请求lazada商品详情数据方法,lazada商品详情API接口,lazadaAPI接口申请指南

218 0
|
9月前
|
存储 Cloud Native 数据挖掘
|

直播|深入解析 StarRocks 存算分离--云原生湖仓 Meetup#2

8月17日19点,云原生湖仓线上Meetup,深入解析 StarRocks 存算分离,多位大咖分享,干货满满,快来报名!~

564 1
|
9月前
|
存储 弹性计算 运维
|

EMR Serverless StarRocks体验报告

本次测评报告我将从功能、稳定性、性能、运维、成本和收益等方面对EMR Serverless StarRocks进行评估,以确保该产品能够满足业务需求并提供有用的参考信息。通过本次测评,我希望能够为用户提供有用的参考信息,帮助他们做出明智的决策。

287 2
我要发布