一分钟了解阿里云产品:E-MapReduce概述

简介:   阿里云有很多出色的产品,今天让我们来一起了解下E-MapReduce吧。   什么是E-MapReduce呢?   简单来说,E-MapReduce是构建于阿里云ECS弹性虚拟机之上,运行在阿里云平台上的一种大数据处理系统解决方案。它能够让用户将Apache Hadoop和Apache

 

阿里云有很多出色的产品,今天让我们来一起了解下E-MapReduce吧。

 

什么是E-MapReduce呢?

 

简单来说,E-MapReduce是构建于阿里云ECS弹性虚拟机之上,运行在阿里云平台上的一种大数据处理系统解决方案。它能够让用户将Apache Hadoop和Apache Spark运行在阿里云的云平台上,提供给用户在云上的分析和处理大数据的平台。通过将Hadoop和Spark运行在云平台上,让用户可以非常方便的使用Hadoop和Spark生态系统中的其他周边系统(如Apache Hive,Apache Pig,HBase等)来分析和处理自己的数据。不仅如此,用户还可以通过E-MapReduce将数据非常方便的导入和导出到阿里云其他的云数据存储系统和数据库系统(如Aliyun OSS, Aliyun RDS)中。

 

E-MapReduce与传统物理集群方式相比,有着诸多优势,具体有哪些特点和功能呢?我们来瞧瞧。

 

E-MapReduce按照所选硬件机型(CPU、内存),所选择软件组合和版本,进行自动化部署,与阿里云的其他产品进行了深度整合,可以通过主子账号对服务权限进行整合阿里云RAM资源权限管理系统,可以通过主子账号对服务权限进行隔离。

 

 

进一步的,由于E-MapReduce这么多的优势,在应用上,E-MapReduce自由选择机器配置(CPU,内存)和磁盘类型,自由选择服务器规模,包括Master和Slave的数量,自由选择开源大数据生态软件组合和版本,目前包括Hadoop和Spark,自由选择启动集群的方式,分为临时集群和长时间运行集群。E-MapReduce支持丰富的作业类型和灵活的作业执行计划。

 

 

E-MapReduce这么强大,可以应用在那些场景中呢?以下简单罗列几个。

 

E-MapReduce可以应用在离线数据处理、Ad hoc数据分析、海量数据在线服务、流式数据处理。

 

 

E-MapReduce典型特性介绍:

https://www.aliyun.com/product/emapreduce?spm=5176.383518.201.18.2vcqYg

 

E-MapReduce五大热点技术问题分析:

https://yq.aliyun.com/articles/6927?spm=0.0.0.0.pTiuqB


E-MapReduce体验之常见问题 :

https://yq.aliyun.com/articles/6928?spm=0.0.0.0.Oxy3JO

目录
相关文章
|
10月前
|
数据采集 分布式计算 DataWorks
DataWorks产品使用合集之在DataWorks中,在MapReduce作业中指定两个表的所有分区如何解决
DataWorks作为一站式的数据开发与治理平台,提供了从数据采集、清洗、开发、调度、服务化、质量监控到安全管理的全套解决方案,帮助企业构建高效、规范、安全的大数据处理体系。以下是对DataWorks产品使用合集的概述,涵盖数据处理的各个环节。
114 0
|
SQL
在阿里云的E-MapReduce中,对数组类型进行聚合操作需要使用特定的函数
在阿里云的E-MapReduce中,对数组类型进行聚合操作需要使用特定的函数
59 2
|
分布式计算 Java Python
MapReduce简单概述
MapReduce简单概述
75 0
|
分布式计算 资源调度 Hadoop
Hadoop基础学习---5、MapReduce概述和WordCount实操(本地运行和集群运行)、Hadoop序列化
Hadoop基础学习---5、MapReduce概述和WordCount实操(本地运行和集群运行)、Hadoop序列化
|
SQL 运维 监控
开源大数据平台 E-MapReduce Serverless StarRocks 产品介绍
本文将分享阿里云与 StarRocks 社区合作打造的云上 StarRocks 极速湖仓的云原生产品实践。 主要包括四个部分,第一部分介绍 StarRocks 全托管形态,以及免运维服务的 OLAP 云产品;第二部 分介绍 StarRocksManager 的实例管理、诊断分析、元数据管理、安全中心等功能;第三部分介绍 在社交、在线教育、电商等场景的使用案例;最后是对产品的长短期规划。
6982 0
|
大数据
《阿里云产品手册2022-2023 版》——开源大数据平台 E-MapReduce
《阿里云产品手册2022-2023 版》——开源大数据平台 E-MapReduce
116 0
|
存储 运维 资源调度
阿里云E-MapReduce产品新动态及开源大数据前沿技术 2023-4月刊
开源大数据EMR产品技术月刊,涵盖本月技术速递、产品和功能发布、市场和客户应用实践等内容,帮助您快速了解开源大数据最新动态。
705 1
阿里云E-MapReduce产品新动态及开源大数据前沿技术 2023-4月刊
|
存储 分布式计算 运维
阿里云E-MapReduce产品新动态及开源大数据前沿技术 2023-3月刊
开源大数据EMR产品技术月刊,涵盖本月技术速递、产品和功能发布、市场和客户应用实践等内容,帮助您快速了解开源大数据最新动态。
48594 4
阿里云E-MapReduce产品新动态及开源大数据前沿技术 2023-3月刊
|
SQL 弹性计算 分布式计算
阿里云开源大数据平台E-MapReduce 产品新动态及开源大数据前沿技术分享 2023-2月刊
开源大数据平台 EMR 产品技术月刊,涵盖本月技术速递、产品和功能发布、市场和客户应用实践等内容,帮助您快速了解开源大数据最新动态。
10288 8
阿里云开源大数据平台E-MapReduce 产品新动态及开源大数据前沿技术分享 2023-2月刊
|
分布式计算 资源调度 Hadoop