AI 助理
备案控制台
开发者社区> 大数据与机器学习> 开源大数据平台 E-MapReduce

开源大数据平台 E-MapReduce

关注

阿里云EMR是云原生开源大数据平台，为客户提供简单易集成的Hadoop、Hive、Spark、Flink、Presto、ClickHouse、StarRocks、Delta、Hudi等开源大数据计算和存储引擎，计算资源可以根据业务的需要调整。EMR可以部署在阿里云公有云的ECS和ACK平台。

0
今日
1629
内容
13
活动
5419
关注
来自： 大数据与机器学习

最新

博文

E-MapReduce

视频

免费试用

全部内容

问答

电子书

活动

学习
毛毛虫雨
|
问答

后续什么时候会升级到2.4版本能，有没有可能自定义版本能，虽然现在只有2.4-rc版本

416 0
毛毛虫雨
|
问答

这个Console是什么呀？

434 1
雪哥哥
|
API 对象存储
|
问答

咨询一个问题， jindofs 可以提供本地 oss api 接口吗？ 相当于在本地提供一个 oss

1095 1
雪哥哥
|
问答

是在使用这个jindofsx 的ranger方案吗？

251 0
雪哥哥
|
流计算
|
问答

flink lib里放的是 jindo-flink-4.5.1-full.jar

337 1
雪哥哥
|
JSON 对象存储 流计算
|
问答

flink StreamingFileSink parquet格式 写OSS报这个json字段的错误

893 2
雪哥哥
|
对象存储
|
问答

文件在oss上不应该有网络传输时间吗[捂脸哭]

940 1
雪哥哥
|
问答

升级JindoSDK对emr集群版本也有要求。

320 1
雪哥哥
|
分布式计算 Spark
|
问答

升级完，现有spark起不来了

492 1
雪哥哥
|
问答

升级过程中 key_load_public: invalid format 是读取公钥出了问题吗 ？

543 1
雪哥哥
|
对象存储
|
问答

请教一下，如果某个bucket下子目录太多导致oss读写变慢（可能是oss list等接口较慢），有

817 1
雪哥哥
|
问答

指定了队列之后还是oom，这个需要调整什么参数

322 1
雪哥哥
|
问答

当执行hdfs dfs -rm -r -skipTrash 的操作时，一定是已经完成location

532 1
雪哥哥
|
问答

这个参数如何指定

392 1
雪哥哥
|
问答

jindo table moveto 中如何指定提交的mr作业的队列 ， 默认走的是default

309 1
游客6vdkhpqtie2h2
|
问答

一个单表 ，几万数据，select一次30多s,主要时间这块是啥说数据传输时间吗

524 1
游客6vdkhpqtie2h2
|
问答

请问一个工作空间可以绑定多个emr吗

353 0
游客6vdkhpqtie2h2
|
资源调度
|
问答

sqoop，任务日志刷新到这里，就一直卡住了，也没有提交到yarn，请问大神这个是什么情况？该怎么排

726 1
游客6vdkhpqtie2h2
|
JSON 数据格式
|
问答

想问问大家clickhouse 怎么查嵌套了多重的json数据 ？

1096 0
游客6vdkhpqtie2h2
|
数据库管理
|
问答

买好emr以后，dms可以连接使用starrocks吗

545 1
游客6vdkhpqtie2h2
|
问答

请教下EMR的DataLake集群，如果我自己装Zeppelin和Hue，会有兼容性问题么

351 1
扬流
|
存储 缓存 运维
|
博文

基于EMR的新一代数据湖存储加速技术详解

本文整理自阿里云开源大数据平台数据湖存储团队孙大鹏在7月17日阿里云数据湖技术专场交流会的分享。

864 0
游客6vdkhpqtie2h2
|
问答

请问下EMR5.8.0Data Lake集群有没有Zeppelin和Hue组件呢

307 1
游客6vdkhpqtie2h2
|
SQL API HIVE
|
问答

API接口创建sparksql作业和hive sql作业 执行的sql是怎么传进去的？

1053 0
游客6vdkhpqtie2h2
|
Java Maven
|
问答

jindo的maven依赖有吗，没找到

714 0
扬流
|
存储 SQL 分布式计算
|
博文

数据湖管理及优化

本文整理自阿里云开源大数据高级开发工程师杨庆苇在7月17日阿里云数据湖技术专场交流会的分享。

1287 0
游客6vdkhpqtie2h2
|
问答

be.INFO里面有好多这种，是啥原因？

324 0
游客6vdkhpqtie2h2
|
SQL Shell HIVE
|
问答

dolphinscheduler shell工作流中跑hive,报这个错是为什么？

409 0
游客6vdkhpqtie2h2
|
Java
|
问答

这些 jar 现在有仓库坐标吗？

319 1
扬流
|
SQL 存储 弹性计算
|
博文

EMR重磅发布智能运维诊断系统(EMR Doctor)——开源大数据平台运维利器

E-MapReduce 推出面向开源大数据集群的智能运维诊断系统 E-MapReduce Doctor，有效提升大数据集群运维效率，辅助 EMR 用户完善集群监控体系。

3759 0
游客6vdkhpqtie2h2
|
问答

这个错误是啥意思？

576 1
游客6vdkhpqtie2h2
|
问答

starrocks storage_cooldown_time 能给动态分区配置吗？

798 1
游客6vdkhpqtie2h2
|
对象存储
|
问答

请问有没有flinksql通过jindo读取oss数据的demo，还是需要自己二次开发

1435 1
扬流
|
技术作品

数据湖统一元数据与权限

636
游客6vdkhpqtie2h2
|
SQL 分布式计算 HIVE
|
问答

我现在用开源spark读取hive是这样配置的 用EMR 内置的spark想读取hive数据该怎么弄

744 1
游客6vdkhpqtie2h2
|
流计算
|
问答

我们公司想在emr集群中自己安装flink，请问有没有知道文档link

618 1
游客6vdkhpqtie2h2
|
问答

StarRocks有字符集的概念吗？有utf8和utf8mb4吗？有字符集的概念吗？有utf8和ut

1272 2
游客6vdkhpqtie2h2
|
流计算
|
问答

EMR FLINK的界面怎么打开啊？或者命令行在哪里打？

410 0
扬流
|
SQL 存储 分布式计算
|
博文

数据湖统一元数据与权限

本文整理自阿里云数据湖构建与分析研发熊佳树在7月17日阿里云数据湖技术专场交流会的分享。

2065 0
游客6vdkhpqtie2h2
|
问答

clickhouse 22.3 怎么源码编译啊

442 0
游客6vdkhpqtie2h2
|
问答

starrocks压缩 比是多少呀？

694 1
游客6vdkhpqtie2h2
|
问答

大佬们 咨询一下，使用EMR实时流相关组件

442 1
游客6vdkhpqtie2h2
|
问答

请问E-MapReduce里starrcoks版本选择哪个版本好呢？

417 1
扬流
|
存储 SQL 分布式计算
|
博文

数据湖架构及概念简介

本文整理自阿里云开源大数据技术专家陈鑫伟在7月17日阿里云数据湖技术专场交流会的分享。

3817 0
游客3oewgrzrf6o5c
|
问答

dblink在哪里创建

958 1
游客3oewgrzrf6o5c
|
流计算
|
问答

请问DLF的数据入湖用的是flink cdc吗？

461 0
游客3oewgrzrf6o5c
|
问答

Mem usage has exceed the limit of BE - com.mysql.j

1756 0
游客3oewgrzrf6o5c
|
问答

各位大佬，请教一下： 我的Clickhouse集群，使用default用户创建了另外一个用户test

386 0
安妮Annie
|
人工智能 达摩院 算法
|
博文

2022世界人工智能大会大模型主题论坛星光云集，共话大模型的创新与生态发展！

本次“大规模预训练模型”主题论坛由阿里巴巴集团主办，世界人工智能大会组委会指导，整体围绕“大规模预训练模型的创新、落地和开源开放”展开，将探讨的边界延伸至算法模型、大数据及训练框架等方向，邀请到来自阿里巴巴，澜舟科技，清华大学，粤港澳大湾区数字经济研究院，深势科技，复旦大学等机构，在大规模预训练模型领域深耕多年的领军人物，通过keynote演讲和圆桌论坛两个环节，展示国产大模型多元生态下的技术成果和思考。

1821 0
游客3oewgrzrf6o5c
|
问答

请问，这个要在哪里写我这里打不开Notebook

365 1
你好！
登录掌握更多精彩内容
账号登录
我的内容
我的收藏
  • EMR 官网
  • EMR Serverless StarRocks 版
  • EMR Serverless Spark 版
    • 更多版块
    大数据计算 MaxCompute 实时数仓 Hologres 实时计算 Flink 大数据开发治理DataWorks 检索分析服务 Elasticsearch版 人工智能平台PAI 智能搜索推荐 大数据运维SREWorks 数据可视化DataV 向量检索服务 Milvus 版
    展开全部

    活跃用户

  • 网络AI
  • 翼龙云TG_yilongcloud
    国际云折扣优惠大全
  • 算精通
    北京阿里云ACE会长
  • 1998334386808512

    • 相关产品

  • 开源大数据平台 E-MapReduce
    文档详情 产品详情
    • 我要发布
    文章 问答