AI 助理
文档备案控制台
开发者社区> 大数据与机器学习> 开源大数据平台 E-MapReduce

开源大数据平台 E-MapReduce

关注

阿里云EMR是云原生开源大数据平台，为客户提供简单易集成的Hadoop、Hive、Spark、Flink、Presto、ClickHouse、StarRocks、Delta、Hudi等开源大数据计算和存储引擎，计算资源可以根据业务的需要调整。EMR可以部署在阿里云公有云的ECS和ACK平台。

0
今日
1646
内容
13
活动
5429
关注
来自： 大数据与机器学习

最新

博文

用户案例

免费试用

问答

视频

电子书

学习

活动
Dev-Talk
|
视频

Lakehouse Meetup “基于数据湖格式构建数据湖仓架构”

Lakehouse Meetup “基于数据湖格式构建数据湖仓架构”毕岩 阿里巴巴技术专家

715 0
扬流
|
技术作品

2022年开源大数据热力报告

《2022年开源大数据热力报告》，由开放原子开源基金会、X-lab开放实验室和阿里巴巴开源委员会联合出品。报告基于公开数据研究最活跃的102个开源大数据项目，探寻出开源大数据技术发展背后的“摩尔定律”。

4356
阿里云大数据Al技术
|
存储 分布式计算 资源调度
|
博文

Spark on k8s 在阿里云 EMR 的优化实践

本文整理自阿里云技术专家范佚伦在7月17日阿里云数据湖技术专场交流会的分享。

2387 0
阿里云大数据Al技术
|
SQL 存储 JSON
|
博文

基于 Delta Lake 构建数据湖仓体系

本文整理自阿里云开源大数据平台技术专家毕岩在7月17日阿里云数据湖技术专场交流会的分享。

1488 0
雪哥哥
|
问答

我在mac上跑直接报错

589 0
雪哥哥
|
对象存储
|
问答

除了oss其他的支持吗？s3a obs cos之类

713 1
雪哥哥
|
问答

使用jindosdk的时候这个so文件放什么目录，我看使用说明里都没说放这个so

448 1
雪哥哥
|
缓存 对象存储
|
问答

想请教一下集群的数据盘是ESSD云盘的时候，使用jindofs来将OSS的一些文件缓存进集群云盘是不

1182 0
雪哥哥
|
问答

未来有计划starrocks可以写入hudi等外表吗？

489 1
雪哥哥
|
问答

未来有计划starrocks可以写入hudi等外表吗？

424 1
雪哥哥
|
问答

starrocks可以写入hudi等外表么？

459 0
毛毛虫雨
|
问答

有requestId吗？

729 0
毛毛虫雨
|
问答

这是什么问题

439 1
毛毛虫雨
|
数据采集
|
问答

请问StarRocks如果需要做数据预处理(跑批)是怎么实现的呢？

666 1
毛毛虫雨
|
问答

StarRocks首月99元的配置是固定的么？

468 0
毛毛虫雨
|
问答

StarRocks首月99元的配置是固定的么？

446 0
毛毛虫雨
|
问答

后续什么时候会升级到2.4版本能，有没有可能自定义版本能，虽然现在只有2.4-rc版本

554 0
毛毛虫雨
|
问答

这个Console是什么呀？

514 1
雪哥哥
|
API 对象存储
|
问答

咨询一个问题， jindofs 可以提供本地 oss api 接口吗？ 相当于在本地提供一个 oss

1211 1
雪哥哥
|
问答

是在使用这个jindofsx 的ranger方案吗？

325 0
雪哥哥
|
流计算
|
问答

flink lib里放的是 jindo-flink-4.5.1-full.jar

413 1
雪哥哥
|
JSON 对象存储 流计算
|
问答

flink StreamingFileSink parquet格式 写OSS报这个json字段的错误

972 2
雪哥哥
|
对象存储
|
问答

文件在oss上不应该有网络传输时间吗[捂脸哭]

1018 1
雪哥哥
|
问答

升级JindoSDK对emr集群版本也有要求。

398 1
雪哥哥
|
分布式计算 Spark
|
问答

升级完，现有spark起不来了

557 1
雪哥哥
|
问答

升级过程中 key_load_public: invalid format 是读取公钥出了问题吗 ？

650 1
雪哥哥
|
对象存储
|
问答

请教一下，如果某个bucket下子目录太多导致oss读写变慢（可能是oss list等接口较慢），有

932 1
雪哥哥
|
问答

指定了队列之后还是oom，这个需要调整什么参数

385 1
雪哥哥
|
问答

当执行hdfs dfs -rm -r -skipTrash 的操作时，一定是已经完成location

606 1
雪哥哥
|
问答

这个参数如何指定

451 1
雪哥哥
|
问答

jindo table moveto 中如何指定提交的mr作业的队列 ， 默认走的是default

379 1
游客6vdkhpqtie2h2
|
问答

一个单表 ，几万数据，select一次30多s,主要时间这块是啥说数据传输时间吗

618 1
游客6vdkhpqtie2h2
|
问答

请问一个工作空间可以绑定多个emr吗

442 0
游客6vdkhpqtie2h2
|
资源调度
|
问答

sqoop，任务日志刷新到这里，就一直卡住了，也没有提交到yarn，请问大神这个是什么情况？该怎么排

802 1
游客6vdkhpqtie2h2
|
JSON 数据格式
|
问答

想问问大家clickhouse 怎么查嵌套了多重的json数据 ？

1481 0
游客6vdkhpqtie2h2
|
数据库管理
|
问答

买好emr以后，dms可以连接使用starrocks吗

645 1
游客6vdkhpqtie2h2
|
问答

请教下EMR的DataLake集群，如果我自己装Zeppelin和Hue，会有兼容性问题么

626 1
扬流
|
存储 缓存 运维
|
博文

基于EMR的新一代数据湖存储加速技术详解

本文整理自阿里云开源大数据平台数据湖存储团队孙大鹏在7月17日阿里云数据湖技术专场交流会的分享。

1177 0
游客6vdkhpqtie2h2
|
问答

请问下EMR5.8.0Data Lake集群有没有Zeppelin和Hue组件呢

383 1
游客6vdkhpqtie2h2
|
SQL API HIVE
|
问答

API接口创建sparksql作业和hive sql作业 执行的sql是怎么传进去的？

1147 0
游客6vdkhpqtie2h2
|
Java Maven
|
问答

jindo的maven依赖有吗，没找到

812 0
扬流
|
存储 SQL 分布式计算
|
博文

数据湖管理及优化

本文整理自阿里云开源大数据高级开发工程师杨庆苇在7月17日阿里云数据湖技术专场交流会的分享。

1456 0
游客6vdkhpqtie2h2
|
问答

be.INFO里面有好多这种，是啥原因？

388 0
游客6vdkhpqtie2h2
|
SQL Shell HIVE
|
问答

dolphinscheduler shell工作流中跑hive,报这个错是为什么？

581 0
游客6vdkhpqtie2h2
|
Java
|
问答

这些 jar 现在有仓库坐标吗？

388 1
扬流
|
SQL 存储 弹性计算
|
博文

EMR重磅发布智能运维诊断系统(EMR Doctor)——开源大数据平台运维利器

E-MapReduce 推出面向开源大数据集群的智能运维诊断系统 E-MapReduce Doctor，有效提升大数据集群运维效率，辅助 EMR 用户完善集群监控体系。

3968 0
游客6vdkhpqtie2h2
|
问答

这个错误是啥意思？

678 1
游客6vdkhpqtie2h2
|
问答

starrocks storage_cooldown_time 能给动态分区配置吗？

885 1
游客6vdkhpqtie2h2
|
对象存储
|
问答

请问有没有flinksql通过jindo读取oss数据的demo，还是需要自己二次开发

1492 1
扬流
|
技术作品

数据湖统一元数据与权限

713
你好！
登录掌握更多精彩内容
账号登录
我的内容
我的收藏
  • EMR 官网
  • EMR Serverless StarRocks 版
  • EMR Serverless Spark 版
    • 更多版块
    大数据计算 MaxCompute 实时数仓 Hologres 实时计算 Flink 大数据开发治理DataWorks 检索分析服务 Elasticsearch版 人工智能平台PAI 智能搜索推荐 大数据运维SREWorks 数据可视化DataV 向量检索服务 Milvus 版
    展开全部

    活跃用户

  • AI精灵
  • 养虾小白
  • 新答案

    • 相关产品

  • 开源大数据平台 E-MapReduce
    文档详情 产品详情
    • 我要发布
    文章 问答