AI 助理
备案控制台
开发者社区 大数据与机器学习 开源大数据平台 E-MapReduce 正文

JindoFS高效的元数据操作提现在什么地方？

JindoFS高效的元数据操作提现在什么地方？

展开
收起
Lee_tianbai 2021-01-07 15:27:18 876 分享 版权

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

1 条回答
写回答
取消 提交回答
  • Lee_tianbai

    JindoFS NamespaceService 基于内存 + 磁盘管理和存储元数据，但是性能上比 使用内存的 HDFS NameNode 还要好，一方面是 JindoFS 使用 C++ 开发，没有 GC 等问题，响应更快；另一方面是由于 Namespace Service 内部有更好的设计，比 如文件元数据上更细粒度的锁，更高效的数据块副本管理机制。

    2021-01-07 15:27:28
    赞同 展开评论
问答分类：
开源大数据平台 E-MapReduce
问答地址：
开发者社区 > 大数据与机器学习 > 开源大数据平台 E-MapReduce > 问答
相关问答
存储引擎组织页面的方式之一日志结构化的文件组织方式，是什么意思？
327
1
0
阿里云数据湖方案可支持多大级别的数据存储量？
966
1
0
在数据存储结构中，结构化数据是指什么，它通常应用在什么地方呢？
2236
1
0
数据存储是什么意思？
735
1
0
数据存储如何理解？
320
1
0
Hadoop生态圈中数据存储都包含哪些方式？
824
1
0
元数据存储和检索是什么意思？
353
1
0
阿里云存储怎么使用呢？
1387
0
0
过亿视频内容实时更新是如何解决 UDF 业务逻辑的一致性和可移植性问题？
1356
1
0
DataWork支持哪种计算和存储引擎服务呢？
646
1
0
大数据与机器学习

开源大数据平台 E-MapReduce

阿里云EMR是云原生开源大数据平台，为客户提供简单易集成的Hadoop、Hive、Spark、Flink、Presto、ClickHouse、StarRocks、Delta、Hudi等开源大数据计算和存储引擎，计算资源可以根据业务的需要调整。EMR可以部署在阿里云公有云的ECS和ACK平台。

我要提问
收录在圈子:
阿里云E-MapReduce
2323
+ 订阅

相关文章

  • 有奖实践，基于EMR StarRocks实现游戏玩家画像和行为分析
  • 拍立淘API是基于图像识别技术的服务接口，支持淘宝、1688和义乌购平台。
  • EMR管控平台全面升级：智能化助力客户实现在离线混部和降本增效
  • 美的楼宇科技基于阿里云 EMR Serverless Spark 构建 LakeHouse 湖仓数据平台

    • 热门讨论

    热门文章

  • 阿里云E-MapReduce flush之前，write的数据是在哪里，客户端内存缓存吗？
  • starrocks支持数自动降级到oss吧？
  • 各位大佬，请教下flink sink到oss按官网上的报找不到endpoint，我要想在idea中运
  • 阿里云E-MapReduce我同时要写很多文件（上千），这样的话同步flush 性能会不会很差呀？
  • starrocks通过DLF2.0建立外部表，可以进行delete或者update表数据的操作吗？
  • 核桃编程是什么？
  • k8s配置spark.kubernetes.driver.podTemplateFile不生效
  • EMR StarRocks有hive或spark的炸裂函数，类似explode可以用吗?
  • hdfs 文件块过多（1亿）每个datanode 占3000万块(分16G内),某时刻内存陡然增加？
  • 怎样进钉钉2个群
    • 展开全部
  • 分布式快照算法: Chandy-Lamport
  • JindoFS: 云上大数据的高性能数据湖存储方案
  • 梨视频：基于阿里云E-MapReduce搭建视频推荐系统的实践
  • JindoFS解析 - 云上大数据高性能数据湖存储方案
  • 助力云上开源生态 - 阿里云开源大数据平台的发展
  • 基于Spark Streaming 进行 MySQL Binlog 日志准实时传输
  • 在 Apache Spark 中利用 HyperLogLog 函数实现高级分析
  • 使用Hive进行OSS数据处理的一个最佳实践
  • YARN中的CPU资源隔离-CGroups
  • Spark中的资源调度
    • 展开全部
    还有其他疑问?
    咨询AI助理