开发者社区 > 大数据与机器学习 > 开源大数据平台 E-MapReduce > 正文

JindoFS 的架构是怎样的?

JindoFS 的架构是怎样的?

展开
收起
Lee_tianbai 2021-01-07 15:25:02 1142 0
1 条回答
写回答
取消 提交回答
  • JindoFS 主要包含两个服务组件:元数据服务(NamespaceService) 和存储服务 (StorageService):

     NamespaceService 主要负责元数据管理以及管理 StorageService。

     StorageService 主要负责管理节点的本地数据和 OSS 上的缓存数据。

    下图是 JindoFS 架构图:元数据服务 NamespaceService 部署在独立的节点,对 于生产环境推荐部署三台(Raft)来实现服务高可用;存储服务 StorageService 部署在集 群的计算节点,管理节点上的闲置存储资源(本地盘/SSD/内存等),为 JindoFS 提供分 布式缓存能力。

    image.png

    2021-01-07 15:25:36
    赞同 展开评论 打赏

阿里云EMR是云原生开源大数据平台,为客户提供简单易集成的Hadoop、Hive、Spark、Flink、Presto、ClickHouse、StarRocks、Delta、Hudi等开源大数据计算和存储引擎,计算资源可以根据业务的需要调整。EMR可以部署在阿里云公有云的ECS和ACK平台。

相关电子书

更多
MaxCompute Serverless 架构演进 立即下载
阿里云消息队列的 Serverless架构演进 立即下载
青团社云原生架构实践—亿级灵活用工平台的架构实践 立即下载