开发者社区> 问答> 正文

hadoop架构把数据放到内存中该如何管理呢?

hadoop架构把数据放到内存中该如何管理呢?

展开
收起
游客ydhxr2xydmgpo 2021-12-05 22:22:36 783 0
1 条回答
写回答
取消 提交回答
  • redis有两种持久化的策略

    rdb:加载比较快,容易造成数据的丢失,相当于快照

    aof:加载比较慢,占用的空间比较大,很多的冗余操作都会记录

    hdfs就是数据的一致性和安全性要求的比较高,在持久化应该采取类aof的策略,在hadoop叫中edits.log,实时记录到这个文件中,这个玩意的缺点就是很大,很慢,加载时非常慢,hdfs宕机了

    2021-12-05 22:52:44
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
阿里云消息队列的 Serverless架构演进 立即下载
内存取证与IaaS云平台恶意行 为的安全监控 立即下载
云服务器ECS内存增强型实例re6全新发布 立即下载