数据湖要考虑的首要问题是什么?-问答-阿里云开发者社区-阿里云

开发者社区> 问答> 正文

数据湖要考虑的首要问题是什么?

Lee_tianbai 2021-01-07 16:34:27 645

数据湖要考虑的首要问题是什么?

old问题 show什么 hold问题 ssh问题是什么 数据问题是什么
分享到
取消 提交回答
全部回答(2)
  • zik_kinbun
    2021-01-08 10:04:01

    数据库未来一段时间内数量的增长规模

    0 1
  • Lee_tianbai
    2021-01-08 15:46:56

    从定义看,一块 u 盘即符合数据湖的定义。u 盘可以是数据湖,oss 可以是数据湖, hdfs、盘古也可以是数据湖。它们均严格的符合数据湖的定义。作为企业的数据湖技术选 型第一个需要考虑的问题就是:采用什么样的存储介质或存储系统作为自己的数据湖解决方 案。众所周知,不同的存储介质或存储系统有不同的优势和劣势。比如:有的存储系统随机 读取的响应时间更好、有的系统批量读取的吞吐量更好、有的系统存储成本更低、有的系统 扩展性更好、有的系统结构化数据组织得更高效...相应的,这些提到的各个指标中有些恰恰 是有些存储所不擅长的,如何享有所有存储系统的优势、规避所有存储系统的劣势变成了云 上数据湖服务要考虑的首要问题。 要解决这个矛盾的问题,在理论上是不可能一劳永逸的。聪明的做法是对上提供一个逻 辑上的存储解决方案,然后让需要不同访问特点的数据灵活地在各种底层存储系统中迁移。 通过便捷的数据迁移(、以及数据格式转化)的能力, 来充分发挥出各个存储系统的优势。 结论:成熟的数据湖一定是一个逻辑上的存储系统,它的底层是多个各种类型的存储系统所 组成。

    0 0
添加回答
+ 订阅

阿里巴巴开源大数据技术团队成立阿里云EMR技术圈, 每周推送前沿技术文章,直播分享经典案例、在线答疑,营造纯粹的开源大数据氛围,欢迎加入!加入钉钉群聊阿里云E-MapReduce交流2群,点击进入查看详情 https://qr.dingtalk.com/action/joingroup?code=v1,k1,cNBcqHn4TvG0iHpN3cSc1B86D1831SGMdvGu7PW+sm4=&_dt_no_comment=1&origin=11

推荐文章
相似问题
最新问题
官网链接