开发者社区> 问答> 正文

什么样的应用场景要用到Hadoop?

现企业要求把各业务数据统一到一起,进行分析,数据都在MYSQL里。数据量大概3T,每年递增0.5-1T左右,基本没有非结构化数据,但后期可能会有,这个用Hadoop合适吗 ?

本问题来自阿里云开发者社区的【11大垂直技术领域开发者社群】。https://developer.aliyun.com/article/706511 点击链接欢迎加入感兴趣的技术领域群。

展开
收起
珍宝珠 2019-08-21 15:38:27 1418 0
2 条回答
写回答
取消 提交回答
  • 如果数据量小的话一般不需要使用hadoop,现在关系型数据库越来越强大,再加上把机器配置提高,RDMS就更强大了,现在分布式数据库的产品越来越多,阿里云上就有分布式数据库产品可以使用。如果存储的数据很多(几百T以上)而且还要保存历史数据,再加上要对这些数据进行很多分析,一般使用hadoop比较合适,hadoop集群的节点可以比RDMS使用的机器配置差,搭建成集群之后,使用分布式的方法,让每个节点同时干活,就比较适合分析大量数据。

    2020-03-03 20:46:37
    赞同 展开评论 打赏
  • Hadoop mapreduce这个思想主要是借助了分而治之的算法思想。就是所谓的很庞大的业务逻辑能分成一个个小型任务去执行,这种类型的业务逻辑才能使用Hadoop mapreduce去解决。

    答案来源于网络

    2019-09-27 20:34:31
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
\"Hadoop的过去现在和未来——从阿里云梯到E-MapReduce \" 立即下载
Why is my Hadoop* jobslow? 立即下载
Hadoop的过去现在和未来 立即下载

相关实验场景

更多