开发者社区> 问答> 正文

我们的DB数据是在阿里云上,请问我应该如何选择hadoop弹性计算框架

我们的数据DB是在阿里云上,请问我应该如何选择弹性计算框架?
我们的日均数据大概在千万到 亿的级别,需要利用到spark 的内存计算。
是直接用ODPS 比较好,还是 在ECS上搭建HADOOP 集群比较好?
或者是否可以 从阿里云DB上下载数据到我们自己的服务器上hadoop 框架上。
麻烦帮忙分析下,谢谢!

展开
收起
leeking 2016-08-24 17:42:40 2620 0
1 条回答
写回答
取消 提交回答
  • 专注在大数据分布式计算、数据库及存储领域,拥有13+年大数据引擎、数据仓库、宽表引擎、平台研发经验,6年云智能大数据产品技术一号位经验,10年技术团队管理经验;云智能技术架构/云布道师; 研发阿里历代的大数据技术产品包括ODPS、DLA、ADB,最近五年主导宽表引擎研发、DLA、ADB湖仓研发;

    可以尝试使用emapreduce这个大数据平台,直接提供了spark的服务。
    见:https://www.aliyun.com/product/emapreduce?spm=5176.8142029.388261.27.bKMlzj

    2019-07-17 20:04:58
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
阿里云云原生 Serverless 技术实践营 PPT 演讲 立即下载
阿里云产品十月刊 立即下载
基于阿里云构建博学谷平台实时湖仓 立即下载