开发者社区> 问答> 正文

大规模计算平台研究与实战【精品问答集锦】

社区为大家准备了多场技术直播,广大网友踊跃提问,小编将其中优质的问答整理成汇总贴,供大家相互交流学习

专家介绍:林伟
阿里云数据库资深专家林伟,阿里云大数据计算平台MaxCompute首席架构师。该系统目前支撑了阿里巴巴、蚂蚁金服集群绝大多数计算任务。具有大规模并发系统有10年以上的系统架构设计及研发经验,并在国际一流ODSI、NSDI、SIGMOD会议上多次发表论文。

直播简介
MaxCompute是由阿里云自主研发,是阿里巴巴自主研发的海量数据处理平台。能够在多个单机群达万台跨集群的计算平台上提供针对TB/PB/EB级数据分布式处理能力,应用于数据分析、挖掘、商业智能等领域。提供海量数据仓库的解决方案以及针对大数据的分析建模服务。支持阿里巴巴和蚂蚁金服绝大多数计算分析任务。本次演讲向大家介绍MaxCompute中的在面对超大规模的活动中如何满足阿里巴巴上万用户不同计算任务在延时,性能,规模上不同需求并在全局做到低成本,高性能,高弹性,高可用。 同时如何能够在保证高可用的计算服务和用户数据的安全性下能够持续发布改进计算平台。

演讲要点:

  • 伏羲资源调度和多租户管理
  • 分布式场景中的查询优化
  • 基于历史数据的优化
  • 跨集群计算使得计算突破单机群限制
  • 大规模计算平台如何进行持续改进和发布

本场问答集锦
持续改进和发布中的挑战,还有哪些?
http://yq.aliyun.com/ask/39761

我想学习大数据处理与分析,目前没有任何数据处理的经验。请帮忙列个书单,我想自学这个
http://yq.aliyun.com/ask/39756

本身MaxCompute是为了几千/几万台机器规模开发的大规模分布式系统,最小化部署大概什么规模呢?
http://yq.aliyun.com/ask/39755

常用场景有哪些?如何才能接入maxcompute的能力?
http://yq.aliyun.com/ask/39753

maxcompute听起来很强大,会不会有lock-in问题?
http://yq.aliyun.com/ask/39752

maxCompute不负责收集数据,只负责处理数据吗?数据怎么导入maxCompute中?
http://yq.aliyun.com/ask/39743

市面上很多大数据框架,为什么要自研大数据平台
http://yq.aliyun.com/ask/39739

比如在一个省16个地市,分析套牌车,可不可以把每个地市的数据都放在本市,不会汇聚到一个机房,开展大规模分析应用?
http://yq.aliyun.com/ask/39729

展开
收起
管理贝贝 2016-10-18 18:36:47 6252 0
2 条回答
写回答
取消 提交回答
问答排行榜
最热
最新

相关电子书

更多
图计算专场 大规模分布式图计算、学习和推理技术 及创新应用论坛 立即下载
大规模无服务器计算服务的挑战和实践 立即下载
PAI分布式机器学习平台 立即下载