大规模计算平台研究与实战【精品问答集锦】-问答-阿里云开发者社区-阿里云

开发者社区> 管理贝贝> 正文

大规模计算平台研究与实战【精品问答集锦】

2016-10-18 18:36:47 5136 2

社区为大家准备了多场技术直播,广大网友踊跃提问,小编将其中优质的问答整理成汇总贴,供大家相互交流学习

专家介绍:林伟
阿里云数据库资深专家林伟,阿里云大数据计算平台MaxCompute首席架构师。该系统目前支撑了阿里巴巴、蚂蚁金服集群绝大多数计算任务。具有大规模并发系统有10年以上的系统架构设计及研发经验,并在国际一流ODSI、NSDI、SIGMOD会议上多次发表论文。

直播简介
MaxCompute是由阿里云自主研发,是阿里巴巴自主研发的海量数据处理平台。能够在多个单机群达万台跨集群的计算平台上提供针对TB/PB/EB级数据分布式处理能力,应用于数据分析、挖掘、商业智能等领域。提供海量数据仓库的解决方案以及针对大数据的分析建模服务。支持阿里巴巴和蚂蚁金服绝大多数计算分析任务。本次演讲向大家介绍MaxCompute中的在面对超大规模的活动中如何满足阿里巴巴上万用户不同计算任务在延时,性能,规模上不同需求并在全局做到低成本,高性能,高弹性,高可用。 同时如何能够在保证高可用的计算服务和用户数据的安全性下能够持续发布改进计算平台。

演讲要点:

  • 伏羲资源调度和多租户管理
  • 分布式场景中的查询优化
  • 基于历史数据的优化
  • 跨集群计算使得计算突破单机群限制
  • 大规模计算平台如何进行持续改进和发布

本场问答集锦
持续改进和发布中的挑战,还有哪些?
http://yq.aliyun.com/ask/39761

我想学习大数据处理与分析,目前没有任何数据处理的经验。请帮忙列个书单,我想自学这个
http://yq.aliyun.com/ask/39756

本身MaxCompute是为了几千/几万台机器规模开发的大规模分布式系统,最小化部署大概什么规模呢?
http://yq.aliyun.com/ask/39755

常用场景有哪些?如何才能接入maxcompute的能力?
http://yq.aliyun.com/ask/39753

maxcompute听起来很强大,会不会有lock-in问题?
http://yq.aliyun.com/ask/39752

maxCompute不负责收集数据,只负责处理数据吗?数据怎么导入maxCompute中?
http://yq.aliyun.com/ask/39743

市面上很多大数据框架,为什么要自研大数据平台
http://yq.aliyun.com/ask/39739

比如在一个省16个地市,分析套牌车,可不可以把每个地市的数据都放在本市,不会汇聚到一个机房,开展大规模分析应用?
http://yq.aliyun.com/ask/39729

取消 提交回答
全部回答(2)
添加回答
相关问答

17

回答

【大咖问答】对话PostgreSQL 中国社区发起人之一,阿里云数据库高级专家 德哥

阿里ACE 彭飞 2019-07-10 09:36:10 962746浏览量 回答数 17

145

回答

【新手入门】云服务器linux使用手册

fanyue88888 2012-11-26 17:14:18 157044浏览量 回答数 145

8

回答

OceanBase 使用动画(持续更新)

mq4096 2019-02-20 17:16:36 333790浏览量 回答数 8

22

回答

爬虫数据管理【问答合集】

我是管理员 2018-08-10 16:37:41 146746浏览量 回答数 22

2

回答

mySQL数据库报错You have an error in your SQL syntax

落地花开啦 2016-02-14 16:09:24 126153浏览量 回答数 2

10

回答

[@墨玖tao][¥20]为什么流式处理框架都是 java 写成的,JVM 是不是在流和批存在着特殊优势。还有分布式资源调度,感觉Mesos 的成长速度跟不上 Yarn。这是为什么?

管理贝贝 2018-10-23 13:18:03 136113浏览量 回答数 10

38

回答

安全组详解,新手必看教程

我的中国 2017-11-30 15:23:46 256831浏览量 回答数 38

82

回答

OSS入门教程

belle.zhoux 2014-07-07 17:14:27 149278浏览量 回答数 82

21

回答

请教一下数据量有100万条左右要什么配置?

易网网络 2013-03-27 15:18:02 192311浏览量 回答数 21

13

回答

游戏云精彩帖汇总

nono20011908 2014-08-22 11:00:12 203612浏览量 回答数 13
+关注
管理贝贝
静静的看着你们
60
文章
602
问答
推荐问答
相关电子书
更多
文娱运维技术
立即下载
《SaaS模式云原生数据仓库应用场景实践》
立即下载
《看见新力量:二》电子书
立即下载