AI 助理
文档备案控制台
开发者社区 大数据与机器学习 大数据计算 MaxCompute 文章 正文

MaxCompute SQL 2.0全新的计算引擎

2016-11-15 3082
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《 阿里云开发者社区用户服务协议》和 《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写 侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
简介： 本文PPT来自阿里云数据事业部专家少杰于10月15日在2016年杭州云栖大会上发表的《MaxCompute SQL 2.0全新的计算引擎》。

MaxCompute2.0 SQL是一个重大更新，新版本相较于旧版本有很大的更新，我们有全新的解析器，全新的基于代价的优化器，全新的运行时库。新版本性能的增长有长足的进步，查询优化减少了大部分人工干预自动统计信息收集也是一个方面。

a8dc808d9d69cbba6525bccd152d13971cbbdc78745c9e87d2cfd0e91f52ad0d54bd0f2a887dfdd248188259682e2180eb5a400fd87af89043d4fbaf8b22a2ac3102c81c09d759b5c915c007cb79b17577b082b855a8af1a767b1ffcbd4d67cf1cfacb58ea9862643b7835b00d7466571a799f23717cb35b7c36329448cc58e6f9b3aa4841757d87c43507e8f671e87cfbee02a7f36da01c6c5014da281e2340a989ecb4a576f48104103ca5672ad18bcd157241232b47cd543efcda15fd38beea754b2640f5e7e85126d8269e7004673cf14d1682f8eba4b2bc80cf946278a2b516a3c7e2a30ab2ec530c7a7eaaab7cbdb39b133932789c4d04865886e5d3f704ad67e66fbf801f8c74a52f8d0faf14191d7666c204332d24fc2afecaf7d7e6b21e37bc042cad22a00fe1c7


欢迎加入MaxCompute钉钉群讨论

35a12d1cfb9f44bb6eead5bf43e9e0ca60393eff

文章标签：
云原生大数据计算服务 MaxCompute
SQL
分布式计算
MaxCompute
关键词：
maxcompute SQL
云原生大数据计算服务 MaxCompute sql
SQL MaxCompute
云原生大数据计算服务 MaxCompute计算引擎
SQL计算引擎
相关实践学习
基于MaxCompute的热门话题分析
Apsara Clouder大数据专项技能认证配套课程：基于MaxCompute的热门话题分析
云计算小粉
目录
相关文章
阿里云开发者
|
5月前
|
SQL 存储 分布式计算
【万字长文，建议收藏】《高性能ODPS SQL章法》——用古人智慧驾驭大数据战场
本文旨在帮助非专业数据研发但是有高频ODPS使用需求的同学们（如数分、算法、产品等）能够快速上手ODPS查询优化，实现高性能查数看数，避免日常工作中因SQL任务卡壳、失败等情况造成的工作产出delay甚至集群资源稳定性问题。
阿里云开发者
1273 36
【万字长文，建议收藏】《高性能ODPS SQL章法》——用古人智慧驾驭大数据战场
游客vwx7bav3mqbk6
|
6月前
|
SQL 分布式计算 大数据
SparkSQL 入门指南：小白也能懂的大数据 SQL 处理神器
在大数据处理的领域，SparkSQL 是一种非常强大的工具，它可以让开发人员以 SQL 的方式处理和查询大规模数据集。SparkSQL 集成了 SQL 查询引擎和 Spark 的分布式计算引擎，使得我们可以在分布式环境下执行 SQL 查询，并能利用 Spark 的强大计算能力进行数据分析。
游客vwx7bav3mqbk6
928 0
Echo_Wish
|
8月前
|
SQL 人工智能 分布式计算
别再只会写SQL了！这五个大数据趋势正在悄悄改变行业格局
别再只会写SQL了！这五个大数据趋势正在悄悄改变行业格局
Echo_Wish
165 0
青云交（Java大数据AI云原生Python）
|
10月前
|
SQL 关系型数据库 MySQL
大数据新视界--大数据大厂之MySQL数据库课程设计：MySQL 数据库 SQL 语句调优方法详解（2-1）
本文深入介绍 MySQL 数据库 SQL 语句调优方法。涵盖分析查询执行计划，如使用 EXPLAIN 命令及理解关键指标；优化查询语句结构，包括避免子查询、减少函数使用、合理用索引列及避免 “OR”。还介绍了索引类型知识，如 B 树索引、哈希索引等。结合与 MySQL 数据库课程设计相关文章，强调 SQL 语句调优重要性。为提升数据库性能提供实用方法，适合数据库管理员和开发人员。
青云交（Java大数据AI云原生Python）
374 11
Echo_Wish
|
11月前
|
SQL 大数据 数据挖掘
玩转大数据：从零开始掌握SQL查询基础
玩转大数据：从零开始掌握SQL查询基础
Echo_Wish
395 35
青云交（Java大数据AI云原生Python）
|
10月前
|
关系型数据库 MySQL 大数据
大数据新视界--大数据大厂之MySQL 数据库课程设计：MySQL 数据库 SQL 语句调优的进阶策略与实际案例（2-2）
本文延续前篇，深入探讨 MySQL 数据库 SQL 语句调优进阶策略。包括优化索引使用，介绍多种索引类型及避免索引失效等；调整数据库参数，如缓冲池、连接数和日志参数；还有分区表、垂直拆分等其他优化方法。通过实际案例分析展示调优效果。回顾与数据库课程设计相关文章，强调全面认识 MySQL 数据库重要性。为读者提供综合调优指导，确保数据库高效运行。
青云交（Java大数据AI云原生Python）
324 5
游客nsyhaoxcmeiq6
|
SQL 算法 大数据
为什么大数据平台会回归SQL
在大数据领域，尽管非结构化数据占据了大数据平台80%以上的存储空间，结构化数据分析依然是核心任务。SQL因其广泛的应用基础和易于上手的特点成为大数据处理的主要语言，各大厂商纷纷支持SQL以提高市场竞争力。然而，SQL在处理复杂计算时表现出的性能和开发效率低下问题日益凸显，如难以充分利用现代硬件能力、复杂SQL优化困难等。为了解决这些问题，出现了像SPL这样的开源计算引擎，它通过提供更高效的开发体验和计算性能，以及对多种数据源的支持，为大数据处理带来了新的解决方案。
游客nsyhaoxcmeiq6
217 5
游客nsyhaoxcmeiq6
|
SQL 存储 算法
比 SQL 快出数量级的大数据计算技术
SQL 是大数据计算中最常用的工具，但在实际应用中，SQL 经常跑得很慢，浪费大量硬件资源。例如，某银行的反洗钱计算在 11 节点的 Vertica 集群上跑了 1.5 小时，而用 SPL 重写后，单机只需 26 秒。类似地，电商漏斗运算和时空碰撞任务在使用 SPL 后，性能也大幅提升。这是因为 SQL 无法写出低复杂度的算法，而 SPL 提供了更强大的数据类型和基础运算，能够实现高效计算。
游客nsyhaoxcmeiq6
279 1
武子康
|
SQL 消息中间件 分布式计算
大数据-143 - ClickHouse 集群 SQL 超详细实践记录！（一）
大数据-143 - ClickHouse 集群 SQL 超详细实践记录！（一）
武子康
519 0
大数据与机器学习

大数据计算 MaxCompute

热门文章

最新文章

  • 1
    大数据环境下该如何优雅地设计数据分层
  • 2
    odps是什么?
  • 3
    MaxCompute执行作业慢的原因排查
  • 4
    阿里云MaxCompute（大数据）公开数据集---带你玩转人工智能
  • 5
    吴刚专访--大数据和 MaxCompute 技术和故事
  • 6
    2017杭州云栖大会FAQ（持续更新中）
  • 7
    Python+大数据计算平台，PyODPS架构手把手教你搭建
  • 8
    [大数据新手上路]“零基础”系列课程--如何将ECS上的Hadoop数据迁移到阿里云数加·MaxCompute
  • 9
    干货：解码OneData，阿里的数仓之路。
  • 10
    品《阿里巴巴大数据实践-大数据之路》一书（上）
  • 1
    金融行情系统中，API 接入常见的 5 个工程问题
    80
  • 2
    寻找 AI 全能王——阿里云 Data+AI 工程师全球大奖赛正式开启
    404
  • 3
    网站代码 网站源代码 网页源代码 网页代码网站
    788
  • 4
    【跨国数仓迁移最佳实践8】MaxCompute Streaming Insert：大数据数据流写业务迁移的实践与突破
    552
  • 5
    【跨国数仓迁移最佳实践7】基于 MaxCompute 多租的大数据平台架构
    297
  • 6
    ODPS 十五周年实录 | Data + AI，MaxCompute 下一个15年的新增长引擎
    251
  • 7
    【跨国数仓迁移最佳实践6】MaxCompute SQL语法及函数功能增强，10万条SQL转写顺利迁移
    392
  • 8
    诊断设备企业必看！垂直医疗行业的CRM软件有哪些？
    360
  • 9
    MaxCompute 聚簇优化推荐原理
    349
  • 10
    【跨国数仓迁移最佳实践5】MaxCompute近线查询解决方案助力物流电商等实时场景实现高效查询
    272

    • 相关产品

  • 云原生大数据计算服务 MaxCompute
    文档详情 产品详情

    • 相关课程

    更多
  • 大数据知识图谱系列—基于ELK+Flink日志全观测最佳实践
  • SQL完全自学手册
  • SQL Server on Linux入门教程
  • SQL入门与实践
  • 数据库及SQL/MySQL基础
  • SQL进阶及查询

    • 相关电子书

    更多
  • SQL Server在电子商务中的应用与实践
  • GeoMesa on Spark SQL
  • 原生SQL on Hadoop引擎- Apache HAWQ 2.x最新技术解密malili
    • 下一篇
    第五届伏魔挑战赛如约来袭，诚邀各路高手来战！