爆料:DLA SQL新体验,新数据源,还有一元购(内含福利)

简介: DLA SQL全新改版,包括虚拟集群展示优化,提交SQL到虚拟集群、通过虚拟集群过滤历史SQL、置默认虚拟集群等,让用户能更加便捷的使用SQL虚拟集群;此外还支持了Kudu、OceanBase数据源。DLA SQL新推出1元首购原价315元的DLA 1000CU时资源包,福利链接:https://common-buy.aliyun.com/?commodityCode=openanalytics_cu_bag#/buy

背景介绍

阿里云数据湖分析(DLA)产品提供一站式的数据湖分析与计算服务。DLA SQL可以实现高效的在线分析,主要面向用户探索式分析、报表以及轻量ETL的场景,支持OSS、RDS、AnalyticsDB、MaxCompute、TableStore、ElasticSearch等多种数据源。

DLA包含扫描量版本和CU版本,查询默认会提交到按扫描量版本,并以扫描量计费。从新的版本开始引入虚拟集群概念,统一了按扫描量版本和CU版本,按扫描量计费的集群称为public共享集群,它是所有用户都可以使用的集群,并继续按照扫描量计费,但由于是共享集群,它并不保证算力。CU版本是用户可以购买的独享虚拟集群,无论扫描量的多少,它的费用都是固定的;更关键的是,由于是独享集群,它能保证算力;此外它还支持更多的数据源,如HDFS,以及近期发布的分析支撑Kudu、Oceanbase等数据源。

新功能介绍

虚拟集群展示优化

  • 进入DLA控制台后,在概览页面,能看到你所拥有的SQL虚拟集群数和Spark虚拟集群数,也可以点击跳转到购买页面。
    image.png
  • 进入虚拟集群管理页面,可以查看虚拟集群的列表。在列表中,能看到所有虚拟集群,是否SQL默认集群,也能直接点击去使用,提交的SQL到该集群。
    image.png
  • 进入虚拟集群详情页面,也可以查看该集群是否是SQL默认集群和集群标识详细。
    image.png

选择虚拟集群执行SQL

当您在DLA控制台购买SQL虚拟集群后,通过下面的方式能便捷的SQL的到指定的虚拟集群。
• 在SQL执行页面,增加了SQL执行集群的下拉框,里面会列出所有SQL虚拟集群,在下拉框中选择SQL的虚拟集群,点击同步执行或异步执行之后,SQL将会提交到指定的集群运行。
image.png

• 若需要通过BI工具连接DLA,并希望把SQL提交到指定的虚拟集群,而该BI工具不支持在SQL中指定hint,这种情况下,您可以在用户名后加上 @标识 的方式实现。
例如,用户名为oa_101302231286633637523c,虚拟集群标识为a2df,您可以把用户名改为:

oa_101302231286633637597c@a2df

之后提交的SQL会默认提交到标识为a2df的虚拟集群。SQL虚拟集群的标识可以在虚拟集群详情中查看。

通过虚拟集群过滤历史SQL

如果你想查看提交到某一虚拟集群的SQL,现在也能方便的实现:登录DLA控制台,在SQL监控页面, 通过虚拟集群过滤SQL。
image.png

此外,可以通过选择慢SQL过滤框,把慢SQL查出来,由于public共享集群不保证算力,因此可能会导致SQL执行耗时,点击加速链接,可以选择购买独享虚拟集群加速您的查询。
image.png

设置默认虚拟集群

DLA默认会把查询提交共享的public集群,如果希望默认把查询提交到已购买的SQL虚拟集群,可以通过如下操作设置默认虚拟集群。
• 进入阿里云云云生数据湖分析,点击左侧菜单栏的系统设置,在右侧的下拉框中选择SQL默认集群,点击确定完成设置。
image.png

分析Kudu和OceanBase数据数据

Kudu作为开源分布式存储引擎,致力于高性能分析和简化数据修改,具有高容错、水平扩展,随机访问、高效分析的优点。OceanBase是由蚂蚁集团完全自主研发的金融级分布式关系数据库,它具有数据强一致、高可用、高性能、在线扩展、高度兼容SQL标准和主流关系数据库、低成本等特点。 为了满足用户分析Kudu和OceanBase的需求,新的DLA版本也支持分析Kudu、OceanBase数据。当前DLA独享集群才支持分析Kudu和OceanBase的数据,因此需要先开通DLA独享SQL虚拟集群。

用户福利

欢迎1元首购原价315元的DLA 1000CU时资源包,详见链接:https://common-buy.aliyun.com/?commodityCode=openanalytics_cu_bag#/buy

使用DLA SQL的优势

DLA SQL(兼容Presto)的目标是提供比开源自建更高的性价比、开箱即用的体验、方便的数据摄入、MySQL生态带来的简单易用、内置各种优化的数据湖分析计算服务。用户可以先通过使用Serverless版本低成本试用,然后根据使用频率的高低、对资源是否有强独占的需求来决定生产环境使用Serverless版本还是CU版本。DLA SQL还在不断发展中,目前规划中的一些特性包含:
• 按照时间段或者工作负载进行自动扩缩容,帮助用户节省成本。
• 支持文件缓存机制,提升查询性能
• 内置大数据最佳实践,自动拦截Bad SQL
欢迎大家关注我们的钉钉群获取最新的信息:
image.png

相关文章
|
1月前
|
SQL 人工智能 JSON
Flink 2.1 SQL:解锁实时数据与AI集成,实现可扩展流处理
简介:本文整理自阿里云高级技术专家李麟在Flink Forward Asia 2025新加坡站的分享,介绍了Flink 2.1 SQL在实时数据处理与AI融合方面的关键进展,包括AI函数集成、Join优化及未来发展方向,助力构建高效实时AI管道。
476 43
|
1月前
|
SQL 人工智能 JSON
Flink 2.1 SQL:解锁实时数据与AI集成,实现可扩展流处理
本文整理自阿里云的高级技术专家、Apache Flink PMC 成员李麟老师在 Flink Forward Asia 2025 新加坡[1]站 —— 实时 AI 专场中的分享。将带来关于 Flink 2.1 版本中 SQL 在实时数据处理和 AI 方面进展的话题。
157 0
Flink 2.1 SQL:解锁实时数据与AI集成,实现可扩展流处理
|
2月前
|
SQL
SQL如何只让特定列中只显示一行数据
SQL如何只让特定列中只显示一行数据
|
6月前
|
SQL 自然语言处理 数据库
【Azure Developer】分享两段Python代码处理表格(CSV格式)数据 : 根据每列的内容生成SQL语句
本文介绍了使用Python Pandas处理数据收集任务中格式不统一的问题。针对两种情况:服务名对应多人拥有状态(1/0表示),以及服务名与人名重复列的情况,分别采用双层for循环和字典数据结构实现数据转换,最终生成Name对应的Services列表(逗号分隔)。此方法高效解决大量数据的人工处理难题,减少错误并提升效率。文中附带代码示例及执行结果截图,便于理解和实践。
161 4
|
2月前
|
SQL
SQL中如何删除指定查询出来的数据
SQL中如何删除指定查询出来的数据
|
2月前
|
SQL 关系型数据库 MySQL
SQL如何对不同表的数据进行更新
本文介绍了如何将表A的Col1数据更新到表B的Col1中,分别提供了Microsoft SQL和MySQL的实现方法,并探讨了多表合并后更新的优化方式,如使用MERGE语句提升效率。适用于数据库数据同步与批量更新场景。
|
3月前
|
SQL DataWorks 数据管理
SQL血缘分析实战!数据人必会的3大救命场景
1. 开源工具:Apache Atlas(元数据管理)、Spline(血缘追踪) 2. 企业级方案:阿里DataWorks血缘分析、腾讯云CDW血缘引擎 3. 自研技巧:在ETL脚本中植入版本水印,用注释记录业务逻辑变更 📌 重点总结:
|
4月前
|
SQL 数据挖掘 关系型数据库
【SQL 周周练】一千条数据需要做一天,怎么用 SQL 处理电表数据(如何动态构造自然月)
题目来自于某位发帖人在某 Excel 论坛的求助,他需要将电表缴费数据按照缴费区间拆开后再按月份汇总。当时用手工处理数据,自称一千条数据就需要处理一天。我将这个问题转化为 SQL 题目。
171 12
|
4月前
|
SQL 数据采集 资源调度
【SQL 周周练】爬取短视频发现数据缺失,如何用 SQL 填充
爬虫爬取抖音和快手的短视频数据时,如果遇到数据缺失的情况,如何使用 SQL 语句完成数据的补全。
118 5
|
7月前
|
SQL 关系型数据库 MySQL
基于SQL Server / MySQL进行百万条数据过滤优化方案
对百万级别数据进行高效过滤查询,需要综合使用索引、查询优化、表分区、统计信息和视图等技术手段。通过合理的数据库设计和查询优化,可以显著提升查询性能,确保系统的高效稳定运行。
262 9