Query Performance Optimization at Alibaba Cloud Log Analytics Service

本文涉及的产品
日志服务 SLS,月写入数据量 50GB 1个月
简介: PrestoCon Day 2023,链接:https://prestoconday2023.sched.com/event/1Mjdc?iframe=no首页自我介绍,分享题目概要各个性能优化项能够优化的资源类别limit快速短路有什么优点?有啥特征?进一步的优化空间?避免不必要块的生成逻辑单元分布式执行,global 阶段的算子哪些字段无需输出?公共子表达式结合FilterNode和Proje

PrestoCon Day 2023,链接:https://prestoconday2023.sched.com/event/1Mjdc?iframe=no

首页

自我介绍,分享题目

概要

各个性能优化项能够优化的资源类别

limit快速短路

有什么优点?有啥特征?进一步的优化空间?

避免不必要块的生成

逻辑单元分布式执行,global 阶段的算子哪些字段无需输出?

公共子表达式

结合FilterNode和ProjectNode,复杂表达式拆分

合并相似数据源

arbitrary函数

Q&A

相关实践学习
日志服务之数据清洗与入湖
本教程介绍如何使用日志服务接入NGINX模拟数据,通过数据加工对数据进行清洗并归档至OSS中进行存储。
相关文章
|
1月前
|
SQL 关系型数据库 MySQL
|
1月前
|
SQL 监控 关系型数据库
|
8月前
|
消息中间件
failed to open log file at ‘/var/log/rabbitmq/rabbit@9f987b50c687_upgrade.log‘, reason: permission d
failed to open log file at ‘/var/log/rabbitmq/rabbit@9f987b50c687_upgrade.log‘, reason: permission d
204 0
|
SQL 存储 关系型数据库
【MySQL】通用查询日志 general query log 详解
通用查询日志(general query log)用来记录用户的所有操作,包括启动和关闭MySQL服务、所有用户的连接开始时间和截止时间、发送给MySQL数据库服务器的所有SQL指令等。当我们的数据发生异常时,查看通用查询日志,还原操作时的具体场景,准确定位问题。
|
存储 SQL 关系型数据库
图文结合带你搞懂MySQL日志之General Query Log(通用查询日志)
图文结合带你搞懂MySQL日志之General Query Log(通用查询日志)
421 0
|
关系型数据库 MySQL
MySQL的General Query日志是干什么的?底层原理是什么?
MySQL的General Query日志是干什么的?底层原理是什么?
|
关系型数据库 MySQL
MySQL的Slow Query日志是干什么的?底层原理是什么?
MySQL的Slow Query日志是干什么的?底层原理是什么?
108 0
|
SQL Web App开发 监控
零基础玩转SLS日志查询-SLS Query Builder发布
日志服务(Log Service,简称 SLS) 是阿里云提供的行业领先的日志大数据解决方案,一站式提供数据收集、清洗、分析、可视化、告警等功能。智能查询分析是数据中台重要的一环,SLS支持秒级查询10亿到千亿级别的日志数据,为万级开发者提供每日百亿级的查询服务。SLS查询语句是日志服务的专有语法,为了帮助用户简单、快速地构建查询语句,降低用户的学习成本,SLS推出了查询辅助输入(Query Builder)功能,让用户无需关注语法细节也可完成查询。
3152 0