AI 助理
备案控制台
开发者社区 云计算 文章 正文

Query Performance Optimization at Alibaba Cloud Log Analytics Service

2023-06-13 160
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《 阿里云开发者社区用户服务协议》和 《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写 侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
本文涉及的产品
日志服务 SLS，月写入数据量 50GB 1个月
简介： PrestoCon Day 2023，链接：https://prestoconday2023.sched.com/event/1Mjdc?iframe=no首页自我介绍，分享题目概要各个性能优化项能够优化的资源类别limit快速短路有什么优点？有啥特征？进一步的优化空间？避免不必要块的生成逻辑单元分布式执行，global 阶段的算子哪些字段无需输出？公共子表达式结合FilterNode和Proje

PrestoCon Day 2023，链接：https://prestoconday2023.sched.com/event/1Mjdc?iframe=no

首页

自我介绍，分享题目

概要

各个性能优化项能够优化的资源类别

limit快速短路

有什么优点？有啥特征？进一步的优化空间？

避免不必要块的生成

逻辑单元分布式执行，global 阶段的算子哪些字段无需输出？

公共子表达式

结合FilterNode和ProjectNode，复杂表达式拆分

合并相似数据源

arbitrary函数

Q&A

文章标签：
日志服务
关键词：
at日志服务
日志服务service
query日志服务
日志服务analytics
相关实践学习
【涂鸦即艺术】基于云应用开发平台CAP部署AI实时生图绘板
【涂鸦即艺术】基于云应用开发平台CAP部署AI实时生图绘板
游客tg3444mdbua7y
目录
相关文章
路边两盏灯
|
7月前
|
存储 Windows
【Azure Cloud Service】微软云服务上的日志收集方法
本文介绍了在使用微软云服务（Cloud Service Extended Support）时，如何收集日志以分析未记录在应用日志中的服务异常。由于云服务基于传统虚拟机模式，需通过远程桌面登录实例，查看IIS、Windows Event及云服务组件日志（如WindowsAzureGuestAgent）。此外，可使用CollectGuestLogs.exe工具打包日志，或通过“File Server Resource Manager”检查日志存储配额是否不足。附参考文档链接供深入学习。
路边两盏灯
263 30
路边两盏灯
|
7月前
|
存储 监控 API
【Azure App Service】分享使用Python Code获取App Service的服务器日志记录管理配置信息
本文介绍了如何通过Python代码获取App Service中“Web服务器日志记录”的配置状态。借助`azure-mgmt-web` SDK，可通过初始化`WebSiteManagementClient`对象、调用`get_configuration`方法来查看`http_logging_enabled`的值，从而判断日志记录是否启用及存储方式（关闭、存储或文件系统）。示例代码详细展示了实现步骤，并附有执行结果与官方文档参考链接，帮助开发者快速定位和解决问题。
路边两盏灯
238 22
路边两盏灯
|
8月前
|
API 开发工具 Python
【Azure Service Bus】分享使用 Python Service Bus SDK 输出SDK内操作日志
使用 Python Service Bus SDK 输出SDK内操作日志
路边两盏灯
302 26
以山向海
|
SQL 关系型数据库 MySQL
关系型数据库慢查询日志（Slow Query Log）
【6月更文挑战第2天】
以山向海
467 5
以山向海
|
SQL 监控 关系型数据库
关系型数据库查询日志（Query Log）
【6月更文挑战第2天】
以山向海
298 4
三分钟热度的鱼
|
SQL Java Serverless
实时计算 Flink版操作报错合集之在写入SLS（Serverless Log Service）时出现报错，该如何排查
在使用实时计算Flink版过程中，可能会遇到各种错误，了解这些错误的原因及解决方法对于高效排错至关重要。针对具体问题，查看Flink的日志是关键，它们通常会提供更详细的错误信息和堆栈跟踪，有助于定位问题。此外，Flink社区文档和官方论坛也是寻求帮助的好去处。以下是一些常见的操作报错及其可能的原因与解决策略。
三分钟热度的鱼
262 0
讓丄帝愛伱
|
消息中间件
failed to open log file at ‘/var/log/rabbitmq/rabbit@9f987b50c687_upgrade.log‘, reason: permission d
failed to open log file at ‘/var/log/rabbitmq/rabbit@9f987b50c687_upgrade.log‘, reason: permission d
讓丄帝愛伱
553 0
路边两盏灯
|
Go 开发者
【应用服务 App Service】App Service发生错误请求时，如何查看IIS Freb日志，从中得知错误所发生的模块，请求中所携带的Header信息
【应用服务 App Service】App Service发生错误请求时，如何查看IIS Freb日志，从中得知错误所发生的模块，请求中所携带的Header信息
路边两盏灯
185 2
路边两盏灯
|
网络协议 Go Windows
【应用服务 App Service】App Service中抓取网络日志
【应用服务 App Service】App Service中抓取网络日志
路边两盏灯
157 2
路边两盏灯
|
开发框架 .NET Docker
【Azure 应用服务】App Service .NET Core项目在Program.cs中自定义添加的logger.LogInformation,部署到App Service上后日志不显示Log Stream中的问题
【Azure 应用服务】App Service .NET Core项目在Program.cs中自定义添加的logger.LogInformation,部署到App Service上后日志不显示Log Stream中的问题
路边两盏灯
197 1

热门文章

最新文章

  • 1
    16 倍性能提升，成本降低 98%！ 解读 SLS 向量索引架构升级改造
  • 2
    【赵渝强老师】大数据日志采集引擎Flume
  • 3
    防止员工泄密软件中文件访问日志管理的 Go 语言 B + 树算法
  • 4
    SLS Copilot 实践：基于 SLS 灵活构建 LLM 应用的数据基础设施
  • 5
    别再满世界找日志了：聊聊如何用AI帮运维团队快速排查故障
  • 6
    程序出错瞎找？教你写“会说话”的错误日志，秒定位原因
  • 7
    5 个 IIS 日志记录最佳实践
  • 8
    Kubernetes日志管理：使用Loki进行日志采集
  • 9
    Python日志模块配置：从print到logging的优雅升级指南
  • 10
    SQL日志优化策略：提升数据库日志记录效率
  • 1
    AWK在网络安全中的高效应用：从日志分析到威胁狩猎
    192
  • 2
    警惕日志采集失败的 6 大经典雷区：从本地管理反模式到 LoongCollector 标准实践
    1004
  • 3
    Aipy实战：分析apache2日志中的网站攻击痕迹
    195
  • 4
    【Application Insights】Application Insights存储的Function App的日志存在"Operation Link" 为空的情况
    155
  • 5
    StarRocks+Paimon 落地阿里日志采集：万亿级实时数据秒级查询
    593
  • 6
    日志与追踪的完美融合：OpenTelemetry MDC 实践指南
    497
  • 7
    MySQL日志分析：binlog、redolog、undolog三大日志的深度探讨。
    291
  • 8
    阿里云发布可观测MCP！支持自然语言查询和分析多模态日志
    847
  • 9
    兄弟，你还在翻日志看故障？AI都快替你写日报了！
    484
  • 10
    Tomcat运行日志字符错乱/项目启动时控制台日志乱码问题
    1260

    • 相关课程

    更多
  • 日志服务SLS 构建可观测体系实战
  • 日志服务 SLS 可观测数据分析平台介绍
  • 大数据知识图谱系列—基于ELK+Flink日志全观测最佳实践
  • 场景实践-基于阿里云Quick BI 对MOOC网站日志分析

    • 相关电子书

    更多
  • Kubernetes下日志实时采集、存储与计算实践
  • 日志数据采集与分析对接
  • 智能化日志中心
    • 下一篇
    阿里云负载均衡收费标准：ALB、NLB和CLB价格，包括LCU费用、实例费和公网带宽价格