sql优化记录一

简介: sql优化记录一

sql优化记录一

业务背景

列出每个活动的参与人数,从Oracle中查询

  • 表A 活动表,内含活动ID、活动信息。
  • 表B 客户活动明细表,记录客户参与的活动明细。

其中:

  • 表A为小表,记录数为2W
  • 表B为大表,记录数为2000W

原情况

关联查询,进行Count,查询需36秒,超出网关超时时间30秒。

改进尝试

子查询,多次的单表查询。

  • 子查询有提升,仍较慢
  • 多次查询,由应用在B表中查出所有的活动ID,使用IN在B表中Count。其中第二步查询需2.5秒。

小改进

在第二步查询中,有在sql中拼字符串的操作,转为在java中进行,查询耗时降低至1.9秒。

再改进

分页查询

异步使用单个活动ID查询,一次Count单个活动所需时长为0.5秒。

终极但目前还没必要

利用redis缓存,每次更新大表B时,更新Redis中活动的人数。不过暂时还没这样的需求。

总结

连表查询对数据库消耗巨大,性能与单表查询无法比较。让应用进行单表查询往往能解决很多问题。

目录
相关文章
|
1月前
|
SQL 数据库 开发者
MSSQL性能调优实战技巧:索引优化、SQL语句微调与并发控制策略
在Microsoft SQL Server(MSSQL)的管理与优化中,性能调优是一项复杂但至关重要的任务
|
1月前
|
SQL 监控 数据库
MSSQL性能调优实战策略:索引优化、SQL语句重构与并发控制
在Microsoft SQL Server(MSSQL)的管理和优化过程中,性能调优是确保数据库高效运行、满足业务需求的重要环节
|
1月前
|
SQL 监控 数据库
MSSQL性能调优实战技巧:索引优化策略、SQL查询重构与并发控制详解
在Microsoft SQL Server(MSSQL)的管理与优化过程中,性能调优是确保数据库高效运行的关键环节
|
1月前
|
SQL 监控 数据库
MSSQL性能调优实战指南:精准索引策略、SQL查询优化与高效并发控制
在Microsoft SQL Server(MSSQL)的性能调优过程中,精准索引策略、SQL查询优化以及高效并发控制是三大核心要素
|
27天前
|
SQL 存储 监控
SQL Server的并行实施如何优化?
【7月更文挑战第23天】SQL Server的并行实施如何优化?
45 13
|
18天前
|
SQL 安全 数据库
如何优化SQL查询
【8月更文挑战第1天】如何优化SQL查询
26 2
|
18天前
|
SQL 缓存 关系型数据库
SQL如何优化查询?
【8月更文挑战第1天】SQL如何优化查询?
29 1
|
26天前
|
SQL
SQL开发问题之当从数据源读取多个字段时优化 COUNT(DISTINCT ...) 的查询的问题如何解决
SQL开发问题之当从数据源读取多个字段时优化 COUNT(DISTINCT ...) 的查询的问题如何解决
|
23天前
|
SQL 数据采集 数据管理
SQL数据:探索、管理与优化的全面解析
在信息化时代,数据成为企业核心资产。本文探讨SQL在数据探索、管理与优化中的作用:使用DESC、SELECT了解数据集;评估数据质量;发现数据特征。管理方面,涵盖数据存储、检索、更新与维护。优化则涉及索引、查询及数据库设计,确保高性能和效率。掌握SQL能有效挖掘数据价值,支持企业决策与创新。
27 1
|
1天前
|
SQL 数据库 数据库管理
SQL查询是否都需要解析:深入解析SQL执行流程与优化技巧
在数据库管理系统中,SQL(Structured Query Language)查询是用户与数据库交互的主要方式