MySQL参数优化之join_buffer_size

本文涉及的产品
RDS MySQL Serverless 基础系列,0.5-2RCU 50GB
RDS MySQL Serverless 高可用系列,价值2615元额度,1个月
云数据库 RDS MySQL,高可用系列 2核4GB
简介: MySQL参数优化之join_buffer_size

1.查看当前值

 show  variables like '%join_buffer_size%'

在这里插入图片描述
mysql默认该设置为128 或 256 或512k,各个版本有所出入

2.作用范围

在mysql中表和表进行join时候,无论是两个表之间还是多个表之间,join的情况大致分为下面几种情况

  1. join key 有索引 或者是主键
  2. join key 有索引,但是属于二级索引
  3. join可以没有索引

join-buffe_size 真正起作用的是前面提到的 第 2 和3中情况,即表之间关联需要进行表扫描操作,而如果关联的

key使用有索引 或主键的是不需要用到join_buffer_size的,因为本身走索引效果更好

3.如何起作用

在mysql中两个表之间关联的关联算法只有 迭代循环这个算法,而join_buffer_size就是在迭代循环没有索引的情况下,减少过多的表扫描而设计的,关于表关联算法大概有下面几种

  1. Nested-loop join
  2. merge join
  3. Hash join

正如前面说的mysql现在是只有nested-loop,后续会有新的算法,8.0已经引入了hash,而针对迭代算法,如果在有索引的情况下肯定是非常快的(前提是两表都不大,或至少有一个小表),一般会将数据量小的表称为驱动表或外表,从小表中取数据在大表中进行匹配,大概意思我们看下面的图

在这里插入图片描述
在这里插入图片描述
我们假设 a 表 1000条记录 b表100000条记录,那么针对下面的sql(关联key没有索引或主键)

select * from a

inner join b on a.id=b.id

我们需要依次从a表中取1000次记录,并将这些记录在b表中遍历1000次,假设b表的数据是上千万,

那么我们需要对b表进行1000次的scan,效率会差的要命。

Block Nested-Loop Join

块嵌套循环,简称 BNLJ,这个看起来比普通的Nested-loop 多了一个block,没错就是块,通俗来讲就是每次别一条条的去内表遍历了,每次整个1000条去遍历多好,我们如果每次是1000条那么上面的的sql语句的遍历次数就会从1000次直接降低到1次,理论上性能提高了将近1000倍,但是决定你去内表迭代的条数可不是随心所欲的,肯定有个地方要进行限制,毕竟一条和1千条使用的内存是不同的,ok这里就是join_buffer_size该起作用的时候了,我们通过设置该值大小来控制能有多少条记录统一一次去进行遍历操作,而不是每次一条。

4.使用建议

不建议在系统级别对该值设置过大,一般可以设置512K以内,因为最终解决方案还是要依靠索引来解决,当然不排除

有时候两个表关联的确是没有索引可用的,那我们可以在session级别来调大该值,以便能快速获得我们所需数据

比如设置session 中该值为512M,语句如下

set session join_buffer_size =10241024512;

当然这些在sql server 或orale 中都是优化过的了,不用我们过多关注,比如sql server直接将小表加入到内存中去

相关实践学习
每个IT人都想学的“Web应用上云经典架构”实战
本实验从Web应用上云这个最基本的、最普遍的需求出发,帮助IT从业者们通过“阿里云Web应用上云解决方案”,了解一个企业级Web应用上云的常见架构,了解如何构建一个高可用、可扩展的企业级应用架构。
MySQL数据库入门学习
本课程通过最流行的开源数据库MySQL带你了解数据库的世界。   相关的阿里云产品:云数据库RDS MySQL 版 阿里云关系型数据库RDS(Relational Database Service)是一种稳定可靠、可弹性伸缩的在线数据库服务,提供容灾、备份、恢复、迁移等方面的全套解决方案,彻底解决数据库运维的烦恼。 了解产品详情: https://www.aliyun.com/product/rds/mysql 
相关文章
|
2月前
|
存储 缓存 监控
MySQL服务器配置优化:my.cnf参数调优指南
本文深入解析了MySQL核心配置参数及性能优化技巧,涵盖内存结构、调优原则、存储引擎优化、查询性能优化等内容,通过实战案例帮助读者构建高性能MySQL服务器配置,解决常见的性能瓶颈问题。
|
5月前
|
SQL 缓存 关系型数据库
MySQL 慢查询是怎样优化的
本文深入解析了MySQL查询速度变慢的原因及优化策略,涵盖查询缓存、执行流程、SQL优化、执行计划分析(如EXPLAIN)、查询状态查看等内容,帮助开发者快速定位并解决慢查询问题。
221 0
|
3月前
|
缓存 关系型数据库 MySQL
降低MySQL高CPU使用率的优化策略。
通过上述方法不断地迭代改进,在实际操作中需要根据具体场景做出相对合理判断。每一步改进都需谨慎评估其变动可能导致其他方面问题,在做任何变动前建议先在测试环境验证其效果后再部署到生产环境中去。
175 6
|
9月前
|
SQL 关系型数据库 MySQL
MySQL进阶突击系列(07) 她气鼓鼓递来一条SQL | 怎么看执行计划、SQL怎么优化?
在日常研发工作当中,系统性能优化,从大的方面来看主要涉及基础平台优化、业务系统性能优化、数据库优化。面对数据库优化,除了DBA在集群性能、服务器调优需要投入精力,我们研发需要负责业务SQL执行优化。当业务数据量达到一定规模后,SQL执行效率可能就会出现瓶颈,影响系统业务响应。掌握如何判断SQL执行慢、以及如何分析SQL执行计划、优化SQL的技能,在工作中解决SQL性能问题显得非常关键。
|
4月前
|
存储 SQL 关系型数据库
MySQL 核心知识与索引优化全解析
本文系统梳理了 MySQL 的核心知识与索引优化策略。在基础概念部分,阐述了 char 与 varchar 在存储方式和性能上的差异,以及事务的 ACID 特性、并发事务问题及对应的隔离级别(MySQL 默认 REPEATABLE READ)。 索引基础部分,详解了 InnoDB 默认的 B+tree 索引结构(多路平衡树、叶子节点存数据、双向链表支持区间查询),区分了聚簇索引(数据与索引共存,唯一)和二级索引(数据与索引分离,多个),解释了回表查询的概念及优化方法,并分析了 B+tree 作为索引结构的优势(树高低、效率稳、支持区间查询)。 索引优化部分,列出了索引创建的六大原则
123 2
|
4月前
|
存储 SQL 关系型数据库
MySQL 动态分区管理:自动化与优化实践
本文介绍了如何利用 MySQL 的存储过程与事件调度器实现动态分区管理,自动化应对数据增长,提升查询性能与数据管理效率,并详细解析了分区创建、冲突避免及实际应用中的关键注意事项。
179 0
|
11月前
|
SQL 关系型数据库 MySQL
深入解析MySQL的EXPLAIN:指标详解与索引优化
MySQL 中的 `EXPLAIN` 语句用于分析和优化 SQL 查询,帮助你了解查询优化器的执行计划。本文详细介绍了 `EXPLAIN` 输出的各项指标,如 `id`、`select_type`、`table`、`type`、`key` 等,并提供了如何利用这些指标优化索引结构和 SQL 语句的具体方法。通过实战案例,展示了如何通过创建合适索引和调整查询语句来提升查询性能。
2295 10
|
6月前
|
存储 SQL 关系型数据库
京东面试:mysql深度分页 严重影响性能?根本原因是什么?如何优化?
京东面试:mysql深度分页 严重影响性能?根本原因是什么?如何优化?
京东面试:mysql深度分页 严重影响性能?根本原因是什么?如何优化?
|
8月前
|
存储 关系型数据库 MySQL
MySQL细节优化:关闭大小写敏感功能的方法。
通过这种方法,你就可以成功关闭 MySQL 的大小写敏感功能,让你的数据库操作更加便捷。
643 19
|
9月前
|
关系型数据库 MySQL 数据库
从MySQL优化到脑力健康:技术人与效率的双重提升
聊到效率这个事,大家应该都挺有感触的吧。 不管是技术优化还是个人状态调整,怎么能更快、更省力地完成事情,都是我们每天要琢磨的事。
213 23

推荐镜像

更多