17. Mysql 动态SQL

本文涉及的产品
云数据库 RDS MySQL,集群系列 2核4GB
推荐场景:
搭建个人博客
RDS MySQL Serverless 基础系列,0.5-2RCU 50GB
云数据库 RDS MySQL,高可用系列 2核4GB
简介: 17. Mysql 动态SQL

概述

动态 sql 是指在程序运行时根据不同的条件和需求生成不同的 sql 语句。通过动态 sql,我们可以实现灵活的查询、更新和删除操作,提高代码的复用性和可维护性。

应用场景:

  • 动态查询:根据用户输入的条件动态生成查询语句,实现灵活的数据查询。
  • 动态更新:根据不同的业务需求生成不同的更新语句,实现数据的动态更新。
  • 动态删除:根据特定条件动态生成删除语句,实现数据的动态删除。
  • 动态插入:根据不同的数据来源动态生成插入语句,实现数据的动态插入。

优势:

  • 灵活性:根据不同的条件和需求生成不同的 sql 语句,实现灵活的数据操作。
  • 可维护性:通过使用动态 sql,可以减少代码冗余,提高代码的可维护性。
  • 安全性:动态 sql 可以通过参数化查询来防止 sql 注入攻击。
  • 性能优化:动态 sql 可以根据具体情况生成高效的 sql 语句,提高查询性能。

基本语法示例:

# 定义变量
set @db_tb_name = '`sql_test1`.`test`';
# 定义拼接后的最终sql
set @sql = replace('show create table @db_tb_name', '@db_tb_name', @db_tb_name);
select @sql; -- 查看拼接后的sql语句
# 预编译,准备拼接的sql语句
prepare stmt from @sql;
# 执行拼接的sql语句
execute stmt;
# 释放语句
deallocate prepare stmt;

+-------+--------------------------------------------------------------------------------------------------------------------------------------------------------------------------------+
| Table | Create Table                                                                                                                                                                   |
+-------+--------------------------------------------------------------------------------------------------------------------------------------------------------------------------------+
| test  | CREATE TABLE `test` (
  `id` int DEFAULT NULL,
  `name` varchar(10) DEFAULT NULL,
  `sale` int DEFAULT NULL
) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_0900_ai_ci |
+-------+--------------------------------------------------------------------------------------------------------------------------------------------------------------------------------+
  • prepare:准备要执行的语句。
  • execute:执行由prepare语句准备的预准备语句。
  • deallocate prepare:发布准备好的声明,并且释放语句。

动态SQL操作

编写一个查询,可以动态添加查询条件

set @db_name = 'sql_test1'; -- 指定一个数据库
set @tb_name = 'category';-- 指定一个表

set @sql = 'select TABLE_SCHEMA,TABLE_NAME,concat(table_schema, \'.\', table_name) as db_tb_name from information_schema.tables where 1=1';
# 判断是否指定数据库,如果不指定则跳过
if @db_name is not null then
    set @sql = concat(@sql, ' and TABLE_SCHEMA = \'', @db_name,'\'');
end if;
select @sql;
# 判断是否指定数据表,如果不指定则跳过
if @tb_name is not null then
    set @sql = concat(@sql, ' and TABLE_NAME = \'', @tb_name,'\'');
end if;
select @sql;
prepare stmt from @sql;
execute stmt;
deallocate prepare stmt;
+--------------+------------+--------------------+
| TABLE_SCHEMA | TABLE_NAME | db_tb_name         |
+--------------+------------+--------------------+
| sql_test1    | category   | sql_test1.category |
+--------------+------------+--------------------+

首先初始化变量@sql为一个基本的查询语句。然后使用IF语句判断变量@db_name和@tb_name是否为空,如果不为空,则将对应的查询条件拼接到@sql中。最后使用 prepare 语句准备 sql 语句,并使用 execute 语句执行 sql 语句。

编写一个sql,可以实现动态更新表和删除数据。

# 根据当前日期,定义最近四周变量
set @cur_year_week_begin_dt = date_sub(curdate(), interval weekday(curdate()) day);
set @cur_year_week = yearweek(curdate(), 1);
set @cur_year_week_lw1 = yearweek(curdate() - interval 1 week, 1);
set @cur_year_week_lw2 = yearweek(curdate() - interval 2 week, 1);
set @cur_year_week_lw3 = yearweek(curdate() - interval 3 week, 1);
# 查看变量的值
select @cur_year_week_begin_dt,@cur_year_week,@cur_year_week_lw1,@cur_year_week_lw2,@cur_year_week_lw3;
+-------------------------+----------------+--------------------+--------------------+--------------------+
| @cur_year_week_begin_dt | @cur_year_week | @cur_year_week_lw1 | @cur_year_week_lw2 | @cur_year_week_lw3 |
+-------------------------+----------------+--------------------+--------------------+--------------------+
| 2023-12-25              |         202352 |             202351 |             202350 |             202349 |
+-------------------------+----------------+--------------------+--------------------+--------------------+
# 动态sql修改表结构,添加字段
set @alter_sql = concat('alter table sql_test1.category add week_',@cur_year_week,' int after category_name',';');
select @alter_sql;
+-------------------------------------------------------------------------+
| @alter_sql                                                              |
+-------------------------------------------------------------------------+
| alter table sql_test1.category add week_202352 int after category_name; |
+-------------------------------------------------------------------------+
# 动态sql删除表数据
set @del_sql = concat('delete from sql_test1.order_info where order_date between ',@cur_year_week_begin_dt,' and ',curdate(),';');
select @del_sql;
+--------------------------------------------------------------------------------------+
| @del_sql                                                                             |
+--------------------------------------------------------------------------------------+
| delete from sql_test1.order_info where order_date between 2023-12-25 and 2023-12-30; |
+--------------------------------------------------------------------------------------+
# 动态sql清空表分区
set @turn_sql = concat('alter table sql_test1.orders truncate partition p',@cur_year_week, ',p', @cur_year_week_lw1, ',p', @cur_year_week_lw2,',p',@cur_year_week_lw3, ';');
select @turn_sql;
+----------------------------------------------------------------------------------+
| @turn_sql                                                                        |
+----------------------------------------------------------------------------------+
| alter table sql_test1.orders truncate partition p202352,p202351,p202350,p202349; |
+----------------------------------------------------------------------------------+
# 动态sql插入数据
set @insert_sql = concat('insert into sql_test1.orders select * from sql_test1.order_info where year_week between',@cur_year_week_lw3,' and ',@cur_year_week,';');
select @insert_sql;
+-----------------------------------------------------------------------------------------------------------+
| @insert_sql                                                                                               |
+-----------------------------------------------------------------------------------------------------------+
| insert into sql_test1.orders select * from sql_test1.order_info where year_week between202349 and 202352; |
+-----------------------------------------------------------------------------------------------------------+
# 执行以上四个sql语句
prepare stmt1 from @alter_sql;
execute stmt1;
deallocate prepare stmt1;

prepare stmt2 from @del_sql;
execute stmt2;
deallocate prepare stmt2;

prepare stmt3 from @turn_sql;
execute stmt3;
deallocate prepare stmt3;

prepare stmt4 from @insert_sql;
execute stmt4;
deallocate prepare stmt4;

数据库操作无非就是增删改查,通过定义变量、concat 拼接 sql 都可以实现,最后使用 execute 执行 sql 。动态 sql 操作常常和存储过程一起配合使用,能起到更好的作用,存储过程我们放到下一节讲。

总结

动态 sql 是实现灵活数据操作的重要手段,可以根据不同的条件和需求生成不同的 sql 语句。


主要使用 concat 函数拼接 sql 语句和使用IF语句生成动态 sql。此外,通过使用动态 sql 和聚合函数,我们还可以实现动态的数据透视,将新行数据转换为列数据,方便进行数据分析和报表生成。


参考资料:

相关实践学习
如何快速连接云数据库RDS MySQL
本场景介绍如何通过阿里云数据管理服务DMS快速连接云数据库RDS MySQL,然后进行数据表的CRUD操作。
全面了解阿里云能为你做什么
阿里云在全球各地部署高效节能的绿色数据中心,利用清洁计算为万物互联的新世界提供源源不断的能源动力,目前开服的区域包括中国(华北、华东、华南、香港)、新加坡、美国(美东、美西)、欧洲、中东、澳大利亚、日本。目前阿里云的产品涵盖弹性计算、数据库、存储与CDN、分析与搜索、云通信、网络、管理与监控、应用服务、互联网中间件、移动服务、视频服务等。通过本课程,来了解阿里云能够为你的业务带来哪些帮助     相关的阿里云产品:云服务器ECS 云服务器 ECS(Elastic Compute Service)是一种弹性可伸缩的计算服务,助您降低 IT 成本,提升运维效率,使您更专注于核心业务创新。产品详情: https://www.aliyun.com/product/ecs
相关文章
|
5天前
|
SQL 存储 关系型数据库
【MySQL基础篇】全面学习总结SQL语法、DataGrip安装教程
本文详细介绍了MySQL中的SQL语法,包括数据定义(DDL)、数据操作(DML)、数据查询(DQL)和数据控制(DCL)四个主要部分。内容涵盖了创建、修改和删除数据库、表以及表字段的操作,以及通过图形化工具DataGrip进行数据库管理和查询。此外,还讲解了数据的增、删、改、查操作,以及查询语句的条件、聚合函数、分组、排序和分页等知识点。
【MySQL基础篇】全面学习总结SQL语法、DataGrip安装教程
|
23天前
|
SQL 存储 缓存
MySQL进阶突击系列(02)一条更新SQL执行过程 | 讲透undoLog、redoLog、binLog日志三宝
本文详细介绍了MySQL中update SQL执行过程涉及的undoLog、redoLog和binLog三种日志的作用及其工作原理,包括它们如何确保数据的一致性和完整性,以及在事务提交过程中各自的角色。同时,文章还探讨了这些日志在故障恢复中的重要性,强调了合理配置相关参数对于提高系统稳定性的必要性。
|
22天前
|
SQL 关系型数据库 MySQL
MySQL 高级(进阶) SQL 语句
MySQL 提供了丰富的高级 SQL 语句功能,能够处理复杂的数据查询和管理需求。通过掌握窗口函数、子查询、联合查询、复杂连接操作和事务处理等高级技术,能够大幅提升数据库操作的效率和灵活性。在实际应用中,合理使用这些高级功能,可以更高效地管理和查询数据,满足多样化的业务需求。
71 3
|
25天前
|
SQL 关系型数据库 MySQL
MySQL导入.sql文件后数据库乱码问题
本文分析了导入.sql文件后数据库备注出现乱码的原因,包括字符集不匹配、备注内容编码问题及MySQL版本或配置问题,并提供了详细的解决步骤,如检查和统一字符集设置、修改客户端连接方式、检查MySQL配置等,确保导入过程顺利。
|
26天前
|
SQL 存储 关系型数据库
MySQL进阶突击系列(01)一条简单SQL搞懂MySQL架构原理 | 含实用命令参数集
本文从MySQL的架构原理出发,详细介绍其SQL查询的全过程,涵盖客户端发起SQL查询、服务端SQL接口、解析器、优化器、存储引擎及日志数据等内容。同时提供了MySQL常用的管理命令参数集,帮助读者深入了解MySQL的技术细节和优化方法。
|
7天前
|
存储 Oracle 关系型数据库
数据库传奇:MySQL创世之父的两千金My、Maria
《数据库传奇:MySQL创世之父的两千金My、Maria》介绍了MySQL的发展历程及其分支MariaDB。MySQL由Michael Widenius等人于1994年创建,现归Oracle所有,广泛应用于阿里巴巴、腾讯等企业。2009年,Widenius因担心Oracle收购影响MySQL的开源性,创建了MariaDB,提供额外功能和改进。维基百科、Google等已逐步替换为MariaDB,以确保更好的性能和社区支持。掌握MariaDB作为备用方案,对未来发展至关重要。
26 3
|
7天前
|
安全 关系型数据库 MySQL
MySQL崩溃保险箱:探秘Redo/Undo日志确保数据库安全无忧!
《MySQL崩溃保险箱:探秘Redo/Undo日志确保数据库安全无忧!》介绍了MySQL中的三种关键日志:二进制日志(Binary Log)、重做日志(Redo Log)和撤销日志(Undo Log)。这些日志确保了数据库的ACID特性,即原子性、一致性、隔离性和持久性。Redo Log记录数据页的物理修改,保证事务持久性;Undo Log记录事务的逆操作,支持回滚和多版本并发控制(MVCC)。文章还详细对比了InnoDB和MyISAM存储引擎在事务支持、锁定机制、并发性等方面的差异,强调了InnoDB在高并发和事务处理中的优势。通过这些机制,MySQL能够在事务执行、崩溃和恢复过程中保持
30 3
|
7天前
|
SQL 关系型数据库 MySQL
数据库灾难应对:MySQL误删除数据的救赎之道,技巧get起来!之binlog
《数据库灾难应对:MySQL误删除数据的救赎之道,技巧get起来!之binlog》介绍了如何利用MySQL的二进制日志(Binlog)恢复误删除的数据。主要内容包括: 1. **启用二进制日志**:在`my.cnf`中配置`log-bin`并重启MySQL服务。 2. **查看二进制日志文件**:使用`SHOW VARIABLES LIKE 'log_%';`和`SHOW MASTER STATUS;`命令获取当前日志文件及位置。 3. **创建数据备份**:确保在恢复前已有备份,以防意外。 4. **导出二进制日志为SQL语句**:使用`mysqlbinlog`
36 2
|
20天前
|
关系型数据库 MySQL 数据库
Python处理数据库:MySQL与SQLite详解 | python小知识
本文详细介绍了如何使用Python操作MySQL和SQLite数据库,包括安装必要的库、连接数据库、执行增删改查等基本操作,适合初学者快速上手。
145 15
|
14天前
|
SQL 关系型数据库 MySQL
数据库数据恢复—Mysql数据库表记录丢失的数据恢复方案
Mysql数据库故障: Mysql数据库表记录丢失。 Mysql数据库故障表现: 1、Mysql数据库表中无任何数据或只有部分数据。 2、客户端无法查询到完整的信息。