《SQL必知必会》个人笔记(二)

简介: 《SQL必知必会》个人笔记(二)

评价


这本书可以说是能让技术人员用最快速度入门SQL的一本书,对于很多一上来不知道SQL语法觉得概念很抽象的人来说也能对与SQL领域有一个大致的了解,当然作为一个过来人当初觉得SQL真的挺神奇的。

这本书当然只适合新手,对于老手来说更多是快速回顾和查漏补缺,所以这一篇读书笔记将会简单提炼一些忽视的部分记录,以及工作实践之后对于书中一些建议的补充和解释。

个人已经看过非常老的小绿本的版本,在看到出到第五本之后再看看这本书还挺感慨的。

最后千万不要认为SQL很简单,其实越是看似简单的东西越是复杂。魔鬼常在细节中


计算字段


如何拼接字符:

拼接字符的方式有两种:“||”符号和"+"符号。


SELECT vend_name + '(' + vend_country + ')' FROM Vendors ORDER BY vend_name;


在部分数据库当中存在字符的拼接函数concat,使用频率也不小,但是其实和符合拼接没有区别,另外使用之前建议验证是否会导致索引失效


SELECT Concat(vend_name, ' (', vend_country, ')') FROM Vendors


另外对于字符串中有时候可能会存储一些空格内容,可以使用SQL的trim()函数对于字符内容进行过滤再返回结果。

trim()函数通常还会被细分为rtrim()ltrim()顾名思义,就是去掉左右两边的空格,目前绝大多数的数据库都支持这样的函数。


SELECT RTRIM(vend_name) || ' (' || RTRIM(vend_country) || ')' FROM Vendors


AS 别名


别名通常在连表查询的时候如果涉及多个重名列,那么如果想要更清晰的划分列结果最好的办法是对于列进行重名。

另外的一种情况是在使用case when的语句中通常会有AS的用法,当然更多的写法是在某些列需要计算的产生的case when临时结果需要对于列进行重命名方便ORM进行映射:


--简单case函数
case sex
  when '1' then '男'
  when '2' then '女’
  else '其他' end
  AS gender


别名还有其他用途。 常见的用途包括在实际的表列名包含不合法的字符(如空格)时重新命名它, 在原来的名字含混或容易误解时扩充它。

算术运算

需要注意所有的算数运算都会导致索引失效,所以不是特别建议在SQL层面完成各种复杂的函数计算。

下面是书中给的例子,并不是所有的函数操作都有函数的使用动作,对于算数运算符操作和字符串的拼接操作都可以认为是函数操作。


SELECT prod_id, quantity, item_price, quantity*item_price AS expanded_price FROM OrderItems WHERE order_num = 20008;


函数


从书中给的表可以看出,函数的可移植性很差,对于一些统计SQL如果在需要歉意到其他的数据库时候需要重写会让人十分头疼,所以还是和上面所讲内容一样,尽量避免SQL做复杂的函数运算。

SQL是不区分大小写的,所以编写SQL的时候保持风格一致即可,喜欢大写就用大写,小写就用小写。


网络异常,图片无法展示
|


另外一种需要大量函数的场景是存储过程,函数的可移植性比较差,存储过程就更差的了,这一点可以简单找一些存储过程的案例尝试迁移就会明白这句话的意思。

大多数的函数都包含下面的特征:

  • 字符串文本处理
  • 数值算数运算
  • 处理日期和时间
  • 美观的格式化参数
  • 特殊函数操作(尽量避免使用)

另外函数不需要记忆和背诵,了解SQL函数有可能支持的情况直接用搜索引擎查找更为方便。

下面是一些比较常用的函数,简单浏览有一个印象即可。


网络异常,图片无法展示
|


网络异常,图片无法展示
|


聚集函数


聚集函数虽然也被称之为函数,但是他们的行为不针对单行,而是针对所有相同列的行,通过常见的数学运算聚合运算结果,常用的聚集函数有下面几种:


网络异常,图片无法展示
|


AVG() 函数

AVG()只能用来确定特定数值列的平均值,而且列名必须作为函数参数给出,同时需要注意如果列为 NULL 会忽略当前列。

建议做数学聚合的列使用 numeric 或者数字类型,虽然使用字符串可以通过函数转化之后存储结果。

count() 函数:

count( * )函数会忽略当前列是否为空值还是不为空值,对于指定列的count() 会取出每一个数计算,所以性能明显不如count( * )。

建议:凡事count() 函数都使 count( * ),因为官方对于星号做了内部优化,这里所说的优化可以理解为去掉空值判断。

这里其实有比较深的陷阱,count() 列和count( * )的结果有可能会不一样,所以还是建议在设计表的时候把列尽量都设置为not null

max() 函数和 min() 函数

最大值和最小值函数会忽略NULL 值,这两个函数可能会返回任意列的最大值或者最小值,同时部分数据库设计会返回随机列的最大值或者最小值,最后如果是文本数据则返回文本数据排序的第一条或者最后一条

max()和min()函数对于性能影响和开销比较大,从上面文本数据的排序可以看出内部有可能出现临时表排序动作所以建议少用。

**sum()**函数

求和函数可以对于多列的数值进行数学运算之后将结果进行合并,同样它会自动忽略NULL值。

聚集列选项

聚集列可以指定是否去重, 需要注意 DISTINCT 不能用于 COUNT( * ),如果指定列名,则 DISTINCT 只能用于 COUNT() 。另外不建议把DISTINCT用于max或者min函数。

对于部分数据库处理支持去重之外,支持返回指定数量的结果,比如SQL SERVER的 TOP函数。

  • all:默认,对于所有的列
  • 只包含不同的值,指定 DISTINCT 参 数


数据分组


分组常用的函数是group by,需要注意分组聚合的操作也是容易导致索引失效的,因为内部会产生中间表并且会进行内部的Sort排序,所以对于分组的字段建议加上索引。

数据分组经常使用的除了WHERE条件之外还有HAVING,这两个关键字唯一的区别是前者是过滤行记录,后者是过滤分组记录,虽然大部分where条件都可以使用having替换。

另外这里有另一种理解方法, WHERE 在数据分组前进行过滤, HAVING 在数据分组后进行过滤。同时因为分组前过滤的特性,WHERE 的过滤可能会影响group by聚合函数的运算结果。

下面是书中的简单案例:


SELECT cust_id, COUNT(*) AS orders
FROM Orders
GROUP BY cust_id
HAVING COUNT(*) >= 2;


此SQL的作用是过滤出count( * )大于2的分组。

另外针对where和having的分组前后过滤,这里提供自己试验的简单例子介绍:

数据库使用的是Mysql5.7以上的版本。


SELECT
  parent_category_id 
FROM
  help_category 
GROUP BY
  parent_category_id 
HAVING
  count(*) >= 4;
/*
0
4
23
*/
-- 增加where条件,发现结果被提前过滤
SELECT
  parent_category_id 
FROM
  help_category 
WHERE
  parent_category_id > 4 
GROUP BY
  parent_category_id 
HAVING
  count(*) >= 4;
/*
23
*/


虽然having和where没有严格的SQL规范如何使用,但是更多的时候having会在group by的时候出现,所以where要比having更为常用。


SELECT 语句执行次序


网络异常,图片无法展示
|


子查询


子查询的代码模板如下,通常情况下回放到where条件下:


SELECT cust_id
FROM Orders
WHERE order_num IN (SELECT order_num
FROM OrderItems
WHERE prod_id = 'RGAN01');


对于子查询的建议是最好明确知道子查询的返回结果,虽然部分数据库优化器会对子查询的连接方式进行优化,但是子查询整体上来说对于效率的影响比较大,另外不建议使用多个in,这一点在前面的in查询中进了介绍。

除了在where条件中使用,子查询还会用在列查询上,


SELECT cust_name,
cust_state,
(SELECT COUNT(*)
FROM Orders
WHERE Orders.cust_id = Customers.cust_id) AS orders
FROM Customers
ORDER BY cust_name;


最后,碰到子查询的情况更多建议使用join查询替代,同时对于整个SQL的阅读体验也会好不少。


join


对于大多数的join查询来说,连接的逻辑都是循环连接,类似两个for循环嵌套的代码,数据库不建议三张表以上的连接查询是通用的,同时有不少的数据库设计不允许超过一定数量连接表查询。

另外连接查询另一个十分常见的问题是  笛卡尔积,笛卡尔积简单来说就是行 * 行的结果集,很多情况下是因为没有完全使用 唯一条件进行连接查询导致的问题,比如下面的Join查询在没有进行关联条件on或者using限制的时候会出现很多“重复”的结果。

初次接触的时候可能会误认为只有左外连接或者右边外连接会出现笛卡尔积,其实只要是这种类似循环的连接方式,就会出现笛卡尔积的结果。


网络异常,图片无法展示
|


另外关于Join需要注意join条件和where条件的区分,比如下面的查询,在连接查询的时候使用了两个条件过滤,这里的ON限制的是 连接查询的结果,而where过滤的是连接查询之后的行结果

牢记where是行级过滤器, having是组级过滤器。


SELECT vend_name, prod_name, prod_price
FROM Vendors
INNER JOIN Products ON Vendors.vend_id = Products.vend_id AND Products.prod_name =Vendors.vend_name
WHERE Vendors.vend_name = 'xxxx'
;


表别名

表别名在多表存在相似的字段的时候建议指定,但是不建议使用 abcde这样的别名,毫无意义并且SQL复杂之后十分影响阅读。

Oracle 中没有 AS

Oracle不支持 AS 关键字。要在 Oracle中使用别名,可以不用 AS ,简单 地指定列名即可(因此,应该是 Customers C ,而不是 Customers AS C )。

别名的另外一种情况是使用 临时表的时候数据库会强制用户指定表名才允许使用字段,这一点是出于查询的时候临时表可能出现重名字段导致解释器无法解释SQL。

更加建议即使是单表查询也指定别名养成良好习惯。

自连接

另一方面表别名还用在自连接方面,自连接的形式比较多,可以对于多表查询,也可以使用子查询或者使用Join连接查询的形式。


SELECT cust_id, cust_name, cust_contact
FROM Customers
WHERE cust_name = (SELECT cust_name
FROM Customers
WHERE cust_contact = 'Jim Jones');


相关文章
|
7月前
|
SQL 关系型数据库 MySQL
【MySQL实战笔记】02.一条SQL更新语句是如何执行的-1
【4月更文挑战第4天】SQL更新语句执行涉及查询和日志模块,主要为`redo log`和`binlog`。`redo log`先写日志再写磁盘,保证`crash-safe`;`binlog`记录逻辑日志,支持所有引擎,且追加写入。执行过程分为执行器查找数据、更新内存和`redo log`(prepare状态)、写入`binlog`、提交事务(`redo log`转commit)。两阶段提交确保日志逻辑一致,支持数据库恢复至任意时间点。
58 0
|
22天前
|
SQL 存储 关系型数据库
SQL自学笔记(3):SQL里的DCL,DQL都代表什么?
本文介绍了SQL的基础语言类型(DDL、DML、DCL、DQL),并详细说明了如何创建用户和表格,最后推荐了几款适合初学者的免费SQL实践平台。
101 3
SQL自学笔记(3):SQL里的DCL,DQL都代表什么?
|
22天前
|
SQL 数据挖掘 数据库
SQL自学笔记(2):如何用SQL做简单的检索
本文深入介绍了SQL的基本语法,包括数据查询、过滤、排序、分组及表连接等操作,并通过实际案例展示了SQL在用户研究中的应用,如用户行为分析、用户细分、用户留存分析及满意度调查数据分析。
28 0
SQL自学笔记(2):如何用SQL做简单的检索
|
22天前
|
SQL 数据挖掘 关系型数据库
SQL自学笔记(1):什么是SQL?有什么用?
本文为用户研究新手介绍SQL(结构化查询语言),解释了SQL的基本概念、入门方法及在用户研究中的应用通过实际案例说明,如用户行为分析、用户细分和满意度调查数据分析,展示了SQL在用户研究中的重要作用。
53 0
SQL自学笔记(1):什么是SQL?有什么用?
|
6月前
|
SQL 存储 关系型数据库
技术笔记:MYSQL常用基本SQL语句总结
技术笔记:MYSQL常用基本SQL语句总结
42 0
|
7月前
|
SQL 关系型数据库 MySQL
【MySQL系列笔记】常用SQL
常用SQL分为三种类型,分别为DDL,DML和DQL;这三种类型的SQL语句分别用于管理数据库结构、操作数据、以及查询数据,是数据库操作中最常用的语句类型。 在后面学习的多表联查中,SQL是分析业务后业务后能否实现的基础,以及后面如何书写动态SQL,以及完成级联查询的关键。
255 6
|
7月前
|
SQL 存储 关系型数据库
【MySQL系列笔记】SQL优化
SQL优化是通过调整数据库查询、索引、表结构和配置参数等方式,提高SQL查询性能和效率的过程。它旨在减少查询执行时间、减少系统资源消耗,从而提升数据库系统整体性能。优化方法包括索引优化、查询重写、表分区、适当选择和调整数据库引擎等。
296 3
|
7月前
|
SQL 存储 Oracle
《SQL必知必会》个人笔记
《SQL必知必会》个人笔记
49 1
|
7月前
|
SQL 存储 缓存
【MySQL实战笔记】01.一条SQL查询语句是如何执行的?
【4月更文挑战第3天】MySQL执行SQL的流程包括连接器、查询缓存、分析器、优化器和执行器。连接器负责建立连接、权限验证,查询缓存(MySQL 8.0已移除)存储查询结果,分析器解析SQL确保语法正确,优化器选择最佳索引和查询路径,执行器执行查询并管理权限。连接器使用长连接可能导致内存问题,可定期断开或使用`mysql_reset_connection`。注意,更新操作会导致查询缓存失效。
48 3
|
7月前
|
SQL 存储 关系型数据库
【MySQL实战笔记】02.一条SQL更新语句是如何执行的-2
【4月更文挑战第5天】两阶段提交是为确保`redo log`和`binlog`逻辑一致,避免数据不一致。若先写`redo log`, crash后数据可能丢失,导致恢复后状态错误;若先写`binlog`,crash则可能导致重复事务,影响数据库一致性。一天一备相较于一周一备,能缩短“最长恢复时间”,但需权衡额外的存储成本。
57 1