一、GROUP BY的理解
GROUP BY是SELECT语句的从句,用来指定查询分组条件,主要用来对查询的结果进行分组,相同组合的分组条件在结果集中只显示一行记录。使用GROUP BY从句时候,通过添加聚合函数(主要有COUNT()、SUM、MAX()、MIN()等)可以使数据聚合。
GROUP BY插叙列中使用聚合函数是针对每个分组的。例如:
SELECT SUBSTR(A.HYLB_DM,1,2),COUNT(*)
FROM DJ_ZT A
GROUP BY SUBSTR(A.HYLB_DM,1,2);
-----------------------
01 2071
02 679
03 17952
04 150
05 5921
06 11406
07 3030
08 51308
09 3940
10 1229
11 3548
12 6916
13 1003
14 537
15 11471
16 44
17 135
18 676
19 5747
'[Null]' 84
GROUP BY用来指定分组条件,是一个数学集合的概念,比如针对一列进行分组,则组合分组条件的集合数为1。如果有两个分组条件,则组合分组条件的集合数为2。因此带有GROUP BY的查询一般成为分组查询,也叫组合查询。组合记录的多少取决于组合集合(不包含重复元素)中元素的个数。例如,组合条件为一列,则查询结果集记录条数应该等于这个列所有字段所组成(数学意义上的)集合的元素个数(NULL字段也算一个)。如果有两个组合列,则记录数等于实际中存在的两个列所组合的数目。
SELECT XZ,DFMC
FROM ODS.DM_RPT_QYHF
WHERE XZ='02'
GROUP BY XZ,DFMC;
--------------------------
02 '中外合作'
02 '中外合资'
02 '中外股份'
02 '外商投资'
02 '外国及港澳台地区在境经营'
02 '外国及港澳台地区常驻代表机构'
FROM ODS.DM_RPT_QYHF
WHERE XZ='02'
GROUP BY XZ,DFMC;
--------------------------
02 '中外合作'
02 '中外合资'
02 '中外股份'
02 '外商投资'
02 '外国及港澳台地区在境经营'
02 '外国及港澳台地区常驻代表机构'
SELECT XZ,DFMC
FROM ODS.DM_RPT_QYHF
GROUP BY XZ,DFMC;
--------------------------
01 '其他'
01 '内资公司'
01 '国有'
01 '股份合作'
01 '集体'
02 '中外合作'
02 '中外合资'
02 '中外股份'
02 '外商投资'
02 '外国及港澳台地区在境经营'
02 '外国及港澳台地区常驻代表机构'
03 '个人独资'
03 '合伙企业'
03 '私营有限'
03 '私营股份'
'[Null]' '[Null]'
SELECT XZ,DFDM,DFMC,COUNT(*)
FROM ODS.DM_RPT_QYHF
GROUP BY XZ,DFDM,DFMC;
FROM ODS.DM_RPT_QYHF
GROUP BY XZ,DFDM,DFMC;
----------------------------------------------------
01 01 '国有' 4
01 02 '集体' 4
01 03 '股份合作' 3
01 04 '内资公司' 26
01 05 '其他' 2
02 01 '中外合资' 2
02 02 '中外合作' 4
02 03 '外商投资' 28
02 04 '中外股份' 4
02 06 '外国及港澳台地区在境经营' 1
02 07 '外国及港澳台地区常驻代表机构' 1
03 01 '私营有限' 6
03 02 '私营股份' 4
03 03 '个人独资' 1
03 04 '合伙企业' 1
'[Null]' '[Null]' '[Null]' 43
01 02 '集体' 4
01 03 '股份合作' 3
01 04 '内资公司' 26
01 05 '其他' 2
02 01 '中外合资' 2
02 02 '中外合作' 4
02 03 '外商投资' 28
02 04 '中外股份' 4
02 06 '外国及港澳台地区在境经营' 1
02 07 '外国及港澳台地区常驻代表机构' 1
03 01 '私营有限' 6
03 02 '私营股份' 4
03 03 '个人独资' 1
03 04 '合伙企业' 1
'[Null]' '[Null]' '[Null]' 43
GROUP BY组合列必须出现查询的SELECT关键字后面,相同组合条件的情况下仅仅保留一个。因此,通过SELECT...GROUP BY查询出的各个列都应该是数目相同,要达到相同的目的,有两种途径:一种是将要查询的字段方到组合条件中,一种是在非组合条件的字段上使用聚合函数,当然也可以在组合列上聚合函数。处子之外,别无它法!如果查询的各个列结果数目不相等,则结果集会出现“不能对齐”的错误。 因此,将非组合条件的列在不使用聚合函数条件下放到要查询的列中,这种做法是完全错误的。
SELECT XZ
FROM ODS.DM_RPT_QYHF
GROUP BY XZ;
-----------------------
01
02
03
'[Null]'
GROUP BY在做组合查询的时候,会对NULL的分组单独形成一行,进行统计。参看上面的SQL。
GROUP BY对组合条件列来说,本身就会自动分组(剔除重复的列),因此在组合条件的列上应用DISTINCT关键字是多于的。但是用在非组合条件(都有聚合函数)的列上使用DISTINCT却不是多余的。
SELECT COUNT(DISTINCT(A.QYLX_ZL))
FROM DJ_ZT A
GROUP BY SUBSTR(A.QYLX_ZL,1,1);
-------------------------
1 3 11
2 2 9
3 6 2
4 5 10
5 3 9
6 1 6
7 2 2
8 2 1
9 3 2
GROUP BY不但可以对列组合,还可以对列的表达式进行组合。
例如:
SELECT
COUNT(A.BS) AS HS,
B.HYML_DM AS HYML_DM,
(SELECT HYML_MC FROM DM_HYML WHERE HYML_DM=B.HYML_DM) AS HYML_MC
FROM DJ_ZT A RIGHT OUTER JOIN DM_HYML B
ON SUBSTR(A.HYLB_DM,1,2)=B.HYML_DM
GROUP BY B.HYML_DM;
-----------------------------------
2071 01 '农、林、牧、渔业'
17952 03 '制造业'
679 02 '采矿业'
150 04 '电力、燃气及水的生产和供应业'
5921 05 '建筑业'
11406 06 '交通运输、仓储和邮政业'
3030 07 '信息传输、计算机服务和软件业'
51308 08 '批发和零售业'
3940 09 '住宿和餐饮业'
1229 10 '金融业'
3548 11 '房地产业'
6916 12 '租赁和商务服务业'
1003 13 '科学研究、技术服务和地质勘查业'
537 14 '水利、环境和公共设施管理业'
11471 15 '居民服务和其他服务业'
44 16 '教育'
135 17 '卫生、社会保障和社会福利业'
676 18 '文化、体育和娱乐业'
5747 19 '公共管理和社会组织'
0 20 '国际组织'
可以在SELECT ... GROUP BY 分组后筛选数据。筛选的关键字是HAVING。HAVING的作用和WHERE类似。都是用来过滤查询的中间记录。但是,HAVING从句指定的每个列规范必须出现在一个聚合函数内,或者出现在GROUP BY从句命名的列中。与WHERE不同的是:WHERE是在分组前(查询后)筛选数据;HAVING是在分组后筛选数据。
例如:
SELECT
SUBSTR(A.HYLB_DM,1,2),
COUNT(*),
SUM(A.ZCZB)
FROM DJ_ZT A
GROUP BY SUBSTR(A.HYLB_DM,1,2)
HAVING MAX(YEAR(A.CJRQ))<>2007;
-----------------------------
08 51308 2988475.0376
SELECT
SUBSTR(A.HYLB_DM,1,2),
COUNT(*),
SUM(A.ZCZB)
FROM DJ_ZT A
GROUP BY SUBSTR(A.HYLB_DM,1,2)
HAVING MAX(YEAR(A.CJRQ))<>2007 AND COUNT(*)>2;
------------------------------
08 51308 2988475.0376
再如一个比较特殊的例子,对比一下看看:
SELECT SUBSTR(HY_DM,1,2), COUNT(HY_DM)
FROM DM_HY
GROUP BY SUBSTR(HY_DM,1,2)
ORDER BY SUBSTR(HY_DM,1,2);
------------------------------
01 53
02 44
03 620
04 14
05 15
06 58
07 21
08 117
09 10
10 21
11 6
12 37
13 30
14 26
15 21
16 18
17 22
18 38
19 34
20 2
SELECT SUBSTR(HY_DM,1,2), COUNT(HY_DM)
FROM DM_HY
GROUP BY SUBSTR(HY_DM,1,2)
HAVING COUNT(*)>100
ORDER BY SUBSTR(HY_DM,1,2);
------------------------------
03 620
08 117
从此可以看出COUNT(*)是对每一个分组的。
另外,有时候可以在分组之前进行数据筛选并排序,比如:
SELECT SUBSTR(A.HY_DM,1,2)
FROM DM_HY A
WHERE SUBSTR(A.HY_DM,1,2) NOT LIKE '01'
GROUP BY SUBSTR(A.HY_DM,1,2)
ORDER BY SUBSTR(A.HY_DM,1,2) ASC;
---------------
02
03
04
05
06
07
08
09
10
11
12
13
14
15
16
17
18
19
20
二、GROUP BY的高级用法
1、GROUP BY ... WITH ROLLUP 上滚统计
SELECT SUBSTR(A.HYLB_DM,1,2),COUNT(*)
FROM DJ_ZT A
GROUP BY SUBSTR(A.HYLB_DM,1,2) WITH ROLLUP;
-------------------------------
'[Null]' 127847
01 2071
02 679
03 17952
04 150
05 5921
06 11406
07 3030
08 51308
09 3940
10 1229
11 3548
12 6916
13 1003
14 537
15 11471
16 44
17 135
18 676
19 5747
'[Null]' 84
2、GROUP BY ... WITH CUBE
这个查询对于一个组合条件时候和上滚查询的结果相同,但有多个组合条件时候,此语句会产生用NULL和各个组合字段进行匹配,形成新的记录行,并进行统计。这个函数平时很不常用。
一个组合条件的情况:
SELECT SUBSTR(A.HYLB_DM,1,2),COUNT(*)
FROM DJ_ZT A
WHERE A.ZCZB>100
GROUP BY SUBSTR(A.HYLB_DM,1,2) WITH CUBE;
-------------------------------
'[Null]' 11026
01 350
02 18
03 2721
04 47
05 1228
06 235
07 292
08 2477
09 212
10 135
11 1430
12 420
13 116
14 86
15 988
16 8
17 9
18 68
19 182
'[Null]' 4
两个组合条件,对比一下,一目了然:
第一种:不加WITH CUBE条件:
SELECT SUBSTR(A.HYLB_DM,1,2),SUBSTR(A.QYLX_ZL,1,1),COUNT(*)
FROM DJ_ZT A
WHERE A.ZCZB>100
AND A.HYLB_DM IS NOT NULL
AND A.QYLX_ZL IS NOT NULL
AND SUBSTR(A.HYLB_DM,1,2) NOT IN('03','04','05','06','07','08','09','10','11','12','13','14','15','16','17','18','19','20')
AND A.QYLX_DM='01'
GROUP BY SUBSTR(A.HYLB_DM,1,2),SUBSTR(A.QYLX_ZL,1,1);
---------------------------
01 1 41
01 3 18
02 1 4
第二种:加上WITH CUBE条件:
SELECT SUBSTR(A.HYLB_DM,1,2),SUBSTR(A.QYLX_ZL,1,1),COUNT(*)
FROM DJ_ZT A
WHERE A.ZCZB>100
AND A.HYLB_DM IS NOT NULL
AND A.QYLX_ZL IS NOT NULL
AND SUBSTR(A.HYLB_DM,1,2) NOT IN('03','04','05','06','07','08','09','10','11','12','13','14','15','16','17','18','19','20')
AND A.QYLX_DM='01'
GROUP BY SUBSTR(A.HYLB_DM,1,2),SUBSTR(A.QYLX_ZL,1,1) WITH CUBE;
---------------------------
'[Null]' 1 45
'[Null]' 3 18
'[Null]' '[Null]' 63
01 '[Null]' 59
02 '[Null]' 4
01 1 41
01 3 18
02 1 4
三、核心原理
只有深入理解这些语句执行的过程才能做到心中有数,明明白白写SQL。下面是带有WHERE和HAVING的SELECT语句执行过程:
1、执行WHERE筛选数据
2、执行GROUP BY分组形成中间分组表
3、执行WITH ROLLUP/CUBE生成统计分析数据记录并加入中间分组表
4、执行HAVING筛选中间分组表
5、执行ORDER BY排序
呵呵,知道了执行过程,神秘的GROUP/WHERE/HAVING/WITH...将不再神秘。
本文转自 leizhimin 51CTO博客,原文链接:http://blog.51cto.com/lavasoft/41313,如需转载请自行联系原作者