【SQL开发实战技巧】系列(十一):拿几个案例讲讲translate|regexp_replace|listagg|wmsys.wm_concat|substr|regexp_substr常用函数

简介: translate|regexp_replace|listagg|wmsys.wm_concat|substr|regexp_substr常用函数。如何使用translate或regexp_replace提取姓名的大写首字母缩写、如何使用translate或regexp_replace按字符串中的数值排序、如何聚合表中的行创建一个以逗号分隔拼接的字符串(函数LISTAGG、wmsys.wm_concat)、如何使用substr或regexp_substr提取第N个分隔符的子串、如何分解IP地址

前言

本篇文章讲解的主要内容是:如何使用translate或regexp_replace提取姓名的大写首字母缩写、如何使用translate或regexp_replace按字符串中的数值排序、如何聚合表中的行创建一个以逗号分隔拼接的字符串(函数LISTAGG、wmsys.wm_concat)、如何使用substr或regexp_substr提取第N个分隔符的子串、如何分解IP地址。
【SQL开发实战技巧】这一系列博主当作复习旧知识来进行写作,毕竟SQL开发在数据分析场景非常重要且基础,面试也会经常问SQL开发和调优经验,相信当我写完这一系列文章,也能再有所收获,未来面对SQL面试也能游刃有余~。


一、如何使用translate或regexp_replace提取姓名的大写首字母缩写

现在有一个需求:将下面临时表中的首大写字母,中间加"."显示为"Z.Y.D":

with t as(
select 'Zhao Yan Dong' as aa from dual
)

我们可以利用regexp_replace的分组替换功能:

with t as(
select 'Zhao Yan Dong' as aa from dual
)
select regexp_replace(aa,'([[:upper:]])(.*)([[:upper:]])(.*)([[:upper:]])(.*)','\1.\3.\5') from t;
REGEXP_REPLACE(AA,'([[:UPPER:]])(.*)([[:UPPER:]])(.*)([[:UPPER:]])(.*)','\1.\3.\
--------------------------------------------------------------------------------
Z.Y.D

括号()将子表达式分组为一个替换单元、量词单元或后向引用单元。
在这个查询中,我们用()把符串分成了6个组,其中第1、3、5组中是大写字母,然后通过后向引用'\1.\3.\5'就分别取到了3个组的大写字母,并在中间增加了字符'.'。
也可以用前面介绍的translate函数。

SQL> 
SQL> with t as(
  2  select 'Zhao Yan Dong' as aa from dual
  3  )
  4  select translate(aa,1||' '||lower(aa),'1.') from t;

TRANSLATE(AA,1||''||LOWER(AA),'1.')
----------------------------------------------------------------
Z.Y.D

这个逻辑大家应该可以看得明白!

二、如何实现按字符串中的数字或字母排序

有下面一个临时表:

SQL> 
SQL> with t as (
  2  select dname||deptno||loc as aa
  3  from dept
  4  )
  5  select * from t;

AA
-------------------------------------------------------------------
ACCOUNTING10NEW YORK
RESEARCH20DALLAS
SALES30CHICAGO
OPERATIONS40BOSTON

现在有个需求:想根据aa字段中的数值去排序!那么怎么做?
我们可以用正则表达式替换非数字字符,语句如下:

with t as
 (select dname || deptno || loc as aa from dept)
select regexp_replace(aa, '[^[:digit:]]') as newaa, aa from t order by 1;

NEWAA                                                                            AA
-------------------------------------------------------------------------------- -------------------------------------------------------------------
10                                                                               ACCOUNTING10NEW YORK
20                                                                               RESEARCH20DALLAS
30                                                                               SALES30CHICAGO
40                                                                               OPERATIONS40BOSTON

也可以用translate函数,直接替换掉非数字字符:

SQL> with t as
  2   (select dname || deptno || loc as aa from dept)
  3  select translate(aa,'0123456789'||aa,'0123456789') as newaa, aa from t order by 1;

NEWAA                                                                            AA
-------------------------------------------------------------------------------- -------------------------------------------------------------------
10                                                                               ACCOUNTING10NEW YORK
20                                                                               RESEARCH20DALLAS
30                                                                               SALES30CHICAGO
40                                                                               OPERATIONS40BOSTON

三、如何聚合表中的行创建一个以逗号分隔拼接的字符串

现在有一个需求:将emp表相同部门的员工以逗号分隔合并到一起!!!
可能很多人已使用过wmsys.wm_concat函数,但wmsys.wm_concat是一个非公开函数,具有不确定性(返回值原来是varchar,Oracle11.2下就成了clob)。从Oracle11.2开始就有了分析函数listagg来替代它,到了Oracle 12C+及以后,wmsys.wm_concat函数已经被遗弃了,所以建议各位不要再使用这个函数了!至于listagg函数对于拼接超过4000长度的字符会报错问题,可以看博主这篇博客:
通过wm_concat 函数报错:ora06502-character string buffer to small浅谈wm_concat、Listagg、xmlagg函数的使用和结果不确定性
扯远了,接下来用listagg函数来实现上面的需求

SQL> select deptno,listagg(ename,',') within group(order by empno) as yonghu
  2  from emp
  3  group by deptno;

DEPTNO YONGHU
------ --------------------------------------------------------------------------------
    10 CLARK,KING,MILLER
    20 SMITH,JONES,SCOTT,ADAMS,FORD
    30 ALLEN,WARD,MARTIN,BLAKE,TURNER,JAMES
       test

四、如何使用substr或regexp_substr提取第N个分隔符的子串

有如下临时表,每个部门的员工以逗号分隔:

SQL> select deptno,listagg(ename,',') within group(order by empno) as yonghu
  2  from emp where deptno is not null
  3  group by deptno;

DEPTNO YONGHU
------ --------------------------------------------------------------------------------
    10 CLARK,KING,MILLER
    20 SMITH,JONES,SCOTT,ADAMS,FORD
    30 ALLEN,WARD,MARTIN,BLAKE,TURNER,JAMES

现在有一个需求:将上面临时表第二个子串取出来当作一列

没有正则表达式之前需要找到逗号的对应位置,然后对字符串进行截取:

with t as
 (select deptno, listagg(ename, ',') within group(order by empno) as yonghu
    from emp
   where deptno is not null
   group by deptno),
t1 as
 (select deptno,
         yonghu,
         instr(yonghu, ',', 1, 1) as 第一个逗号位置,
         instr(yonghu, ',', 1, 2) as 第二个逗号位置
    from t)    
select deptno,
       yonghu,
       case
         when 第二个逗号位置 = 0 then
          substr(yonghu, 第二个逗号位置 + 1)
         else
          substr(yonghu,
                 第一个逗号位置 + 1,
                 第二个逗号位置 - 第一个逗号位置 - 1)
       end as newstr
  from t1;
  
DEPTNO YONGHU                                                                           NEWSTR
------ -------------------------------------------------------------------------------- --------------------------------------------------------------------------------
    10 CLARK,KING,MILLER                                                                KING
    20 SMITH,JONES,SCOTT,ADAMS,FORD                                                     JONES
    30 ALLEN,WARD,MARTIN,BLAKE,TURNER,JAMES                                             WARD

而使用正则表达式就很简单了!!!看下面写法

with t as (
select deptno,listagg(ename,',') within group(order by empno) as yonghu
from emp where deptno is not null
group by deptno)
select  deptno,yonghu,regexp_substr(yonghu,'[^,]+',1,2) as sub from t;

DEPTNO YONGHU                                                                           SUB
------ -------------------------------------------------------------------------------- --------------------------------------------------------------------------------
    10 CLARK,KING,MILLER                                                                KING
    20 SMITH,JONES,SCOTT,ADAMS,FORD                                                     JONES
    30 ALLEN,WARD,MARTIN,BLAKE,TURNER,JAMES                                             WARD

怎么样,有些时候用正则实现起来一些复杂的需求是不是特简单!!!这就是为啥博主钟爱正则的原因!

五、分解IP地址

现在有一个ip

with t as
 (select '192.168.1.102' as ip from dual)

现在有个需求,要将这个ip以'.'拆分开来,那么使用传统的substr比较麻烦,但是正则的话就很简单,给出下面结果:

select regexp_count(ip, '\.'), regexp_substr(ip, '[^.]+', 1, level)
  from t
connect by level <= regexp_count(ip, '\.');
REGEXP_COUNT(IP,'\.') REGEXP_SUBSTR(IP,'[^.]+',1,LEVEL)
--------------------- ----------------------------------------------------------------
                    3 192
                    3 168
                    3 1

当然,如果一个表里有多条数据,你这么写会发现问题,比如下面这个sql

with t as
 (
 select '192.168.1.102' as ip from dual
 union all
  select '10.1.1.103' as ip from dual
 )
select regexp_count(ip, '\.'), regexp_substr(ip, '[^.]+', 1, level)
  from t
connect by level <= regexp_count(ip, '\.');
REGEXP_COUNT(IP,'\.') REGEXP_SUBSTR(IP,'[^.]+',1,LEVEL)
--------------------- ---------------------------------
                    3 192
                    3 168
                    3 1
                    3 1
                    3 1
                    3 1
                    3 1
                    3 10
                    3 168
                    3 1
                    3 1
                    3 1
                    3 1
                    3 1

14 rows selected

有没有发现你看不懂了???这个问题后面文章会解释,给大家介绍如何应对多行情况,现在先给大家留个念想~😁😁😁


总结

本篇文章相对上一篇数据处理文章有一定难度,但也是工作中常用的高级处理方式,我也算复习了一遍!

相关文章
|
1月前
|
SQL Oracle 关系型数据库
SQL优化-使用联合索引和函数索引
在一次例行巡检中,发现一条使用 `to_char` 函数将日期转换为字符串的 SQL 语句 CPU 利用率很高。为了优化该语句,首先分析了 where 条件中各列的选择性,并创建了不同类型的索引,包括普通索引、函数索引和虚拟列索引。通过对比不同索引的执行计划,最终确定了使用复合索引(包含函数表达式)能够显著降低查询成本,提高执行效率。
|
1月前
|
SQL 数据库 数据库管理
数据库SQL函数应用技巧与方法
在数据库管理中,SQL函数是处理和分析数据的强大工具
|
1月前
|
SQL 数据库 索引
SQL中COUNT函数结合条件使用的技巧与方法
在SQL查询中,COUNT函数是一个非常常用的聚合函数,用于计算表中满足特定条件的记录数
|
1月前
|
SQL 关系型数据库 MySQL
sql注入原理与实战(三)数据库操作
sql注入原理与实战(三)数据库操作
sql注入原理与实战(三)数据库操作
|
1月前
|
SQL 关系型数据库 MySQL
SQL日期函数
SQL日期函数
|
1月前
|
SQL 数据处理 数据库
SQL语句优化与查询结果优化:提升数据库性能的实战技巧
在数据库管理和应用中,SQL语句的编写和查询结果的优化是提升数据库性能的关键环节
|
1月前
|
SQL 监控 关系型数据库
SQL语句性能分析:实战技巧与详细方法
在数据库管理中,分析SQL语句的性能是优化数据库查询、提升系统响应速度的重要步骤
|
1月前
|
SQL 关系型数据库 Serverless
sql注入原理与实战(四)数据表操作
sql注入原理与实战(四)数据表操作
|
1月前
|
SQL 存储 Java
sql注入原理与实战(二)数据库原理
sql注入原理与实战(二)数据库原理
|
1月前
|
SQL 前端开发 安全
sql注入原理与实战(一)
sql注入原理与实战(一)