『正则表达式』概念 及在grep、awk、sed、C语言、Python中的简单应用

简介: 正则表达式,又称规则表达式,(Regular Expression,在代码中常简写为regex、regexp或RE),是一种文本模式。它可以用来检查一个字符串是否符合某个规则,或者从一个字符串中提取出符合某个规则的子串。正则表达式通常被用来检索、替换那些符合某个模式(规则)的文本。正则表达式是由普通字符(例如字符 a 到 z)以及特殊字符(称为"元字符")组成的文字模式。模式描述在搜索文本时要匹配的一个或多个字符串。

目录

正则表达式,又称规则表达式,(Regular Expression,在代码中常简写为regex、regexp或RE),是一种文本模式。它可以用来检查一个字符串是否符合某个规则,或者从一个字符串中提取出符合某个规则的子串。正则表达式通常被用来检索、替换那些符合某个模式(规则)的文本。

正则表达式是由普通字符(例如字符 a 到 z)以及特殊字符(称为"元字符")组成的文字模式。模式描述在搜索文本时要匹配的一个或多个字符串。

一、元字符

正则表达式语法中使用的主要元字符包括:

  • . (点):匹配除换行符以外的任意字符。
  • ^ (脱字符):匹配输入字符串的开始位置。
  • $ (美元符号):匹配输入字符串的结束位置。
  • *(星号):匹配前面的子表达式零次或多次。
  • +(加号):匹配前面的子表达式一次或多次。
  • ? (问号):匹配前面的子表达式零次或一次。
  • {n}:n 是一个非负整数。匹配确定的 n 次。
  • {n,}:n 是一个非负整数。至少匹配 n 次。
  • {n,m}:m 和 n 均为非负整数,其中 n <= m。最少匹配 n 次且最多匹配 m 次。
  • […]:字符集合。匹配方括号中包含的任意字符。
  • [^…]:负值字符集合。匹配方括号中不包含的任意字符。


还有:

  1. “|”:或,匹配左右两边任意一个表达式
  2. “”:转义字符,用于转义特殊字符,使其具有原本的字符意义,例如匹配字符".“,需要使用”.“而不是”."。
  3. “\d”:匹配数字,相当于字符集[0-9]。
  4. “\D”:匹配非数字字符,相当于字符集[^0-9]。
  5. “\w”:匹配单词字符,包括数字、字母和下划线,相当于字符集[A-Za-z0-9_]。
  6. “\W”:匹配非单词字符,相当于字符集[^A-Za-z0-9_]。
  7. “\s”:匹配空白字符,包括空格、制表符和换行符等。
  8. “\S”:匹配非空白字符。
  9. “(?=exp)”:前向肯定断言,匹配exp前面的位置。
  10. “(?!exp)”:前向否定断言,匹配非exp前面的位置。


二、常用正则表达式

使用正则表达式往往比我们写几行if-else这样的代码更加方便,以下是一些常用的正则表达式的参考(写法不唯一,且规则因国家、地区、开发语言而异):

1.匹配邮箱地址:

/^[a-zA-Z0-9_-]+@[a-zA-Z0-9_-]+(\.[a-zA-Z0-9_-]+)+$/

2.匹配手机号码:

/^1([3-9])\d{9}$/

3.匹配固定电话号码:

/^\d{3}-\d{8}|\d{4}-\d{7}$/

4.匹配身份证号码:

/^\d{17}[\d|X|x]|\d{15}$/

5.匹配日期格式(yyyy-mm-dd):

/^\d{4}-\d{1,2}-\d{1,2}$/

6.匹配中文字符:

/[\u4e00-\u9fa5]/

7.匹配URL地址:

/^((http|https):\/\/)?([\w-]+\.)+[\w-]+(\/[\w-.\/?%&=]*)?$/

8.匹配邮政编码:

/^[1-9]\d{5}$/

9.匹配IP地址:

/^((\d{1,2}|1\d{2}|2[0-4]\d|25[0-5])\.){3}(\d{1,2}|1\d{2}|2[0-4]\d|25[0-5])$/

10.匹配HTML标签:

/^<[^>]+>$/

11.匹配正整数:

/^[1-9]\d*$/

12.匹配负整数:

/^-\d+$/

13.匹配正数(包括小数):

/^\d+(\.\d+)?$/

14.匹配非正数(包括小数):

/^((-\d+(\.\d+)?)|(0+(\.0+)?))$/

15.匹配非负数(包括小数):

/^\d+(\.\d+)?|0+(\.0+)?$/

16.匹配16进制颜色值:

/^#([0-9a-fA-f]{3}|[0-9a-fA-F]{6})$/

17.匹配密码强度(至少包含大写字母、小写字母、数字和特殊字符,长度至少为8位):

/^(?=.*[A-Z])(?=.*[a-z])(?=.*\d)(?=.*[@$!%*?&)])[A-Za-z\d@$!%*?&]{8,}$/

18.匹配车牌号码:

/^[A-Z]{1}[A-Z_0-9]{5}$/

19.匹配域名:

/^([a-zA-Z0-9][-a-zA-Z0-9]{0,62}\.){1,}[a-zA-Z]{2,}$/

20.匹配时间格式(hh:mm:ss):

/^([01]\d|2[0-3]):[0-5]\d:[0-5]\d$/

三、使用示例

3.1 在 grep、awk、sed中使用正则表达式

正则表达式和grep、awk、sed非常搭配。

例1: 使用grep匹配html文件中含有中文字符的行,并打印行号

 grep -nP '[\x{4e00}-\x{9fa5}]' index.html

d637922e984b2f13cc55b1b43bdfd5b4_8880428788b94be1aa546ea5a96c5c49.png

在grep中,使用Unicode字符范围来匹配中文需要使用16进制表示法,[\u4e00-\u9fa5]可以写成[\x{4e00}-\x{9fa5}]

例2: 使用awk匹配html文件中的块级标签:

awk '/^</' index.html

cd7e69ff75255263a83a55a3903df615_83664861053d483995d49d8703bdf798.png

例3:匹配html文件中的函数,并显示他们所在的行数

dahu@dahu MINGW64 ~/Desktop/gpt
dahu@dahu MINGW64 ~/Desktop/gpt
$ awk '/function/{print NR,$0}' index.html
145         function ask() {
247         function addText(text) {
251         function removeLine() {
257         function setCookie(name, value) {
269         function getCookie(name) {
279         function clear1() {


例4: 使用sed匹配含有response的行:

$ sed -n '/response/p' index.html
            ).then(response => {
                let resultstring = response.data.choices[0].message.content;
                let resultname = response.data.choices[0].message.role;

3.2 在Python中使用正则表达式

可以使用Python的内置re模块来使用正则表达式。

re模块提供了Perl风格的正则表达式模式,使Python语言拥有全部的正则表达式功能。常用的正则表达式函数有:re.search()re.match()re.findall()re.sub()等。

  • re.search():在字符串中查找模式,如果找到则返回Match对象,否则返回None。
  • re.match():从字符串的起始位置匹配一个模式,如果不是起始位置匹配成功的话,match()就返回none。
  • re.findall():在字符串中查找模式,返回所有匹配到的字符串。
  • re.sub():用于替换字符串中的匹配项。


例5: 判断输入手机号是否正确

import re
def judge_phone_number(account):
    pattern = re.compile(r"^1([3-9])\d{9}$")
    if pattern.match(account):
        print("手机号码输入正确")
    else:
        print("手机号码输入错误")
judge_phone_number(input("请输入手机号:"))

7513c1e78307bb572ff985519e570864_98a1f3aa5af34f7d86d4a0bc0fc610ae.png

注:

Python个中的正则表达式放在单、双引号里面,前面加一个r表示原始字符串,不进行转义。

正则表达式一般放在//里面,不同语言有一些区别。

3.3 在C语言中使用正则表达式

在C语言中,可以使用POSIX标准库中的正则表达式库regex.h来编写和处理正则表达式。

C语言中处理正则表达式的函数有regcomp()regexec()regfree()regerror()等。

3.31 函数介绍

  • regcomp()函数:编译正则表达式。函数原型如下:
int regcomp(regex_t *preg, const char *regex, int cflags);

其中,preg是一个指向regex_t类型的指针,regex是一个指向正则表达式字符串的指针,cflags是编译标志。如果函数执行成功,返回值为0;否则,返回值为非0。

  • regexec()函数:执行匹配。函数原型如下:
int regexec(const regex_t *preg, const char *string, size_t nmatch, regmatch_t pmatch[], int eflags);

其中,preg是一个指向regex_t类型的指针,string是一个指向待匹配字符串的指针,nmatch是pmatch数组的长度,pmatch是一个指向regmatch_t类型的数组,eflags是执行标志。如果函数执行成功,返回值为0;否则,返回值为非0。

  • regfree()函数:释放内存。函数原型如下:
void regfree(regex_t *preg);

其中,preg是一个指向regex_t类型的指针。

  • regerror()函数:获取包含错误信息的字符串。函数原型如下:
size_t regerror(int errcode, const regex_t *preg, char *errbuf, size_t errbuf_size);

其中,errcode是错误代码,preg是一个指向regex_t类型的指针,errbuf是一个指向字符数组的指针,errbuf_size是字符数组的长度。如果函数执行成功,返回值为错误信息字符串的长度;否则,返回值为0。

3.32 例程

#include <stdio.h>
#include <stdlib.h>
#include <sys/types.h>
#include <regex.h>
int main (void)
{
    char ebuff[256];
    int ret;
    int cflags;
    regex_t reg;
    cflags = REG_EXTENDED | REG_ICASE | REG_NOSUB;
    char *test_str = "Hello World";
    char *reg_str = "H.*";
    ret = regcomp(&reg, reg_str, cflags);
    if (ret)
    {   
        regerror(ret, &reg, ebuff, 256);
        fprintf(stderr, "%s\n", ebuff);
        goto end;
    }   
    ret = regexec(&reg, test_str, 0, NULL, 0);
    if (ret)
    {
        regerror(ret, &reg, ebuff, 256);
        fprintf(stderr, "%s\n", ebuff);
        goto end;
    }   
    regerror(ret, &reg, ebuff, 256);
    fprintf(stderr, "result is:\n%s\n", ebuff);
end:
    regfree(&reg);
    return 0;
}

4e4b2f946df2354b703b9899195ecaab_6afb7f79247e485ca74cc94c1d5b8518.png


相关文章
|
1月前
|
存储 算法 C语言
通义灵码在考研C语言和数据结构中的应用实践 1-5
通义灵码在考研C语言和数据结构中的应用实践,体验通义灵码的强大思路。《趣学C语言和数据结构100例》精选了五个经典问题及其解决方案,包括求最大公约数和最小公倍数、统计字符类型、求特殊数列和、计算阶乘和双阶乘、以及求斐波那契数列的前20项和。通过这些实例,帮助读者掌握C语言的基本语法和常用算法,提升编程能力。
64 4
|
2月前
|
Unix 编译器 Shell
[oeasy]python0033_先有操作系统还是先有编程语言_c语言是怎么来的
本文回顾了计算机语言与操作系统的起源,探讨了早期 Unix 操作系统及其与 C 语言的相互促进发展。Unix 最初用汇编语言编写,运行在 PDP-7 上,后来 Thompson 和 Ritchie 开发了 C 语言及编译器,使 Unix 重写并成功编译。1974 年 Ritchie 发表论文,Unix 开始被学术界关注,并逐渐普及。伯克利分校也在此过程中发挥了重要作用,推动了 Unix 和 C 语言的广泛传播。
62 9
[oeasy]python0033_先有操作系统还是先有编程语言_c语言是怎么来的
|
19天前
|
存储 Kotlin
正则表达式在Kotlin中的应用:提取图片链接
正则表达式在Kotlin中的应用:提取图片链接
ly~
|
1月前
|
网络协议 算法 关系型数据库
C语言的应用
C 语言因其高效性和对硬件的直接访问能力,在多个领域有广泛应用。在系统软件领域,它被用于开发操作系统(如 Unix 和 Linux 的内核)和嵌入式系统(如汽车电子控制系统)。在游戏开发中,C 语言常用于构建游戏引擎的底层部分(如 Unity 和 Unreal Engine 的核心模块)及性能要求高的独立游戏。此外,C 语言也用于数据库管理系统(如 MySQL 和 PostgreSQL 的核心功能)和网络编程(如 TCP/IP 协议栈和网络服务器的核心模块)。
ly~
36 3
|
1月前
|
Java Unix Linux
1.3 C语言的应用范围
C语言自20世纪80年代以来一直是主流编程语言,适用于小型计算机、个人电脑及大型机。因其高效紧凑且易于修改和移植,广泛用于软件开发。尽管后来C++和JAVA流行起来,但C语言仍然是软件行业核心,并在嵌入式系统、科学编程和操作系统开发如Linux中扮演重要角色。即使到现在,掌握C语言仍是一项重要技能。不是必须得是计算机专家才能使用C语言,学习C语言同时也能学到很多C++的知识。
49 8
|
1月前
|
机器学习/深度学习 物联网 数据处理
C语言用于物联网更合适还是python
选择 C 语言还是 Python 作为物联网(IoT)开发的语言取决于多个因素,包括项目的性质、资源限制、性能需求以及开发团队的技能水平。C 语言性能优越,适合资源受限的嵌入式设备,能直接访问硬件,广泛应用于底层开发,但开发复杂且容易出错。Python 则以其简单的语法和丰富的库支持快速开发和原型制作,适合跨平台应用和数据处理,但性能较低,资源占用较大。根据项目需求,性能和资源要求高时选择 C 语言,需快速开发和易于维护时选择 Python。
|
2月前
|
存储 C语言
数据结构基础详解(C语言): 树与二叉树的应用_哈夫曼树与哈夫曼曼编码_并查集_二叉排序树_平衡二叉树
本文详细介绍了树与二叉树的应用,涵盖哈夫曼树与哈夫曼编码、并查集以及二叉排序树等内容。首先讲解了哈夫曼树的构造方法及其在数据压缩中的应用;接着介绍了并查集的基本概念、存储结构及优化方法;随后探讨了二叉排序树的定义、查找、插入和删除操作;最后阐述了平衡二叉树的概念及其在保证树平衡状态下的插入和删除操作。通过本文,读者可以全面了解树与二叉树在实际问题中的应用技巧和优化策略。
|
2月前
|
存储 安全 C语言
C语言 二级指针应用场景
本文介绍了二级指针在 C 语言中的应用,
|
3月前
|
Python
告别死记硬背:掌握Python正则表达式re模块的高效应用&[面向百度编程]
Python中正则表达式的高效应用,通过内置的`re`模块,讲解了如何匹配、提取和替换字符串,并提供了相关示例代码,同时提倡通过实践来掌握正则表达式的使用,而不是仅仅依赖网络搜索。
48 1
|
3月前
|
JSON C语言 数据格式
Python导出隐马尔科夫模型参数到JSON文件C语言读取
Python导出隐马尔科夫模型参数到JSON文件C语言读取
26 1