[算法系列之二十六]字符串匹配之KMP算法

简介:

一 简介

KMP算法是一种改进的字符串匹配算法,由D.E.Knuth与V.R.Pratt和J.H.Morris同时发现,因此人们称它为克努特—莫里斯—普拉特操作(简称KMP算法)。KMP算法的关键是利用匹配失败后的信息,尽量减少模式串与主串的匹配次数以达到快速匹配的目的。

二 基于部分匹配表的KMP算法

举例来说,有一个字符串”BBC ABCDAB ABCDABCDABDE”,我想知道,里面是否包含搜索串”ABCDABD”?

步骤1:字符串”BBC ABCDAB ABCDABCDABDE”的第一个字符与搜索串”ABCDAB D”的第一个字符进行比较。因为字符B与A不匹配,所以搜索串后移一位。

这里写图片描述

步骤2:因为字符B与A不匹配,所以搜索串再往后移一位。

这里写图片描述

步骤3:就这样,直到字符串有一个字符与搜索串的第一个字符相同为止。

这里写图片描述

步骤4:接着比较字符串和搜索串的下一个字符,还是相同。

这里写图片描述

步骤5:直到字符串有一个字符与搜索串对应的字符不相同为止。

这里写图片描述

步骤6:这时,最自然的反应是,将搜索串整体后移一位,再从头逐个比较。这样做虽然可行,但是效率很差,因为你要把”搜索位置”移到已经比较过的位置,重比一遍。(这就是之前讲的[算法系列之十二]字符串匹配之蛮力匹配

这里写图片描述

步骤7:一个基本事实是,当空格与D不匹配时,你其实知道前面六个字符是”ABCDAB”。KMP算法的想法是,充分利用这个已知信息,不要把”搜索位置”移回已经比较过的位置,继续把它向后移。这样就提高了效率。

这里写图片描述

步骤8:怎么做到这一点呢?可以针对搜索串,算出一张《部分匹配表》(Partial Match Table)。这张表是如何产生的,后面再介绍,这里只要会用就可以了。

这里写图片描述

步骤9:已知空格与D不匹配时,前面六个字符”ABCDAB”是匹配的。

这里写图片描述

查表可知,最后一个匹配字符B对应的”部分匹配值”为2,因此按照下面的公式算出向后移动的位数:

移动位数 = 已匹配的字符数 - 失配字符的上一位字符对应的部分匹配值

因为 6 - 2 等于4,所以将搜索串向后移动4位,如下图。

这里写图片描述

步骤10:因为空格与C不匹配,搜索串还要继续往后移。这时,已匹配的字符数为2(”AB”),对应的”部分匹配值”为0。所以,移动位数 = 2 - 0,结果为 2,于是将搜索串向后移2位。

这里写图片描述

步骤11:因为空格与A不匹配,继续后移一位。逐位比较,直到发现C与D不匹配。

这里写图片描述

于是,移动位数 = 6 - 2,继续将搜索串向后移动4位。

步骤12:逐位比较,直到搜索串的最后一位,发现完全匹配,于是搜索完成。

这里写图片描述

如果还要继续搜索(即找出全部匹配),移动位数 = 7 - 0,再将搜索串向后移动7位,这里就不再重复了。

三 部分匹配表(Partial Match Table)

下面介绍《部分匹配表》是如何产生的。首先,要了解两个概念:前缀后缀

  • 前缀指除了最后一个字符以外,一个字符串的全部头部组合;
  • 后缀指除了第一个字符以外,一个字符串的全部尾部组合。

举例说明:
这里写图片描述

部分匹配值就是前缀和后缀的最长的共有元素的长度

以”ABCDABD”为例。

这里写图片描述

由此得到部分匹配表,如下:

这里写图片描述

“部分匹配”的实质是,有时候,字符串头部和尾部会有重复。比如,”ABCDAB”之中有两个AB,那么它的”部分匹配值”就是2(AB的长度)。搜索词移动的时候,第一个AB向后移动4位(字符串长度-部分匹配值),就可以来到第二个AB的位置。

四 基于next数组的KMP算法

通过以上的匹配过程可以看出,问题的关键就是寻找搜索串中最大长度的相同前缀和后缀。找到了搜索串中每个字符之前的前缀和后缀公共部分的最大长度后,便可基于此匹配。而这个最大长度便正是next 数组要表达的含义。

4.1:根据《部分匹配表》求next 数组

经过上面叙述我们已经知道搜索串“ABCDABD”各个前缀后缀的最大公共元素长度了,如下图所示:

这里写图片描述

部分匹配表也由此而出如下所示:

这里写图片描述

有了部分匹配表我们就可以利用下面公式计算移动位数:

移动位数 = 已匹配的字符数 - 失配字符的上一位字符对应的部分匹配值

上文利用部分匹配表和移动位数计算公式进行匹配时,我们发现,当一个字符失配时,其实没必要考虑这个失配的字符,我们每次都是看的是失配字符的上一位字符“部分匹配值”。如此,便引出了next 数组。

这里写图片描述

把next 数组跟“部分匹配表”对比后,不难发现,next 数组相当于“部分匹配表” 整体向右移动一位,然后第一个元素值赋为-1。意识到了这一点,你会惊呼原来next 数组的求解竟然如此简单:就是找最大对称长度的前缀后缀,然后整体右移一位,第一个元素值赋为-1(当然,你也可以直接计算某个字符对应的next值,就是看这个字符之前的字符串中有多大长度的相同前缀后缀)。

更新一下搜索串移动位数的计算公式

移动位数 = 失配字符的位置 - 失配字符next值

其实两公式实质上是一样的,失配字符的位置等于已匹配的字符数,失配字符next 值等于失配字符的上一位字符的部分匹配值,只是换一种说法而已。

4.2 递推求解next数组

对于给定的字符串p,其next数组的含义是:对于k=next[j],p的前缀p[0…k-1]和p的后缀p[j-k…j-1]匹配,k要尽可能的大,且k< j。我们可以根据上述含义写出next的蛮力计算方法。复杂度应该是O(^2)。

换个思路,现在next[0]=-1,next[1]=0。
假设k=next[j],则p[0…k-1]=p[j-k…j-1],那么求next[j+1]有两种情况:

  • 如果p[k] = p[j],则p[0…k]=p[j-k…j],所next[j+1]=k+1=next[j]+1
  • 如果p[k] != p[j],这是可以看做另外一个字符串匹配的问题,主串和模式串都是p,当匹配失败时,k应该如何移动呢?显然是k=next[k]
    void GetNext(string T,int next[]){
        int size = T.size();
        next[0] = -1;
        int k = -1;
        int j = 0;
        while(j < size - 1){
            // p[k]表示前缀,p[j]表示后缀
            if(k == -1 || T[k] == T[j]){
                ++k;
                ++j;
                next[j] = k;
            }//if
            else{
                // 回溯
                k = next[k];
            }
        }//while
    }

引用:

字符串匹配的KMP算法
从头到尾彻底理解KMP
KMP算法求next数组
KMP算法的next[]数组通俗解释

目录
相关文章
|
4月前
|
存储 机器学习/深度学习 算法
KMP、Trie树 、AC自动机‌ ,三大算法实现 优雅 过滤 netty 敏感词
KMP、Trie树 、AC自动机‌ ,三大算法实现 优雅 过滤 netty 敏感词
KMP、Trie树 、AC自动机‌ ,三大算法实现 优雅 过滤 netty  敏感词
|
3月前
|
机器学习/深度学习 监控 算法
局域网行为监控软件 C# 多线程数据包捕获算法:基于 KMP 模式匹配的内容分析优化方案探索
本文探讨了一种结合KMP算法的多线程数据包捕获与分析方案,用于局域网行为监控。通过C#实现,该系统可高效检测敏感内容、管理URL访问、分析协议及审计日志。实验表明,相较于传统算法,KMP在处理大规模网络流量时效率显著提升。未来可在算法优化、多模式匹配及机器学习等领域进一步研究。
92 0
|
算法
【算法】滑动窗口——找到字符串中所有字母异位词
【算法】滑动窗口——找到字符串中所有字母异位词
165 0
|
11月前
|
算法
两个字符串匹配出最长公共子序列算法
本文介绍了最长公共子序列(LCS)问题的算法实现,通过动态规划方法求解两个字符串的最长公共子序列,并提供了具体的编程实现细节和示例。
233 1
两个字符串匹配出最长公共子序列算法
|
11月前
|
算法
第四章 KMP算法理论基础
第四章 KMP算法理论基础
157 0
|
算法 C++
A : DS串应用–KMP算法
这篇文章提供了KMP算法的C++实现,包括计算模式串的next数组和在主串中查找模式串位置的函数,用于演示KMP算法的基本应用。
|
11月前
|
算法
KMP算法
KMP算法
113 0
|
自然语言处理 算法 搜索推荐
字符串相似度算法完全指南:编辑、令牌与序列三类算法的全面解析与深入分析
在自然语言处理领域,人们经常需要比较字符串,这些字符串可能是单词、句子、段落甚至是整个文档。如何快速判断两个单词或句子是否相似,或者相似度是好还是差。这类似于我们使用手机打错一个词,但手机会建议正确的词来修正它,那么这种如何判断字符串相似度呢?本文将详细介绍这个问题。
699 1
|
算法 Java
掌握算法学习之字符串经典用法
文章总结了字符串在算法领域的经典用法,特别是通过双指针法来实现字符串的反转操作,并提供了LeetCode上相关题目的Java代码实现,强调了掌握这些技巧对于提升算法思维的重要性。
|
算法
KMP算法
KMP算法
96 0

热门文章

最新文章