跳转至

KMP 算法

什么是 KMP 算法:

KMP 是三位大牛:D.E.Knuth、J.H.Morris 和 V.R.Pratt 同时发现的。其中第一位就是《计算机程序设计艺术》的作者!

KMP 算法要解决的问题就是在字符串(也叫主串)中的模式(pattern)定位问题。说简单点就是我们平时常说的关键字搜索。模式串就是关键字(接下来称它为 P),如果它在一个主串(接下来称为 T)中出现,就返回它的具体位置,否则返回 -1(常用手段)。

暴力破解法

首先,对于这个问题有一个很单纯的想法:从左到右一个个匹配,如果这个过程中有某个字符不匹配,就跳回去,将模式串向右移动一位。

我们可以这样初始化:之后我们只需要比较 i 指针指向的字符和 j 指针指向的字符是否一致。如果一致就都向后移动,如果不一致,A 和 E 不相等,那就把 i 指针移回第 1 位(假设下标从 0 开始),j 移动到模式串的第 0 位,然后又重新开始这个步骤。

基于这个想法我们可以得到以下的程序:

/**
 * 暴力破解法
 * @param ts 主串
 * @param ps 模式串
 * @return 如果找到,返回在主串中第一个字符出现的下标,否则为-1
 */
public static int bf(String ts, String ps) {
    char[] t = ts.toCharArray();
    char[] p = ps.toCharArray();
    int i = 0; // 主串的位置
    int j = 0; // 模式串的位置
    while (i < t.length && j < p.length) {
       if (t[i] == p[j]) { // 当两个字符相同,就比较下一个
           i++;
           j++;
       } else {
           i = i - j + 1; // 一旦不匹配,i后退
           j = 0; // j归0
       }
    }
    if (j == p.length) {
       return i - j;
    } else {
       return -1;
    }
}

上面的程序是没有问题的,但不够好!

如果是人为来寻找的话,肯定不会再把 i 移动回第 1 位,因为主串匹配失败的位置前面除了第一个 A 之外再也没有 A 了。我们为什么能知道主串前面只有一个 A?因为我们已经知道前面三个字符都是匹配的!(这很重要)。移动过去肯定也是不匹配的!有一个想法:i 可以不动,我们只需要移动 j 即可。

上面的这种情况还是比较理想的情况,我们最多也就多比较了一次。但假如是在主串 SSSSSSSSSSSSSA 中查找 SSSSB,比较到最后一个才知道不匹配,然后 i 回溯,这样的效率显然是最低的。

大牛们是无法忍受"暴力破解"这种低效手段的,于是他们三个研究出了 KMP 算法。其思想就如同我们上边所看到的一样:

利用已经部分匹配这个有效信息,保持 i 指针不回溯,通过修改 j 指针,让模式串尽量地移动到有效的位置。

所以,整个 KMP 的重点就在于:当某一个字符与主串不匹配时,我们应该知道 j 指针要移动到哪?

j 的移动规律

当匹配失败时,j 要移动的下一个位置 k,存在着这样的性质:最前面的 k 个字符和 j 之前的最后 k 个字符是一样的

如果用数学公式来表示:

P[0 ~ k-1] == P[j-k ~ j-1]

为什么可以直接将 j 移动到 k 位置?

因为:

当 T[i] != P[j] 时
有 T[i-j ~ i-1] == P[0 ~ j-1]
由 P[0 ~ k-1] == P[j-k ~ j-1]
必然:T[i-k ~ i-1] == P[0 ~ k-1]

这一段只是为了证明我们为什么可以直接将 j 移动到 k,而无须再比较前面的 k 个字符。

next 数组

怎么求这个 k 呢?因为在 P 的每一个位置都可能发生不匹配,也就是说我们要计算每一个位置 j 对应的 k,所以用一个数组 next 来保存,next[j] = k,表示当 T[i] != P[j] 时,j 指针的下一个位置。

很多教材或博文在这个地方都是讲得比较含糊,甚至就是贴一段代码上来,为什么是这样求?怎么可以这样求?根本就没有说清楚。而这里恰恰是整个算法最关键的地方。

next 数组的推导

next[j] 的值(也就是 k)表示当 P[j] != T[i] 时,j 指针的下一步移动位置。

  • 当 j 为 0 时:如果这时候不匹配,j 已经在最左边了,不可能再移动了,这时候应该是 i 指针后移。所以在代码中才会有 next[0] = -1 这个初始化。
  • 当 j 为 1 时:j 指针一定是后移到 0 位置,因为它前面也就只有这一个位置了。

最重要的规律:

当 P[k] == P[j] 时,有 next[j+1] == next[j] + 1

证明:

因为在 P[j] 之前已经有 P[0 ~ k-1] == P[j-k ~ j-1]。(next[j] == k)
这时候现有 P[k] == P[j],
可以得到 P[0 ~ k-1] + P[k] == P[j-k ~ j-1] + P[j]
即:P[0 ~ k] == P[j-k ~ j]
即 next[j+1] == k + 1 == next[j] + 1

如果 P[k] != P[j] 呢?

这时候需要执行 k = next[k]。因为我们已经不可能找到最长的前缀后缀串了,但还是可能找到更短的前缀串。这个过程就像在定位一个串,当字符和主串不一样了,那当然是把指针移动到 next[k]。

next 数组的代码实现

流传最广的实现:

public static int[] getNext(String ps) {
    char[] p = ps.toCharArray();
    int[] next = new int[p.length];
    next[0] = -1;
    int j = 0;
    int k = -1;
    while (j < p.length - 1) {
       if (k == -1 || p[j] == p[k]) {
           next[++j] = ++k;
       } else {
           k = next[k];
       }
    }
    return next;
}

缺陷与优化

上边的算法存在一个缺陷。例如,当得到的 next 数组为 [-1, 0, 0, 1] 时,下一步会把 j 移动到第 1 个元素。但这一步是完全没有意义的——因为后面的 B 已经不匹配了,那前面的 B 也一定是不匹配的。

发生问题的原因在于 P[j] == P[next[j]],所以只需要添加一个判断条件即可:

public static int[] getNext(String ps) {
    char[] p = ps.toCharArray();
    int[] next = new int[p.length];
    next[0] = -1;
    int j = 0;
    int k = -1;
    while (j < p.length - 1) {
       if (k == -1 || p[j] == p[k]) {
           if (p[++j] == p[++k]) { // 当两个字符相等时要跳过
               next[j] = next[k];
           } else {
               next[j] = k;
           }
       } else {
           k = next[k];
       }
    }
    return next;
}

KMP 算法完整实现

有了 next 数组之后,我们可以动手写 KMP 算法了:

public static int KMP(String ts, String ps) {
    char[] t = ts.toCharArray();
    char[] p = ps.toCharArray();
    int i = 0; // 主串的位置
    int j = 0; // 模式串的位置
    int[] next = getNext(ps);
    while (i < t.length && j < p.length) {
       if (j == -1 || t[i] == p[j]) { // 当j为-1时,要移动的是i,当然j也要归0
           i++;
           j++;
       } else {
           // i不需要回溯了
           j = next[j]; // j回到指定位置
       }
    }
    if (j == p.length) {
       return i - j;
    } else {
       return -1;
    }
}

和暴力破解相比,就改动了几个地方。其中最主要的一点就是:i 不需要回溯了

总结

KMP 算法的核心思想是利用已经部分匹配的信息,通过 next 数组让模式串尽可能多地移动到有效位置,从而避免主串指针的回溯,将时间复杂度从暴力法的 O(n×m) 优化到 O(n+m)。