字符串匹配算法之 kmp算法 (python版)

1.什么是KMP算法

    KMP是三位大牛:D.E.Knuth、J.H.MorriT和V.R.Pratt同时发现的。其中第一位就是《计算机程序设计艺术》的作者!!

    KMP算法要解决的问题就是在字符串(也叫主串)中的模式(pattern)定位问题。说简单点就是我们平时常说的关键字搜索。

    KMP算法是用来求一个较长字符串是否包含另一个较短字符串的算法。

    模式串就是关键字(接下来称它为P),如果它在一个主串(接下来称为T)中出现,就返回它的具体位置,否则返回-1(常用手段)。

2.暴力匹配算法

  在研究KMP算法之前,先弄明白最直接、最暴力、最原始的匹配算法

  举个例子,如果给定文本串T“BBC ABCDAB ABCDABCDABDE”,和模式串P“ABCDABD”,现在要拿模式串P去跟文本串T匹配,整个过程如下所示:

  1. T[0]为B,P[0]为A,不匹配,执行第②条指令:“如果失配(即T[i]! = P[j]),令i = i - (j - 1),j = 0”,T[1]跟P[0]匹配,相当于模式串要往右移动一位(i=1,j=0)

  2. T[1]跟P[0]还是不匹配,继续执行第②条指令:“如果失配(即T[i]! = P[j]),令i = i - (j - 1),j = 0”,T[2]跟P[0]匹配(i=2,j=0),从而模式串不断的向右移动一位(不断的执行“令i = i - (j - 1),j = 0”,i从2变到4,j一直为0)

3. 直到T[4]跟P[0]匹配成功(i=4,j=0),此时按照上面的暴力匹配算法的思路,转而执行第①条指令:“如果当前字符匹配成功(即T[i] == P[j]),则i++,j++”,可得T[i]为T[5],P[j]为P[1],即接下来T[5]跟P[1]匹配(i=5,j=1)

   4. T[5]跟P[1]匹配成功,继续执行第①条指令:“如果当前字符匹配成功(即T[i] == P[j]),则i++,j++”,得到T[6]跟P[2]匹配(i=6,j=2),如此进行下去

     5. 直到T[10]为空格字符,P[6]为字符D(i=10,j=6),因为不匹配,重新执行第②条指令:“如果失配(即T[i]! = P[j]),令i = i - (j - 1),j = 0”,相当于T[5]跟P[0]匹配(i=5,j=0)

        6. 至此,我们可以看到,如果按照暴力匹配算法的思路,尽管之前文本串和模式串已经分别匹配到了T[9]、P[5],但因为T[10]跟P[6]不匹配,所以文本串回溯到T[5],模式串回溯到P[0],从而让T[5]跟P[0]匹配。

  而T[5]肯定跟P[0]失配。为什么呢?因为在之前第4步匹配中,我们已经得知T[5] = P[1] = B,而P[0] = A,即P[1] != P[0],故T[5]必定不等于P[0],所以回溯过去必然会导致失配。那有没有一种算法,让i 不往回退,只需要移动j 即可呢?

  答案是肯定的。这种算法就是本文的主旨KMP算法,它利用之前已经部分匹配这个有效信息,保持i 不回溯,通过修改j 的位置,让模式串尽量地移动到有效的位置。

3.KMP算法

  KMP算法的核心要义在于next算法,构造next表,使用next表决定指针的跳转距离。

  1. 假设现在已经根据模式串构造出了next表(可以是其他名字,比如 pnext表),考虑KMP算法的实现。

      kmp算法主函数 核心匹配循环代码如下:  

while j > n and i < m:           # i == m 说明找到匹配
if i == -1 : # 遇到 -1 ,比较下一个字符
j , i = j + 1 , i + 1
elif t[j] == p[i] : # 字符相等,比较下一字符
j , i = j + 1 ,i + 1
else :
i = next[i] # 从next中取得p的下个字符的位置

     优化:显然上面的代码中 两个if分支可以合并,代码如下:

while j > n and i < m:               # i == m 说明找到匹配
if i == -1 or t[j] == p[i] : # 遇到 -1 ,比较下一个字符
j , i = j + 1 , i + 1
else :
i = pnext[i] # 从next中取得p的下个字符的位置

    kmp算法主函数 代码如下:

def match_kmp(t,p,pnext):
''' KMP串匹配,主函数 '''
j , i = 0 , 0
n , m = len(t) , len(p)
while j > n and i < m: # i == m 说明找到匹配
if i == -1 or t[j] == p[i] : # 遇到 -1 ,比较下一个字符
j , i = j + 1 , i + 1
else :
i = pnext[i] # 从pnext中取得p的下个字符的位置 if i == m : # 匹配成功,返回其下标
return j - i
return -1 # 匹配失败,返回特殊值

  2. pnext表的实现 (敲黑板,划重点)

    先上代码:    

def gen_pnext(p):
''' 生成针对指针p中各位置i的下一个检查的位置表,用于KMP算法 '''\
i , k , m = 0, -1 ,len(p) # k 即 pnext 表中的值
pnext = [-1] * m # 初始化 pnext 表
while i < m - 1:
if k == -1 or p[i] == p[k] # k = -1 代表 最长相等前后缀长度是0
i , k = i + 1 , k + 1
pnext[i] = k # 设置pnext元素
else :
k = pnext[k] # 遇到更短相同前缀

  优化: 当 p[i] == p[k] 时,指针可以直接跳转到 k 位置(即pnext[k]), 代码修改如下:  

def gen_pnext(p):
''' 生成针对指针p中各位置i的下一个检查的位置表,用于KMP算法 '''
i , k , m = 0, -1 ,len(p) # k 即 pnext 表中的值
pnext = [-1] * m # 初始化 pnext 表
while i < m - 1:
if k == -1 or p[i] == p[k] # k = -1 代表 最长相等前后缀长度是0
i , k = i + 1 , k + 1
pnext[i] = k # 设置pnext元素
if p[i] == p[k] # 这里进行了优化
pnext[i] = pnext[k]
else :
k = pnext[k] # 遇到更短相同前缀
return pnext

  3. 时间复杂度

  kmp 算法的时间复杂度是 O(m+n)
  暴力匹配算法的时间复杂度是 O(m*n)

4.参考文章

  http://www.cnblogs.com/en-heng/p/5091365.html

字符串匹配算法之 kmp算法 (python版)的更多相关文章

  1. KMP算法-Python版

                               KMP算法-Python版 传统法: 从左到右一个个匹配,如果这个过程中有某个字符不匹配,就跳回去,将模式串向右移动一位.这有什么难的? 我们可以 ...

  2. 动画演示Sunday字符串匹配算法——比KMP算法快七倍!极易理解!

    前言 上一篇我用动画的方式向大家详细说明了KMP算法(没看过的同学可以回去看看). 这次我依旧采用动画的方式向大家介绍另一个你用一次就会爱上的字符串匹配算法:Sunday算法,希望能收获你的点赞关注收 ...

  3. Python 细聊从暴力(BF)字符串匹配算法到 KMP 算法之间的精妙变化

    1. 字符串匹配算法 所谓字符串匹配算法,简单地说就是在一个目标字符串中查找是否存在另一个模式字符串.如在字符串 "ABCDEFG" 中查找是否存在 "EF" ...

  4. 字符串匹配算法之————KMP算法

    上一篇中讲到暴力法字符串匹配算法,但是暴力法明显存在这样一个问题:一次只移动一个字符.但实际上,针对不同的匹配情况,每次移动的间隔可以更大,没有必要每次只是移动一位: 关于KMP算法的描述,推荐一篇博 ...

  5. 字符串匹配算法之kmp算法

    kmp算法是一种效率非常高的字符串匹配算法,是由Knuth,Morris,Pratt共同提出的模式匹配算法,所以简称KMP算法 算法思想 在一个字符串中查找另一个字符串时,会遇到如下图的情况 我们通常 ...

  6. 字符串匹配算法(三)-KMP算法

    今天我们来聊一下字符串匹配算法里最著名的算法-KMP算法,KMP算法的全称是 Knuth Morris Pratt 算法,是根据三位作者(D.E.Knuth,J.H.Morris 和 V.R.Prat ...

  7. 字符串匹配算法之Sunday算法(转)

    字符串匹配算法之Sunday算法 背景 我们第一次接触字符串匹配,想到的肯定是直接用2个循环来遍历,这样代码虽然简单,但时间复杂度却是Ω(m*n),也就是达到了字符串匹配效率的下限.于是后来人经过研究 ...

  8. 数据结构学习之字符串匹配算法(BF||KMP)

    数据结构学习之字符串匹配算法(BF||KMP) 0x1 实验目的 ​ 通过实验深入了解字符串常用的匹配算法(BF暴力匹配.KMP.优化KMP算法)思想. 0x2 实验要求 ​ 编写出BF暴力匹配.KM ...

  9. kmp算法python实现

    kmp算法python实现 kmp算法 kmp算法用于字符串的模式匹配,也就是找到模式字符串在目标字符串的第一次出现的位置比如abababc那么bab在其位置1处,bc在其位置5处我们首先想到的最简单 ...

随机推荐

  1. 【BZOJ2654】Tree(凸优化,最小生成树)

    [BZOJ2654]Tree(凸优化,最小生成树) 题面 BZOJ 洛谷 题解 这道题目是之前\(Apio\)的时候写的,忽然发现自己忘记发博客了... 这个万一就是一个凸优化, 给所有白边二分一个额 ...

  2. 【BZOJ1150】数据备份(动态规划,凸优化)

    [BZOJ1150]数据备份(动态规划,凸优化) 题面 BZOJ 洛谷 题解 在不考虑\(K\)的情况下很容易\(dp\) 如果把\(K\)考虑进状态显然是\(O(n^2)\)级别. 所以凸优化一下即 ...

  3. Could not update Activiti database schema: unknown version from database: '5.20.0.1'

    转: Could not update Activiti database schema: unknown version from database: '5.20.0.1' 2017年11月22日 ...

  4. 第一天:简单工厂模式与UML类图

    何为简单工厂模式:     通过专门定义一个类,来负责创建其他类的实例,这些其它类通常具有共同的父类.   简单工厂模式的UML类图:       简单工厂模式中包含的角色和相应的职责如下:     ...

  5. python基础之生成器迭代器

    1 生成器: 为什么要有生成器? 就拿列表来说吧,假如我们要创建一个list,这个list要求格式为:[1,4,9,16,25,36……]这么一直持续下去,直到有了一万个元素的时候为止.如果我们要创建 ...

  6. Python之paramiko模块和SQL连接API

    堡垒机前戏 开发堡垒机之前,先来学习Python的paramiko模块,该模块机遇SSH用于连接远程服务器并执行相关操作 SSHClient 用于连接远程服务器并执行基本命令 基于用户名密码连接: i ...

  7. Java基础-面向对象第二特征之继承(Inheritance)

    Java基础-面向对象第二特征之继承(Inheritance) 作者:尹正杰 版权声明:原创作品,谢绝转载!否则将追究法律责任. 一.继承的概述 在现实生活中,继承一般指的是子女继承父辈的财产.在程序 ...

  8. springboot 日期转化报错

    问题场景: 使用Springboot框架搭建服务,传日期参数json参数为2016-08-15 17:00:00这种格式,springboot中不能识别,将其转化为对象对应的日期属性.而是抛出异常信息 ...

  9. HTTP协议(3):HTTP1.1与HTTP1.0的区别

    翻了下HTTP1.1的协议标准RFC2616,下面是看到的一些它跟HTTP1.0的差别. 1. Persistent Connection持久连接 在HTTP1.0中,每对Request/Respon ...

  10. Nlog写日志到数据库

    https://github.com/nlog/NLog/wiki/Database-Target