Aho-Corasick (AC) 自动机
基础:AC自动机是建立在 trie 树和 kmp 基础之上的,为什么这么说,因为AC自动机是基于字典树的数据结构之上的,其次它是一个自动机,用到了 kmp 的失配数组的思想。
应用:在模式匹配的问题中,如果模板有很多个,可以用AC自动机来求解。
结构:字典树结构:
Fail数组(失配数组):如果现在已经匹配到一个结点,如果匹配失败,则将指正转移到 Fail 指针指向的地方,这样就不用回溯而直接匹配下去了。(举个例子:如abce和bcd,我们找到c发现下一个要找的不是e,就跳到bcd中的c处,看看此处的下一个字符(d)是不是应该找的那一个)。由此可见, Fail 数组可用一个 BFS 求得。
上上图的 Fail 数组指向图:
以ashe为例:其匹配过程如下:
说了这么多,下面直接上模板:
建树:
const int maxn = 2e6+10;
int tree[maxn][26]; //字典树
int point[maxn]; //记录该单词出现次数
int Fail[maxn]; //失败时的回溯指针
int tot = 0; //结点个数
void insert(char *s) //同字典树;建树
{
int root = 0;
int len=strlen(s);
for(int i=0;i<len;i++){
int id = s[i] - 'a';
if(!tree[root][id])
tree[root][id] = ++tot;
root = tree[root][id];
}
point[root]++; //当前节点单词数+1
}
求 Fail 数组( BFS ):
void getFail() //求Fail(失配)数组
{
Fail[0]=0;
queue <int>q;
for(int i=0;i<26;i++) //将第二层所有出现了的字母扔进队列
{
if(tree[0][i]){
Fail[tree[0][i]] = 0; //第一层结点肯定全都指向根节点
q.push(tree[0][i]);
}
}
// fail[now] -> 当前节点now的失败指针指向的地方
// tire[now][i] -> 下一个字母为i+'a'的节点的下标为tire[now][i]
while(!q.empty())
{
int now = q.front();
q.pop();
for(int i=0;i<26;i++) //查询26个字母
{
if(tree[now][i]){ //如果有这个子节点为字母i+'a',则
//让这个节点的失败指针指向(((他父亲节点)的失败指针所指向的那个节点)的下一个节点)
//有点绕,为了方便理解特意加了括号
Fail[tree[now][i]] = tree[Fail[now]][i];
q.push(tree[now][i]);
}
else //否则就让当前节点的这个子节点指向当前节点Fail指针的这个子节点
tree[now][i] = tree[Fail[now]][i];
}
}
}
查询:
int query(char *s)
{
int root = 0,ans = 0;
ine len=strlen(s);
for(int i=0;i<len;i++) //遍历文本串
{
int id=s[i]-'a';
root = tree[root][id]; //从s[i]点开始寻找
for(int j=now;j && point[j]!=-1;j=Fail[j]){
//一直向下寻找,直到匹配失败(失败指针指向根或者当前节点已找过).
ans += point[j];
point[j] = -1; //将遍历国后的节点标记,防止重复计算
}
}
return ans;
}
模板AC代码:
#include<bits/stdc++.h>
using namespace std;
const int maxn=2e6+10;
typedef long long ll;
int tree[maxn][27];
int point[maxn],tot=0,Fail[maxn];
char s[10004][55];
char str[1000005];
void insert(char *s)
{
int len=strlen(s);
int root=0;
for(int i=0;i<len;++i)
{
int id=s[i]-'a';
if(!tree[root][id])
tree[root][id] = ++tot;
root=tree[root][id];
}
point[root]++;
}
void getFail()
{
Fail[0]=0;
queue<int> q;
for(int i=0;i<26;++i)
{
if(tree[0][i]){
Fail[tree[0][i]]=0;
q.push(tree[0][i]);
}
}
while(!q.empty())
{
int now=q.front();
q.pop();
for(int i=0;i<26;++i)
{
if(tree[now][i]){
Fail[tree[now][i]]=tree[Fail[now]][i];
q.push(tree[now][i]);
}
else
tree[now][i]=tree[Fail[now]][i];
}
}
}
ll query(char *s)
{
int root=0,res=0;
int len=strlen(s);
for(int i=0;i<len;++i)
{
int id=s[i]-'a';
root=tree[root][id];
for(int j=root; j && point[j]!=-1;j=Fail[j]){
res+=point[j];
point[j]=-1;
}
}
return res;
}
void init()
{
for(int i=0;i<=tot;++i)
{
point[i]=0;
Fail[i]=0;
for(int j=0;j<26;++j){
tree[i][j]=0;
}
}
tot=0;
}
int main()
{
//ios::sync_with_stdio(false);
int T;
scanf("%d",&T);
memset(point,0,sizeof(point));
while(T--)
{
int n;
cin>>n;
for(int i=0;i<n;++i){
scanf("%s",&s[i]);
insert(s[i]);
}
getFail();
scanf("%s",&str);
int res=query(str);
printf("%d\n",res);
init();
}
system("pause");
return 0;
}
Aho-Corasick (AC) 自动机的更多相关文章
- AC 自动机
AC自动机(Aho-Corasick Automata)是经典的多模式匹配算法.从前我学过这个算法,但理解的不深刻,现在已经十分不明了了.现在发觉自己对大部分算法的掌握都有问题,决定重写一系列博客把学 ...
- 中文分词系列(二) 基于双数组Tire树的AC自动机
秉着能偷懒就偷懒的精神,关于AC自动机本来不想看的,但是HanLp的源码中用户自定义词典的识别是用的AC自动机实现的.唉-没办法,还是看看吧 AC自动机理论 Aho Corasick自动机,简称AC自 ...
- 多模字符串匹配算法-Aho–Corasick
背景 在做实际工作中,最简单也最常用的一种自然语言处理方法就是关键词匹配,例如我们要对n条文本进行过滤,那本身是一个过滤词表的,通常进行过滤的代码如下 for (String document : d ...
- HDU 2222 Keywords Search(AC自动机模版题)
Keywords Search Time Limit: 2000/1000 MS (Java/Others) Memory Limit: 131072/131072 K (Java/Others ...
- HDU 3065 病毒侵袭持续中(AC自动机)
这题数据太水,一开始没有加上Get的方法也能AC..话说AC自动机中一定要注意加上Get的方法!(不然,同一个后缀的其他单词就没被算上了.) 代码如下: #include <stdio.h> ...
- HDU 2222 Keywords Search(AC自动机入门)
题意:给出若干个单词和一段文本,问有多少个单词出现在其中.如果两个单词是相同的,得算两个单词的贡献. 分析:直接就是AC自动机的模板了. 具体见代码: #include <stdio.h> ...
- UVA - 11468 (AC自动机+动态规划)
建立AC自动机,把AC自动机当做一张图,在上面跑L个节点就行了. 参考了刘汝佳的代码,发现可能有一个潜在的Bug--如果模式串中出现了没有指定的字符,AC自动机可能会建立出错. 提供一组关于这个BUG ...
- hdu4787 AC自动机加分块
这题说的是 有n次操作 +w 表示读入一个字符串,?p 询问这个字符串的子串在那些模板串中有多少个, http://blog.csdn.net/qq574857122/article/details/ ...
- BZOJ 1444 [Jsoi2009]有趣的游戏 (AC自动机 + 概率DP + Gauss)
1444: [Jsoi2009]有趣的游戏 Time Limit: 10 Sec Memory Limit: 64 MBSubmit: 1382 Solved: 498[Submit][Statu ...
- [意识流]简单易懂的AC自动机
为了一言不合就徒手敲AC自动机,决定看一下原理 于是花了一张图, 参考HDU2222的样例 于是看懂这张图的你很快就敲出了如下代码并且AC了 #include<bits/stdc++.h> ...
随机推荐
- 用Fiddler实现手机抓包
手机用fiddler抓包 电脑最好是笔记本,这样能和手机保持统一局域网内:其他不多说,直接说步骤了. 一.对PC(笔记本)参数进行配置 1. 配置fiddler允许监听到https(fiddle ...
- mysql开启远程访问及相关权限控制
开启mysql远程访问: 授予用户user 密码 passwd 所有权限 所有主机IP可访问 授权语句:Grant <权限> on 表名[(列名)] to 用户 With grant op ...
- apache的下载
官网http://www.apache.org/ 首页第三行左右 点a number of third party vendors 再点第一个ApacheHaus 最后来到windows的下载页面 h ...
- 使用ltp4j碰到Can't find dependent libraries报错信息的问题解决
项目中使用了哈工大的自然语言处理模块ltp4j,使用idea工具集成到项目中之后,在本机运行没有问题,一切正常.打成war包,部署到服务器上,使用的时候报错Can't find dependent l ...
- Linq Group by获取数量和数据
主表: public partial class Activity { [Key] public int pkActivity { get; set; } public int fkEmployee ...
- frp 使用基础笔记
0x01 简介 为什么需要内网穿透? 很多时候从公网访问自己内网的设备是困难的,毕竟自己没有一个独立的IP地址. Frp 服务器进行内网穿透,速度快还十分简单.可以实现很多功能,包括不限于远程桌面,文 ...
- 消息队列(二)--- RocketMQ-NameServer阅读
概述 所有broker在启动的时候都会向NameServer进行注册,对它进行发送心跳包. 源码阅读 我们先从 NamesrvStartup这个类分析 public static void mai ...
- Java 枚举(enum)的学习
Java 枚举(enum)的学习 本文转自:https://blog.csdn.net/javazejian/article/details/71333103 枚举的定义 在定义枚举类型时我们使用的关 ...
- Computational Complexity of Fibonacci Sequence / 斐波那契数列的时空复杂度
Fibonacci Sequence 维基百科 \(F(n) = F(n-1)+F(n-2)\),其中 \(F(0)=0, F(1)=1\),即该数列由 0 和 1 开始,之后的数字由相邻的前两项相加 ...
- 彻底解决Spring mvc中时间的转换和序列化等问题
痛点 在使用Spring mvc 进行开发时我们经常遇到前端传来的某种格式的时间字符串无法用java8的新特性java.time包下的具体类型参数来直接接收. 我们使用含有java.time封装类型的 ...