SQLSERVER 建立全文检索
- -- 创建测试表
- -- DROP TABLE FullTextIndexing
- CREATE TABLE FullTextIndexing
- (
- ID INT IDENTITY(1,1) NOT NULL,
- Sentence VARCHAR(MAX)
- )
- -- 创建聚集索引
- ALTER TABLE FullTextIndexing ADD CONSTRAINT PK_FullTextIndexing PRIMARY KEY CLUSTERED(ID ASC)
- GO
- -- 将"全文搜索概述"页面的文字全部拷贝到txt,然后倒入到表FullTextIndexing中
- -- https://msdn.microsoft.com/zh-cn/library/ms142547(v=sql.105).aspx
- -- 重复15次,从47行变为154万行
- INSERT INTO FullTextIndexing(Sentence)
- SELECT Sentence FROM FullTextIndexing
- GO 15
- SELECT COUNT(*) FROM FullTextIndexing
- -- 【注】删除的语句不要执行!
- -- 创建全文目录
- -- https://msdn.microsoft.com/zh-cn/LIBRARY/ms189520(v=sql.105).aspx
- CREATE FULLTEXT CATALOG [Catalog_Test]
- WITH
- ACCENT_SENSITIVITY = ON --区分重音
- AS DEFAULT --默认目录
- AUTHORIZATION [dbo];--全文目录的所有者
- GO
- -- 更改全文目录的属性
- -- https://msdn.microsoft.com/zh-cn/LIBRARY/ms176095(v=sql.105).aspx
- ALTER FULLTEXT CATALOG [Catalog_Test]
- REBUILD WITH ACCENT_SENSITIVITY = ON; --重新生成整个目录并区分重音
- --REORGANIZE; --重新组织全文目录
- --AS DEFAULT; --指定此目录为默认目录
- GO
- -- 从数据库中删除全文目录(先删除全文索引)
- -- https://msdn.microsoft.com/zh-cn/LIBRARY/ms188403(v=sql.105).aspx
- DROP FULLTEXT CATALOG [Catalog_Test];
- GO
- -- 创建干扰字表
- -- https://msdn.microsoft.com/zh-cn/library/cc280405(v=sql.105).aspx
- CREATE FULLTEXT STOPLIST [Stoplist_Test]
- FROM SYSTEM STOPLIST
- AUTHORIZATION [dbo];
- GO
- -- 添加删除干扰字
- -- https://msdn.microsoft.com/zh-cn/library/cc280871(v=sql.105).aspx
- ALTER FULLTEXT STOPLIST [Stoplist_Test]
- ADD N'乎' LANGUAGE 2052;
- GO
- ALTER FULLTEXT STOPLIST [Stoplist_Test]
- DROP N'乎' language 2052;
- --ALL LANGUAGE 'English'
- --ALL
- GO
- -- 从数据库中删除全文本非索引字表
- -- https://msdn.microsoft.com/zh-cn/library/cc280482(v=sql.105).aspx
- DROP FULLTEXT STOPLIST [Stoplist_Test];
- GO
- -- 创建全文索引
- -- https://msdn.microsoft.com/zh-cn/library/ms187317(v=sql.105).aspx
- CREATE FULLTEXT INDEX ON [dbo].[FullTextIndexing]
- (Sentence LANGUAGE 2052) --索引列,明确列中存储的语言,方便过滤
- KEY INDEX PK_FullTextIndexing --全文键:当前表中唯一索引名称
- ON [Catalog_Test] --指定全文目录
- WITH (
- STOPLIST [Stoplist_Test], --指定全文非索引字表
- CHANGE_TRACKING AUTO --自动填充
- );
- GO
- -- 更改全文索引的属性
- -- https://msdn.microsoft.com/zh-cn/library/ms188359(v=sql.105).aspx
- -- 激活全文索引
- ALTER FULLTEXT INDEX ON [dbo].[FullTextIndexing] ENABLE;
- GO
- -- 删除全文索引
- -- https://msdn.microsoft.com/zh-cn/library/ms184393(v=sql.105).aspx
- DROP FULLTEXT INDEX ON [dbo].[FullTextIndexing];
- GO
- -- 测试常规查询方法(先查询全部数据,放到内存:154万行31秒)
- SELECT * FROM FullTextIndexing
- SET STATISTICS IO ON
- SET STATISTICS TIME ON
- SELECT * FROM FullTextIndexing WHERE Sentence LIKE '%全文索引%'
- /*执行了几遍,耗时13440 毫秒
- SQL Server 分析和编译时间:
- CPU 时间 = 0 毫秒,占用时间 = 0 毫秒。
- (229376 行受影响)
- 表 'FullTextIndexing'。扫描计数 1,逻辑读取 15633 次,物理读取 0 次,预读 0 次,lob 逻辑读取 0 次,lob 物理读取 0 次,lob 预读 0 次。
- SQL Server 执行时间:
- CPU 时间 = 11591 毫秒,占用时间 = 13440 毫秒。
- */
- SELECT * FROM FullTextIndexing WHERE CHARINDEX('全文索引',Sentence)<>0
- /*执行了几遍,耗时15338 毫秒
- SQL Server 分析和编译时间:
- CPU 时间 = 0 毫秒,占用时间 = 0 毫秒。
- (229376 行受影响)
- 表 'FullTextIndexing'。扫描计数 1,逻辑读取 15633 次,物理读取 0 次,预读 0 次,lob 逻辑读取 0 次,lob 物理读取 0 次,lob 预读 0 次。
- SQL Server 执行时间:
- CPU 时间 = 12714 毫秒,占用时间 = 15338 毫秒。
- */
- -- 使用全文索引的方法:
- SELECT * FROM [dbo].[FullTextIndexing] WHERE FREETEXT(Sentence,'全文索引');
- /*执行了几遍,耗时17402 毫秒
- SQL Server 分析和编译时间:
- CPU 时间 = 16 毫秒,占用时间 = 21 毫秒。
- (851968 行受影响)
- 表 'FullTextIndexing'。扫描计数 1,逻辑读取 15633 次,物理读取 0 次,预读 0 次,lob 逻辑读取 0 次,lob 物理读取 0 次,lob 预读 0 次。
- SQL Server 执行时间:
- CPU 时间 = 2230 毫秒,占用时间 = 17402 毫秒。
- */
- -- 执行了17秒,不降反而上升了!!~
- -- 重新生成全文目录!~再执行(更多方法有待参考:使用全文搜索查询 SQL Server)
- -- https://msdn.microsoft.com/zh-cn/library/ms142559(v=sql.105).aspx
- ALTER FULLTEXT CATALOG [Catalog_Test] REBUILD;
- GO
- SELECT * FROM [dbo].[FullTextIndexing] WHERE FREETEXT(Sentence,'全文索引');
- SELECT * FROM [dbo].[FullTextIndexing] WHERE CONTAINS(Sentence,'全文索引');
- SELECT * FROM [dbo].[FullTextIndexing] WHERE CONTAINS(Sentence,'全文 AND 索引');
- /*这时快多了!~不到1秒就查询完成!~但是返回的行数才1000多行
- SQL Server 分析和编译时间:
- CPU 时间 = 0 毫秒,占用时间 = 0 毫秒。
- (8853 行受影响)
- 表 'FullTextIndexing'。扫描计数 0,逻辑读取 27121 次,物理读取 0 次,预读 0 次,lob 逻辑读取 0 次,lob 物理读取 0 次,lob 预读 0 次。
- SQL Server 执行时间:
- CPU 时间 = 78 毫秒,占用时间 = 944 毫秒。
- */
- SET STATISTICS IO OFF
- SET STATISTICS TIME OFF
- 不断地执行就会找出规律:
- 表扫描次数为0。
- 逻辑读也越来越多,耗时越来越多,查询返回的行数也越来越多,性能越来越差!~比"like"还差
- 最后还得重建重组(REBUILD/REORGANIZE)全文索引目录
- 逻辑读取 27121 次
- 逻辑读取 945268 次
- 逻辑读取 1212885 次
- 逻辑读取 1407846 次
- 逻辑读取 1736686 次
- 逻辑读取 1953265 次
- -- 查询句词拆分结果.可以看到按什么词语进行匹配查询
- select * from sys.dm_fts_parser('全文索引',2052,5,0)
- -- 如果只需要全文键或排名的信息,可使用表值函数
- -- 使用表值函数的方法可以使用联接提示或查询提示(LOOP/MERGE/HASH)
- ALTER FULLTEXT CATALOG [Catalog_Test] REBUILD;
- GO
- ALTER FULLTEXT CATALOG [Catalog_Test] REORGANIZE;
- GO
- SELECT * FROM [dbo].[FullTextIndexing] t1
- INNER JOIN CONTAINSTABLE([FullTextIndexing],Sentence,'概述') AS t2
- ON t1.ID = t2.[KEY]
- GO
- SELECT * FROM [dbo].[FullTextIndexing] t1
- INNER JOIN FREETEXTTABLE([FullTextIndexing],Sentence,'概述',LANGUAGE 2052,1000) AS t2
- ON t1.ID = t2.[KEY]
- ORDER BY t2.RANK DESC;
- GO
- -- 相关视图:
- select * from sys.syslanguages
- select * from sys.fulltext_indexes
- select * from sys.fulltext_catalogs where name = 'Catalog_Test'
- select * from sys.dm_fts_active_catalogs where name = 'Catalog_Test'
- select * from sys.fulltext_stoplists where name = 'Stoplist_Test'
- select * from sys.fulltext_stopwords where stoplist_id = 5 --and language_id = 2052
- select * from sys.dm_fts_parser('全文索引',2052,5,0)
SQLSERVER 建立全文检索的更多相关文章
- 利用whoosh对mongoDB的中文文档建立全文检索
1.建立索引 #coding=utf-8 from __future__ import unicode_literals __author__ = 'zh' import sys,os from wh ...
- 如何在sqlserver建立新用户并关联相应的数据库
我们经常需要在数据库上建立有权限的用户,该用户只能去操作某个特定的数据库(比如该用户只能去读,去写等等),那么我们应该怎么在sqlserver上设置呢?下面的步骤有点长,只要一步一步跟着设置就行 方法 ...
- 如何解决无法通过SSL加密与SQLServer建立连接
在部署项目时,经常会遇到驱动程序无法通过使用安全套接字层(SSL)加密与 SQL Server 建立安全连接,错误:Java.lang.RuntimeException: Could not gene ...
- SQLSERVER建立MYSQL连接服务器
1. 在SQL SERVER端安装MYSQL的ODBC驱动 2. 在ODBC数据源添加MYSQL(控制面板\所有控制面板项\管理工具) 在用户DSN 和系统DSN添加配置驱动程序 注:字符集一定要和M ...
- 在与SQLServer建立连接时出现与网络相关的或特定于实例的错误
标题: 连接到服务器 ------------------------------ 无法连接到 (local). ------------------------------ 其他信息: 在与 SQL ...
- Sqlserver建立Oracle的鏈接服務器
--建立数据库链接服务器 EXEC sp_addlinkedserver @server =N'TestOracle', --要创建的链接服务器别名 @srvproduct=N'Oracle', -- ...
- SQL Server 之 在与SQLServer建立连接时出现与网络相关的或特定于实例的错误
背景:在用数据库时,打开SQL Server 2008 R2 的 SQL Server Management Studio,输入sa的密码发现,无法登陆数据库,提示信息如上: 解决方案: 1.打开Sq ...
- SqlServer建立存储过程,方便.NET插入自增字段
首先,需要在数据库中创建一个表,以在test数据库创建tableNo表为例: create table tablesNo ( tableName ) not null, --表名 num int no ...
- sqlserver建立远程查询
开始远程查询前: ----open:Ad Hoc Distributed QueriesEXEC sp_configure 'show advanced options',1reconfigureex ...
随机推荐
- python---time 相关, str 转timestamp
df['col'] = pd.to_datetime(df['col']) from datetime import date from datetime import datetime d = da ...
- sentry docker-compsoe 安装以及简单使用
1. 准备环境 docker docker-compose 2. 安装 a. docker-compose git clone git clone https://github.com/get ...
- thinkphp 使每一个模板页都包括一个header文件和一个footer文件
在开发的过程中,常常遇到要使每一个模板页都包括一个header文件和一个footer文件.thinkPHP的模板布局为我们提供了一个叫全局配置方式可以解决问题. 1. 在配置文件里开启LAYOUT_O ...
- 微信开发 api 需要 https 服务器
微信开发 api 需要 https 服务器 先建一个环境,本地的 https 服务器. 以下这篇不错,很完整. https://zhuanlan.zhihu.com/p/23640321
- oracle之 利用 controlfile trace文件重建控制文件
一. 11g RAC 重建控制文件 1. --"create controlfile"命令生成到追踪文件中:alter database backup controlfile to ...
- Spring RESTful之@ModelAttribute
@ModelAttribute有俩个位置,一个是在方法体中,下面这个demo的用意就是每次controller@RequestMapping方法被调用之前都会走这个方法,并向Model中(@Reque ...
- 2.Python输入pip命令出现Unknown or unsupported command 'install'问题解决
1.在学习python时,输入pip命令的时候出现以下错误: 2.原因:输入where pip命令查找,发现结果如下图,原因是因为电脑原先装了LoadRunner,导致系统无法识别应该使用哪一个pip ...
- c# 启动关闭sql服务
static void Main(string[] args) { ServiceController sc = new ServiceController("MSSQL$SQLEXPRES ...
- jeecg选择按钮带入其他单据值
前端的标签 <input class="inputxt" id="fshimian" name="fshimian" ignore=& ...
- qt下用启动图
void showSplash(void) { QSplashScreen*splash=newQSplashScreen; splash->setPixmap(QPixmap(":/ ...