postgresql提供两种数据类型用于支持全文检索:tsvector类型产生一个文档(以优化全文检索形式)和tsquery类型用于查询检索。

tsvector的值是一个无重复的lexemes排序列表(什么是lexemes?),比如将一个字符串转换为tsvector类型:

test=# SELECT $$the lexeme ' ' contains spaces$$::tsvector;
tsvector
----------------------------------------
' ' 'contains' 'lexeme' 'spaces' 'the'
(1 row)

可以在单词后面跟:数字表示单词在字符串中的位置,数字的范围是1-16383。

test=# SELECT $$a:1 fat:2 cat:3 sat:4 on:5 a:6 mat:7 and:8 ate:9 a:10 fat:11 rat:12$$::tsvector;
tsvector
-------------------------------------------------------------------------------
'a':1,6,10 'and':8 'ate':9 'cat':3 'fat':2,11 'mat':7 'on':5 'rat':12 'sat':4
(1 row)

还可以在位置后面跟字母标识权,字母的范围是A,B,C,D,默认是D,不显示。

test=# SELECT $$a:1A fat:2B,4C cat:5D$$::tsvector;
tsvector
----------------------------
'a':1A 'cat':5 'fat':2B,4C
(1 row)

tsquery存储用于检索的词汇,并且使用布尔操作符&(AND),|(OR),!(NOT)来组合它们。!(NOT)结合的最紧密,而&(AND)结合的比|(OR)紧密,也可以用括号来强调分组。

test=# SELECT $$fat & rat$$::tsquery;
tsquery
---------------
'fat' & 'rat'
(1 row) test=#
test=# SELECT $$fat & (rat | cat)$$::tsquery;
tsquery
---------------------------
'fat' & ( 'rat' | 'cat' )
(1 row) test=#
test=# SELECT $$fat & rat & ! cat$$::tsquery;
tsquery
------------------------
'fat' & 'rat' & !'cat'
(1 row)

tsquery中的词汇可以用*进行标记来指定前缀匹配:

test=# SELECT to_tsvector('postgraduate');
to_tsvector
---------------
'postgradu':1
(1 row) test=# SELECT to_tsquery( 'postgres:*');
to_tsquery
------------
'postgr':*
(1 row) test=# SELECT to_tsvector('postgraduate') @@ to_tsquery( 'postgres:*');
?column?
----------
t
(1 row)

为什么呢???我也没明白,继续往下看吧!

文本检索函数和操作符

操作符

操作符 返回类型 描述 示例 结果
@@ boolean tsvector是否匹配tsquery select to_tsvector('fat cats ate rats') @@ to_tsquery('cat & rat'); t
@@@ boolean 废弃的@@    
|| tsvector 连接tsvector select 'a:1 b:2'::tsvector || 'c:1 d:2 b:3'::tsvector; 'a':1 'b':2,5 'c':3 'd':4
&& tsquery tsquery与 select 'fat | rat'::tsquery && 'cat'::tsquery; ( 'fat' | 'rat' ) & 'cat'
|| tsquery tsquery或 select 'fat | rat'::tsquery || 'cat'::tsquery; 'fat' | 'rat' | 'cat'
!! tsquery tsquery非 select !! 'cat'::tsquery; !'cat'
<-> tsquery tsquery紧跟tsquery select to_tsquery('fat') <-> to_tsquery('rat'); 'fat' <-> 'rat'
@> boolean tsquery包含另一个tsquery select 'cat'::tsquery @> 'cat & rat'::tsquery; f
<@ boolean tsquery是否包含于另一个tsquery select 'cat'::tsquery <@ 'cat & rat'::tsquery; t

函数

函数 返回类型 描述 示例 结果
array_to_tsvector(text[]) tsvector 将text数组转换成tsvector select array_to_tsvector('{fat,cat,rat}'::text[]); 'fat' 'cat' 'rat'
get_current_ts_config() regconfig 获取当前文本检索配置 select get_current_ts_config(); english
length(tsvector) integer tsvector中单词个数 select length('fat:2,4 cat:3 rat:5A'::tsvector); 3
numnode(tsquery) integer tsquery中的单词加上操作符的数量 select numnode('(fat & rat) | cat'::tsquery); 5
plainto_tsquery([ config regconfig , ] query text) tsquery 忽略标点(punctuation)生成tsquery select plainto_tsquery('english', 'The Fat Rats'); 'fat' & 'rat'
phraseto_tsquery([ config regconfig , ] query text) tsquery 忽略标点(punctuation)生成tsquery用于检索短语 select phraseto_tsquery('english', 'The Fat Rats'); 'fat' <-> 'rat'
querytree(query tsquery) text 获取tsquery可索引部分 select querytree('foo & ! bar'::tsquery); 'foo'
setweight(vector tsvectorweight "char") tsvector 给tsvector每一个元素赋权 select setweight('fat:2,4 cat:3 rat:5B'::tsvector, 'A'); 'cat':3A 'fat':2A,4A 'rat':5A
setweight(vector tsvectorweight "char"lexemestext[]) tsvector 给tsvector给指定元素赋权 select setweight('fat:2,4 cat:3 rat:5B'::tsvector, 'A', '{cat,rat}'); 'cat':3A 'fat':2,4 'rat':5A
strip(tsvector) tsvector 删除tsvector中的位置和权 select strip('fat:2,4 cat:3 rat:5A'::tsvector); 'cat' 'fat' 'rat'
to_tsquery([ config regconfig , ] query text) tsquery 标准化单词并转换为tsquery select to_tsquery('english', 'The & Fat & Rats'); 'fat' & 'rat'
to_tsvector([ config regconfig , ] document text) tsvector 减少文本至tsvector select to_tsvector('english', 'The Fat Rats'); 'fat':2 'rat':3
ts_delete(vector tsvectorlexeme text) tsvector 从tsvector中删除指定元素 select ts_delete('fat:2,4 cat:3 rat:5A'::tsvector, 'fat'); 'cat':3 'rat':5A
ts_delete(vector tsvectorlexemes text[]) tsvector 从tsvector中删除指定的一组元素 select ts_delete('fat:2,4 cat:3 rat:5A'::tsvector, ARRAY['fat','rat']); 'cat':3
ts_filter(vector tsvectorweights "char"[]) tsvector 只查询指定权值的元素 select ts_filter('fat:2,4 cat:3b rat:5A'::tsvector, '{a,b}'); 'cat':3B 'rat':5A

ts_headline([ config regconfig, ] document text,

querytsquery [, options text ])

text 显示一个查询匹配项 select ts_headline('x y z', 'z'::tsquery); x y <b>z</b>

ts_rank([ weights float4[], ] vector tsvector,

querytsquery [, normalization integer ])

float4 为查询进行文档排序 select ts_rank('fat:2,4 cat:3b rat:5A'::tsvector, 'rat'::tsquery); 0.607927

ts_rank_cd([ weights float4[], ] vector tsvector,

querytsquery [, normalization integer ])

float4 使用覆盖密度为查询进行文档排序 select ts_rank_cd('{0.1, 0.2, 0.4, 1.0}','fat:2,4 cat:3b rat:5A'::tsvector, 'rat'::tsquery); 1

ts_rewrite(query tsquerytarget tsquery,

substitute tsquery)

tsquery 使用 substitute替换target中query select ts_rewrite('a & b'::tsquery, 'a'::tsquery, 'foo|bar'::tsquery); 'b' & ( 'foo' | 'bar' )
ts_rewrite(query tsqueryselect text) tsquery 从SELECT结果中得到的substitute和target来替换query,前提是SELECT必须要有结果 SELECT ts_rewrite('a & b'::tsquery, 'SELECT t,s FROM aliases')  
tsquery_phrase(query1 tsqueryquery2 tsquery) tsquery 功能同操作符 <->  select tsquery_phrase(to_tsquery('fat'), to_tsquery('cat')); 'fat' <-> 'cat'

tsquery_phrase(query1 tsqueryquery2 tsquery,

distanceinteger)

tsquery 确保query1和query2之间距离最大为distance select tsquery_phrase(to_tsquery('fat'), to_tsquery('cat'), 10); 'fat' <10> 'cat'
tsvector_to_array(tsvector) text[] 将tsvector转换为数组 select tsvector_to_array('fat:2,4 cat:3 rat:5A'::tsvector); {cat,fat,rat}
tsvector_update_trigger() trigger 更新tsvector列自动触发触发器函数    
tsvector_update_trigger_column() trigger 同上    
unnest(tsvector, OUT lexeme text, OUT positionssmallint[], OUT weights text) setof record 将tsvector扩展成行类型 select unnest('fat:2,4 cat:3 rat:5A'::tsvector);

(cat,{3},{D})
(fat,"{2,4}","{D,D}")
(rat,{5},{A})

工作中没有用过文本检索类型,英语也不好,有兴趣还是去看原版吧:

https://www.postgresql.org/docs/9.6/static/functions-textsearch.html

postgresql----文本搜索类型和检索函数的更多相关文章

  1. PostgreSQL 的字段类型和表操作笔记

    字段类型 数值类型 Name Storage Size Description Range smallint 2 bytes small-range integer -32768 to +32767 ...

  2. PostgreSQL 基本数据类型及常用SQL 函数操作

    数据类型 名字 别名 描述 bigint int8 有符号的8字节整数 bigserial serial8 自动增长的8字节整数 bit [ (n) ]   定长位串 bit varying [ (n ...

  3. MySQL(十)操纵表及全文本搜索

    一.创建表 MySQL不仅用于表数据操作,还可以用来执行数据库和表的所有操作,包括表本身的创建和处理. 创建表一般有如下两种方式: ①使用具有交互式创建和管理表的工具: ②直接使用MySQL语句操纵表 ...

  4. PostgreSQL各数据类型的内置函数

    参考<PostgreSQL实战> 3.1.2 数字类型操作符和数学函数 PostgreSQL 支持数字类型操作符和丰富的数学函数 例如支持加.减.乘.除.模取取余操作符 SELECT 1+ ...

  5. 《mysql必知必会》笔记2(子查询、联接、组合查询、全文本搜索)

    十四:使用子查询 1:子查询是嵌套在其他查询中的查询. 2:需要列出订购TNT2的所有客户信息,需要下面几步: a:从orderitems表中检索出包含物品TNT2的所有订单号: b:根据上一步得出的 ...

  6. eclipse 设置文本模板中 insert variable... 函数 详解

    设置文本模板简要图: 设置文本模板详细过程:http://www.cnblogs.com/lsy131479/p/8478711.html 此处引出设置文本模板中 insert variable... ...

  7. Nebula 基于 ElasticSearch 的全文搜索引擎的文本搜索

    本文首发于 Nebula Graph 公众号 NebulaGraphCommunity,Follow 看大厂图数据库技术实践. 1 背景 Nebula 2.0 中已经支持了基于外部全文搜索引擎的文本查 ...

  8. PostgreSQL Array 数组类型与 FreeSql 打出一套【组合拳】

    前言 PostgreSQL 是世界公认的功能最强大的开源数据库,除了基础数据类型 int4/int8/varchar/numeric/timestamp 等数据类型,还支持 int4[]/int8[] ...

  9. 介绍一个很爽的 php 字符串特定检索函数---strpos()

    大家在用 php 开发的时候 是否 有遇到过,对于一个获取的字符串,如果想要特定检测它是否 含有某个特定的字符或者子字符串,总是找不到好方法,或者根本做不到,迫于无奈而使用foreach. 函数: s ...

随机推荐

  1. Python_selenium二次封装selenium的几个方法

    Python_selenium二次封装selenium的几个方法 将常用的几个webdriver方法封装到自己写的一个类中去,此实例中是将"浏览器后退.浏览器前进.打开站点和关闭浏览器&qu ...

  2. Android系统自带样式(android:theme)

    Theme.Dialog : (图1)Activity显示为对话框模式 Theme.NoTitleBar : (图2)不显示应用程序标题栏 Theme.NoTitleBar.Fullscreen : ...

  3. Core Java笔记

    前言 一·基础知识 二·定义,关键字和类型 三·表达式和控制流 四·数组 五·对象和类 六·高级语言特性 七·异常 八·图形用户接口 九·AWT(Abstract Window Toolkit) 事件 ...

  4. 5 -- Hibernate的基本用法 --4 1 创建Configuration对象

    org.hibernate.cfg.Configuration实例代表了应用程序到SQL数据库的配置信息,Configuration对象提供了一个buildSessionFactory()方法,该方法 ...

  5. 【代码审计】XIAOCMS_存在任意文件删除漏洞分析

      0x00 环境准备 XIAOCMS官网: http://www.xiaocms.com/ 网站源码版本:XiaoCms (发布时间:2014-12-29) 程序源码下载:http://www.xi ...

  6. Websphere安装配置与项目部署

    0x01 下载安装 1.在IBM官网下载安装包 打开下载地址,需注册账户,登录后,选择Windows 64-bit下载 2.解压缩,运行install.exe文件 3.输入刚才注册的用户名和密码,并输 ...

  7. 使用 requests 配置代理服务

    (1) 如果我们一直用同一个IP去请求同一个网站上的网页,久了之后可能会被该网站服务器屏蔽,因此我们可以使用代理IP来发起请求,代理实际上指的就是代理服务器(2) 当我们使用代理IP发起请求时,服务器 ...

  8. 手把手让你实现开源企业级web高并发解决方案(lvs+heartbeat+varnish+nginx+eAccelerator+memcached)

    原创作品,允许转载,转载时请务必以超链接形式标明文章 原始出处 .作者信息和本声明.否则将追究法律责任.http://freeze.blog.51cto.com/1846439/677348 此文凝聚 ...

  9. thinkjs2.2中的定时任务

    暂且先讨论定时任务的其中两种实现方法: 1.setInterval() setInterval()可按照指定的周期(毫秒数计)来调用函数或者计算表达式: setInterval()方法会不停的调用该函 ...

  10. 使用Html和ashx文件实现其简单的注册页面

    记得上一次博客中实现的是其登录页面,其实学会了登录页面,注册页面自然就知道怎么写啦,都是一个意思的,但是今天不知道怎么个情况,写一个注册页面程序 中 一直在出错,大的问题小的问题一直出错,似乎是不在状 ...