sphinx笔记

下载中文版coreseek包

1:解压后,将etc下的mysql。conf文件复制一份放到上级目录下,改名为sphinx。conf

2:配置文件:

2.1:source配置数据源

source goods

你要为那些数据建索引,比如,为php39数据库中的p39—goods表为数据源

sql_db = php39

sql_query 主查询,为那些数据建索引,就用一条语句他她们取出来 例如:select id, name,title from table   为这三个字段减索引

知识点:group_concat()  mysql函数

测试语句:SELECT group_concat(town) FROM `players` group by town

结果去查找town中去查找哪些值是一样的,如果相等,就全部列出来,以逗号分割进行列出,如下:

2.2:index 索引文件

一个数据源对应一个index

定义索引文件

index goods

{

source  = goods

生成的索引文件存放的目录注意,最后的goods是文件名叫goods 不是goods目录下

path = c:\****\goods

}

2.3:数据库配置

创建索引:

配置完成后,打开cmd  进入bin下降indexer。exe拉近cmd里来

*****。exe -c ****\sphinx.conf(这里是配置的那个路径)  goods -》 指的是哪一个数据源

回车就行,到此这个索引就建完了

安装并启动sphinx服务器

打开cmd 使用bin文件夹下的serchd。exe命令 拖入cmd中去

*** -c 配置的路径***\sphinx.conf --install

安装服务窗口中找到sphinx并启动

安装玩的那个窗口中输入services.msc即可

在本地服务窗口中可找到searchd这个服务,说明启动成功

项目中使用这个sphinx查询

A:将sphinx.api.php复制进项目中---放到根目录下就行

B:在控制器中使用php操作他

function keyserch(){

$key = I($key);

require('./sphinxapi.php');引入这个类文件,他是用来操作sphinx的类文件,调用它里面的方法用就行,不会的百度sphinxapi里的方法,手册有介绍

$sph = new \sphinxclient();

$sph = setserver('localhost',9312);连接服务器9312 是sphx的固定端口

$sph = query($key,goods);第一个参数是查询那个关键字,第二个参数是从那个索引文件里查询搜索,{ 指的是索引的名字 },这里是只index goods这里定义的这个

在牛逼一点的功能:

实时索引更新:个人理解  主索引+临时索引(增量索引) 来实现类似于实时更新的效果,原理是,为新数据生成个小的临时的索引文件,然后将索引文件合并到主索引文件中去

a:先给他建一个主索引,从这些索引文件中,查询出一个最大的商品id来 新建一个数据表,将这个最大的商品的id update存到这个表中

b:然后每次新添加的商品,因为不会自动建立索引,所以他们的id不会再索引文件中,他们的商品的id肯定比索引中的保存的最大的商品id要大

c: 然后给新添加的商品新建一个索引,按照上述方法,source goods数据源复制一份,改为 source goods_new 作为新索引数据源

index goods索引文件复制一份,改为index  goods_new  作为新索引的名字

然后合并主索引

修改sphx配置文件:新建一个数据表叫spinx_xin  字段为id

source goods

{

type=**

****

sql_query = select *****from p39_goods   建立的索引文件,此时为主索引

# 在创建好索引后吧最后一个商品的id更新到新建的表中:

$sql_query_post = update spinx_xin set id= (select max(id) from p39_goods )

}

测试一下:重新创建一下索引即可看到效果 注意:重建索引需在本地服务中心关闭search的这个sphinx服务  然后执行services.msc在启动 然后输入建立索引命令即可

新建索引不关闭服务器也行,在建索引命令后面加上 --rotate这个命令即可

执行完命令后就把id更新到表中了

注意:这里只是把索引的文件的商品id更新到了新表中,新的商品还没有索引

接下来就是给新商品新建索引,然后把它每过一段时间,合并到主索引中

复制source goods 为goods_new

修改索引的sql语句

source goods_new

{

******

****

*****

新商品id肯定大于索引中最大的商品的id,

因为已将最大的id存在spinx_xin  新表的id中

只要比较商品表中比这个新表的id大的就是新商品

修改sql语句,目的是查询出新商品,然后给新商品建索引

sql_query = select id ****from p39_goods  where  id>(select id from spinx_xin  )

******

}

同理新建了一个数据源就得新建一个index索引文件

复制一份index goods 索引文件在做相应的修改,新的索引就好了

写一个脚本,bat文件,目的有两个,

先给增量数据生成索引文件

把新生成的索引文件合并到主索引中

bat中写入建立索引的语句:

1:建立新的索引文件

****index.exe -c  ***\sphinx.conf(路径) goods_new

2:合并索引新索引文件到主索引文件中

****indexer.exe -c ***\sphinx.conf  --merge  goods   goods_new   --rotate   (这里别忘了写rotate相当于,自动关闭sghinx服务器建索引自动打开,上文有提到)

然后执行脚本文件

但是每次添加商品手动执行这个脚本更新索引,太麻烦了,所以还要配置一下这个脚本,让他自动每五分钟执行一次

window:管理工具--任务计划   设置五分钟自动执行脚本

linux:crond进程

sphinx笔记的更多相关文章

  1. sphinx随笔记了一下

    sphinx笔记 一:下载中文版coreseek包1:解压后,将etc下的mysql.conf文件复制一份放到上级目录下,改名为sphinx.conf2:配置文件: 2.1:source配置数据源so ...

  2. 【转】 文档与笔记利器 reStructuredText 和 Sphinx

    关于制作文档和笔记这种事,我已经纠结了很久,网上解决方案也一大推,我试过几样,ScrapBook 和 Zotero,编辑不太方便,同步麻烦.Google Note 过于格式简单,现在也不更新了,Goo ...

  3. 小白的linux笔记11:放弃gitbook,转战Sphinx

    gitbook生成的html目录不折叠且链接失效 装好了gitbook和nodejs,本以为可以安心的做电子书了. 谁想到gitbook慢的一P,而且导出来的html目录不折叠,最关键的是链接有问题, ...

  4. Sphinx学习笔记2

    因为网站搜索的需要,启动了一个搜索引擎项目,其实也算不上完整的搜索引擎,需求很简单,如下:     1)搜索产品名.类别名.品牌名.副标题.关键字等字段     2)数据量目前为13000左右,未来可 ...

  5. Sphinx学习笔记(一)

    最近负责一个项目,需要用到全文检索,我的环境大体如下:       1.数据保存在MySQL中     2.需要支持中文检索     3.尽可能的简单       选择了Sphinx,至于solr和E ...

  6. sphinx搜索 笔记

    架构图: 安装sphinx,见文章http://my.oschina.net/ptk/blog/495435 sphinx关键的配置文件.在里面写查询的sql. 两个关键命令:indexer生成查询索 ...

  7. sphinx通过增量索引实现近实时更新

    一.sphinx增量索引实现近实时更新设置 数据库中的已有数据很大,又不断有新数据加入到数据库中,也希望能够检索到.全部重新建立索引很消耗资源,因为我们需要更新的数据相比较而言很少. 例如.原来的数据 ...

  8. coreseek (sphinx)+ Mysql + Thinkphp搭建中文搜索引擎详解

      一, 前言    1,研究coreseek的动机 我有一个自己的笔记博客,经常在上面做一些技术文章分析.在查询一些文章的时候,以前只能将要查询的内容去mysql中用like模糊匹配.在文章多了的情 ...

  9. sphinx 增量索引 实现近实时更新

    一.sphinx增量索引的设置   数据库中的已有数据很大,又不断有新数据加入到数据库中,也希望能够检索到.全部重新建立索引很消耗资源,因为我们需要更新的数据相比较而言很少.例如.原来的数据有几百万条 ...

随机推荐

  1. 深入浅出 JVM ClassLoader

    # 前言 在 JVM 综述里面,我们说,JVM 做了三件事情,Java 程序的内存管理, Java Class 二进制字节流的加载(ClassLoader),Java 程序的执行(执行引擎).我们也说 ...

  2. Angular Forms - 自定义 ngModel 绑定值的方式

    在 Angular 应用中,我们有两种方式来实现表单绑定--"模板驱动表单"与"响应式表单".这两种方式通常能够很好的处理大部分的情况,但是对于一些特殊的表单控 ...

  3. [PHP] 算法-二叉树的子结构判断的PHP实现

    输入两棵二叉树A,B,判断B是不是A的子结构.(ps:我们约定空树不是任意一个树的子结构) 1.子树的意思是包含了一个节点,就得包含这个节点下的所有节点,两棵树同时到底 2.子结构可以是A树的任意一部 ...

  4. Oracle索引失效原因及解决方法

    一.Oracle索引失效的原因 1使用否定关键字 !=, <> ,not in,not exist select * fromdrama where id <> 1,Mysql ...

  5. 【RabbitMQ】5、RabbitMQ任务分发机制

    当有Consumer需要大量的运算时,RabbitMQ Server需要一定的分发机制来balance每个Consumer的load.接下来我们分布讲解. 应用场景就是RabbitMQ Server会 ...

  6. 深入理解JVM——对象

    对象的创建 虚拟机遇到一条new指令时,首先检查指令的参数能否在常量池中定位到一个类的符号引用,并且检查这个符号引用代表的类是否已经被加载.解析和初始化过.如果没有,必须先执行相应的类加载过程. 接下 ...

  7. IOC容器的创建

    一.IOC容器创建方式 Ioc容器的创建时通过ApplicationContext接口的相关实现类进行的. 如上图所示:有三种创建IOC容器的方式. ClassPathXmlApplicationCo ...

  8. 泛化之美--C++11可变模版参数的妙用

    1概述 C++11的新特性--可变模版参数(variadic templates)是C++11新增的最强大的特性之一,它对参数进行了高度泛化,它能表示0到任意个数.任意类型的参数.相比C++98/03 ...

  9. OneAPM大讲堂 | Java 异常日志记录最佳实践

    [编者按]本文作者是 Casey Dunham.Casey 是一位具有 10 多年经验的专业软件开发人员,以其独特的方式应对应用安全问题而闻名.本文系国内 ITOM 管理平台 OneAPM 工程师编译 ...

  10. 从零自学Java-10.充分利用现有对象

    1.超类和子类的设计:2.建立继承层次:3.覆盖方法. 程序StringLister:使用数组列表和特殊的for循环将一系列字符串按字母顺序显示到屏幕上.这些字符串来自一个数组和命令行参数 packa ...