Lucene 时间排序
在Lucene4.4中,想要实现搜索结果按照时间倒序的效果:如果两个文档得分相同,那么就按照发布时间倒序排列;否则就按照分数排列。这种效果在Lucene4.6中实现起来极其简单,直接利用search接口的Sort参数即可达成,完全不需要像某些人说的重写Similarity那么麻烦。三两行代码的事情,体现了Make it simple, stupid的精髓。
首先来看看测试例子,这个例子中我建立了四个文档,按照内容-发布日期来表示分别是:
2004年光棍节攻略 , 20041111
2005年光棍节攻略 , 20051111
2006年光棍节攻略 , 20061111
游戏攻略 ,20141111
统一使用“光棍节攻略”来搜索它们,用户希望最新的光棍节攻略排在第一。
如果不做排序处理的话,用户体验非常糟糕:
- package com.hankcs.test;
- import org.apache.lucene.analysis.Analyzer;
- import org.apache.lucene.document.*;
- import org.apache.lucene.index.*;
- import org.apache.lucene.queries.CustomScoreQuery;
- import org.apache.lucene.queries.function.FunctionQuery;
- import org.apache.lucene.queryparser.classic.ParseException;
- import org.apache.lucene.queryparser.classic.QueryParser;
- import org.apache.lucene.search.*;
- import org.apache.lucene.store.Directory;
- import org.apache.lucene.store.LockObtainFailedException;
- import org.apache.lucene.store.RAMDirectory;
- import org.apache.lucene.util.Version;
- import org.wltea.analyzer.lucene.IKAnalyzer;
- import java.io.IOException;
- /**
- * @author hankcs
- */
- public class TestSortByTime
- {
- public static void main(String[] args)
- {
- // Lucene Document的主要域名
- String fieldName = "text";
- // 实例化IKAnalyzer分词器
- Analyzer analyzer = new IKAnalyzer();
- Directory directory = null;
- IndexWriter iwriter;
- IndexReader ireader = null;
- IndexSearcher isearcher;
- try
- {
- //索引过程**********************************
- //建立内存索引对象
- directory = new RAMDirectory();
- //配置IndexWriterConfig
- IndexWriterConfig iwConfig = new IndexWriterConfig(Version.LUCENE_46, analyzer);
- iwConfig.setOpenMode(IndexWriterConfig.OpenMode.CREATE_OR_APPEND);
- iwriter = new IndexWriter(directory, iwConfig);
- //写入索引
- for (int i = 0; i < 3; ++i)
- {
- int year = 2004 + i;
- Document doc = new Document();
- doc.add(new TextField(fieldName, year + "年光棍节攻略", Field.Store.YES));
- doc.add(new IntField("date", year * 10000 + 1111, Field.Store.YES));
- iwriter.addDocument(doc);
- }
- // 加入一个干扰文档
- Document doc = new Document();
- doc.add(new TextField(fieldName, "游戏攻略", Field.Store.YES));
- doc.add(new IntField("date", 20141111, Field.Store.YES));
- iwriter.addDocument(doc);
- iwriter.close();
- //搜索过程**********************************
- //实例化搜索器
- ireader = DirectoryReader.open(directory);
- isearcher = new IndexSearcher(ireader);
- String keyword = "光棍节攻略";
- //使用QueryParser查询分析器构造Query对象
- QueryParser qp = new QueryParser(Version.LUCENE_46, fieldName, analyzer);
- Query query = qp.parse(keyword);
- System.out.println("Query = " + query);
- //搜索相似度最高的5条记录
- TopDocs topDocs = isearcher.search(query, 5);
- System.out.println("命中:" + topDocs.totalHits);
- //输出结果
- ScoreDoc[] scoreDocs = topDocs.scoreDocs;
- for (int i = 0; i < Math.min(5, scoreDocs.length); i++)
- {
- Document targetDoc = isearcher.doc(scoreDocs[i].doc);
- System.out.print(targetDoc.getField(fieldName).stringValue());
- System.out.print(" , " + targetDoc.getField("date").numericValue());
- System.out.println(" , " + scoreDocs[i].score);
- }
- } catch (CorruptIndexException e)
- {
- e.printStackTrace();
- } catch (LockObtainFailedException e)
- {
- e.printStackTrace();
- } catch (IOException e)
- {
- e.printStackTrace();
- } catch (ParseException e)
- {
- e.printStackTrace();
- } finally
- {
- if (ireader != null)
- {
- try
- {
- ireader.close();
- } catch (IOException e)
- {
- e.printStackTrace();
- }
- }
- if (directory != null)
- {
- try
- {
- directory.close();
- } catch (IOException e)
- {
- e.printStackTrace();
- }
- }
- }
- }
- }
输出:
2004年光棍节攻略 , 20041111 , 0.71185887
2005年光棍节攻略 , 20051111 , 0.71185887
2006年光棍节攻略 , 20061111 , 0.71185887
游戏攻略 , 20141111 , 0.049675122
可以看到文档是严格按照分数排序的,如果分数相同,则按照索引顺序排序,导致最新的文章反而排在最下面。
使用search接口的Sort参数优化搜索结果:
- package com.hankcs.test;
- import org.apache.lucene.analysis.Analyzer;
- import org.apache.lucene.document.*;
- import org.apache.lucene.index.*;
- import org.apache.lucene.queries.CustomScoreQuery;
- import org.apache.lucene.queries.function.FunctionQuery;
- import org.apache.lucene.queryparser.classic.ParseException;
- import org.apache.lucene.queryparser.classic.QueryParser;
- import org.apache.lucene.search.*;
- import org.apache.lucene.store.Directory;
- import org.apache.lucene.store.LockObtainFailedException;
- import org.apache.lucene.store.RAMDirectory;
- import org.apache.lucene.util.Version;
- import org.wltea.analyzer.lucene.IKAnalyzer;
- import java.io.IOException;
- /**
- * @author hankcs
- */
- public class TestSortByTime
- {
- public static void main(String[] args)
- {
- // Lucene Document的主要域名
- String fieldName = "text";
- // 实例化IKAnalyzer分词器
- Analyzer analyzer = new IKAnalyzer();
- Directory directory = null;
- IndexWriter iwriter;
- IndexReader ireader = null;
- IndexSearcher isearcher;
- try
- {
- //索引过程**********************************
- //建立内存索引对象
- directory = new RAMDirectory();
- //配置IndexWriterConfig
- IndexWriterConfig iwConfig = new IndexWriterConfig(Version.LUCENE_46, analyzer);
- iwConfig.setOpenMode(IndexWriterConfig.OpenMode.CREATE_OR_APPEND);
- iwriter = new IndexWriter(directory, iwConfig);
- //写入索引
- for (int i = 0; i < 3; ++i)
- {
- int year = 2004 + i;
- Document doc = new Document();
- doc.add(new TextField(fieldName, year + "年光棍节攻略", Field.Store.YES));
- doc.add(new IntField("date", year * 10000 + 1111, Field.Store.YES));
- iwriter.addDocument(doc);
- }
- // 加入一个干扰文档
- Document doc = new Document();
- doc.add(new TextField(fieldName, "游戏攻略", Field.Store.YES));
- doc.add(new IntField("date", 20141111, Field.Store.YES));
- iwriter.addDocument(doc);
- iwriter.close();
- //搜索过程**********************************
- //实例化搜索器
- ireader = DirectoryReader.open(directory);
- isearcher = new IndexSearcher(ireader);
- String keyword = "光棍节攻略";
- //使用QueryParser查询分析器构造Query对象
- QueryParser qp = new QueryParser(Version.LUCENE_46, fieldName, analyzer);
- Query query = qp.parse(keyword);
- System.out.println("Query = " + query);
- //搜索相似度最高的5条记录
- Sort sort = new Sort(new SortField("text", SortField.Type.SCORE), new SortField("date", SortField.Type.INT, true));
- TopDocs topDocs = isearcher.search(query, 5, sort);
- System.out.println("命中:" + topDocs.totalHits);
- //输出结果
- ScoreDoc[] scoreDocs = topDocs.scoreDocs;
- for (int i = 0; i < Math.min(5, scoreDocs.length); i++)
- {
- Document targetDoc = isearcher.doc(scoreDocs[i].doc);
- System.out.print(targetDoc.getField(fieldName).stringValue());
- System.out.print(" , " + targetDoc.getField("date").numericValue());
- System.out.println(" , " + scoreDocs[i].score);
- }
- } catch (CorruptIndexException e)
- {
- e.printStackTrace();
- } catch (LockObtainFailedException e)
- {
- e.printStackTrace();
- } catch (IOException e)
- {
- e.printStackTrace();
- } catch (ParseException e)
- {
- e.printStackTrace();
- } finally
- {
- if (ireader != null)
- {
- try
- {
- ireader.close();
- } catch (IOException e)
- {
- e.printStackTrace();
- }
- }
- if (directory != null)
- {
- try
- {
- directory.close();
- } catch (IOException e)
- {
- e.printStackTrace();
- }
- }
- }
- }
- }
输出结果:
命中:4
2006年光棍节攻略 , 20061111 , NaN
2005年光棍节攻略 , 20051111 , NaN
2004年光棍节攻略 , 20041111 , NaN
游戏攻略 , 20141111 , NaN
我们看到“2006年光棍节攻略”因为时间比较新,并且相关性高,就排在了第一。“2005年光棍节攻略”相关度相同,因为时间旧就排在后面一点,而干扰文档“游戏攻略”即使时间最新,因为不相关的原因排在最后面。这种效果正好是我想要的,极大提升了用户体验。
Lucene 时间排序的更多相关文章
- lucene之排序、设置权重、优化、分布式搜索(转)
lucene之排序.设置权重.优化.分布式搜索(转) 1. 基本应用 using System;using System.Collections.Generic;using System.Text;u ...
- 如何对sharepoint图片库的文件夹的图片按照时间排序并分页显示
/// <summary> /// 获取图片库第一层文件夹--根据文件夹名称排序 /// </summary> /// <param name="siteUrl ...
- ls按时间排序输出文件列表
文件转自:http://www.2cto.com/os/201303/197829.html ls按时间排序输出文件列表 首先,ls --help查看ls相关的与时间排序相关的参数: > ...
- C#实现对指定文件夹中文件按修改时间排序
string path = "~/Document/Introduction/团队管理制度/"; DirectoryInfo dirinfo = new Di ...
- PHP读取文件夹目录,按时间排序,大小排序,名字排序
工作中有时候会遇到文件存储数据,但是在前台显示的时候又因为没有数据库,无法使用上传或最后一次修改日期字段排序,所以有了如下代码: <?php $dir = "./";//目录 ...
- lucene查询排序结果原理总结
参考文章 Lucene3.0结果排序原理+操作+示例 Lucene的排序算法 一句话总结lucene排序算法是什么样的 关键几个概念 参考文档: http://lucene.apache.org/co ...
- 几种能在O(n*log(n))时间排序
线性时间排序 各种排序算法总结已经介绍了几种能在O(n*log(n))时间内培训n个数的算法.归并排序和堆排序达到了最坏情况下的上界:快速排序在平均情况下达到该上界.这些算法都有一个有趣的性质:在 ...
- linux_常用命令_(ls, lsof,nslookup)_查看文件按照时间排序
平时收集些用到的命令 方便使用 1: ls -lrt 按时间排序 展示 2:nslookup 查看dns解析 3:lsof -p 进程号 lsof `which httpd` //那个进程在使用 ...
- Linux中ls对文件进行按大小排序和按时间排序,设置ls时间格式
1 按文件大小排序 使用 ll -S | grep '^[^d]' // 格式化文件大小形式 ll -Sh | grep '^[^d]' 2 按文件修改时间排序显示 使用 ll -rt 3 设置ls ...
随机推荐
- [备忘] Automatically reset Windows Update components
这两天遇到Windows 10的更新问题,官方有一个小工具,可以用来修复Windows Update的问题,备忘如下 https://support.microsoft.com/en-us/kb/97 ...
- ASP.NET MVC Authorization 自定义跳转
应用场景:在 ASP.NET MVC 应用程序中,需要对用户身份权限进行验证,比如没有登录或者不符合权限的用户,访问 Action 的时候,跳转到指定页面. 重写 Authorize: public ...
- C# 在excel表格中检索并导出数据
由于工作需要,我经常使用excel文档来存储和处理各种数据,在生活中偶尔也会使用excel表格来记录各种开销,相信很多朋友也和我一样.Excel的功能很强大,其中一个很实用的数据处理功能就是查找和替换 ...
- 相克军_Oracle体系_随堂笔记005-Database buffer cache
本章主要阐述SGA中的Database buffer cache. Buffer cache { 1.pin (读写瞬间的状态) 2.clean 3.dirty 4.unused } --Databa ...
- 利用GeoWebCache实现WebGIS地形图展示的缓存优化
文章版权由作者李晓晖和博客园共有,若转载请于明显处标明出处:http://www.cnblogs.com/naaoveGIS/. 1.前言 在WebGIS中,影像金字塔是一个很重要的概念.在WebGI ...
- 【集合框架】JDK1.8源码分析HashSet && LinkedHashSet(八)
一.前言 分析完了List的两个主要类之后,我们来分析Set接口下的类,HashSet和LinkedHashSet,其实,在分析完HashMap与LinkedHashMap之后,再来分析HashSet ...
- Android Studio获取SHA1和MD5方法
1,点击Build > Generate Signed APK. 2,打开命令进入C:\Program Files\Java\jdk1.6.0_39\bin(任何已安装的Java目录) 3,键入 ...
- Android之图片加载框架Fresco基本使用(一)
PS:Fresco这个框架出的有一阵子了,也是现在非常火的一款图片加载框架.听说内部实现的挺牛逼的,虽然自己还没研究原理.不过先学了一下基本的功能,感受了一下这个框架的强大之处.本篇只说一下在xml中 ...
- 创建ASP.NET Core MVC应用程序(5)-添加查询功能 & 新字段
创建ASP.NET Core MVC应用程序(5)-添加查询功能 & 新字段 添加查询功能 本文将实现通过Name查询用户信息. 首先更新GetAll方法以启用查询: public async ...
- 多步骤多分步的组件StepJump
最近的工作在做一个多步骤多分步的表单页面,这个多步骤多分步的意思是说这个页面的业务是分多个步骤完成的,每个步骤可能又分多个小步骤来处理,大步骤之间,以及小步骤之间都是一种顺序发生的业务关系.起初以为这 ...