利用referer属性,记录百度搜索跳转参数
从百度搜索结果跳转到指定链接前,百度会发送一些参数,可以利用referer属性,在本站访问时记录百度跳转来之前的一些参数。
利用百度跳转前参数,进行一些相关的seo优化。
目前所用到的一些参数说明如下:
wd - 最终搜索词
bs - 前一次搜索词
tn - 到达搜索引擎的方式,如:baidu,直接打开,sitehao123,从123网站进入
f - 3:下拉框选择,8:用户自主搜索
oq - 用户输入搜索词(f=3时才会出现)
cl - 搜索类型(3-网页)
pn - 页数(页数*10)
inputT= 从打开百度主页,在对话框输入开始计时,到你点击搜索之间的时间。
filter代码如下:

import java.io.IOException;
import java.net.URLDecoder;
import java.text.SimpleDateFormat;
import java.util.ArrayList;
import java.util.Date;
import java.util.UUID; import javax.servlet.Filter;
import javax.servlet.FilterChain;
import javax.servlet.FilterConfig;
import javax.servlet.ServletException;
import javax.servlet.ServletRequest;
import javax.servlet.ServletResponse;
import javax.servlet.http.Cookie;
import javax.servlet.http.HttpServletRequest;
import javax.servlet.http.HttpServletResponse; /**
* @author xuejt
* 搜索引擎访问过滤器
*/
public class KeyWordFilter implements Filter {
/**
* 要记录的搜索引擎域名
*/
private static ArrayList<String> DOMAINLIST = null;
/**
* 需要转码的key列表
*/
private static ArrayList<String> DECODEWORDLIST = null;
/**
* 自定义记录cookie名
*/
private static final String SEARCH_COOKIE_KEY = "search_cookie";
/**
* 自定义cookie过期时间
*/
private static final int COOKIE_MAX_AGE= 1440;
private static final SimpleDateFormat sdf = new SimpleDateFormat("yyyy-MM-dd HH:mm:ss"); @Override
public void destroy() { } @Override
public void doFilter(ServletRequest request, ServletResponse response,
FilterChain chain) throws IOException, ServletException {
try { HttpServletRequest req = (HttpServletRequest) request;
HttpServletResponse res = (HttpServletResponse) response; // 获取referer
String referer = req.getHeader("referer"); // 循环过滤域名
for (String domain : DOMAINLIST) { if (null != referer && referer.contains(domain)) { // 如果是从指定域名跳转到本站时,需要记录跳转前参数
System.out.println("************** param **************");
if (referer.contains("?")) {
String[] searchParams = referer.substring(referer.indexOf("?") + 1).split("&");
String[] p = null;
for (String param : searchParams) {
p = param.split("=");
// 判断当前参数是否需要中文转码
if (DECODEWORDLIST.contains(p[0])) {
p[1] = URLDecoder.decode(p[1], "UTF-8");
}
System.out.println(p[0] + " - " + p[1]);
}
} System.out.println("************** param **************");
System.out.println(); // 获取当前访问的cookie列表
Cookie[] cookies = req.getCookies();
if (cookies != null && cookies.length > 0) {
System.out.println("************** cookie **************");
int index = 0;
Cookie tmpCookie = null;
while (tmpCookie == null && index < cookies.length) {
// 判断当前cookie列表中是否有自己设定的cookie
if (cookies[index].getName().equals(SEARCH_COOKIE_KEY)) {
tmpCookie = cookies[index];
System.out.println("已有cookie - " + tmpCookie.getValue());
}
index++;
}
if (tmpCookie == null) {
// 如果没有自己设定的cookie,表示是新用户访问或cookie已过期
tmpCookie = new Cookie(SEARCH_COOKIE_KEY, UUID.randomUUID().toString());
tmpCookie.setMaxAge(COOKIE_MAX_AGE); // 设置cookie过期时间
res.addCookie(tmpCookie);
System.out.println("设置新cookie - " + tmpCookie.getValue());
}
System.out.println("本次访问时间 - " + sdf.format(new Date()));
System.out.println("本次访问的ip - " + req.getLocalAddr()); System.out.println("************** cookie **************");
} }
}
} catch (Exception e) {
e.printStackTrace();
}
chain.doFilter(request, response); } @Override
public void init(FilterConfig arg0) throws ServletException {
/*
* 增加要捕获域名
*/
DOMAINLIST = new ArrayList<String>();
DOMAINLIST.add("www.baidu.com"); /*
* 增加要转码的参数名
*/
DECODEWORDLIST = new ArrayList<String>();
DECODEWORDLIST.add("wd");
DECODEWORDLIST.add("bs");
DECODEWORDLIST.add("oq"); } }
转自:https://www.cnblogs.com/anranwuse/p/3630074.html
利用referer属性,记录百度搜索跳转参数的更多相关文章
- 利用python爬取海量疾病名称百度搜索词条目数的爬虫实现
实验原因: 目前有一个医疗百科检索项目,该项目中对关键词进行检索后,返回的结果很多,可惜结果的排序很不好,影响用户体验.简单来说,搜索出来的所有符合疾病中,有可能是最不常见的疾病是排在第一个的,而最有 ...
- 【程序员的吃鸡大法】利用OCR文字识别+百度算法搜索,玩转冲顶大会、百万英雄、芝士超人等答题赢奖金游戏
[先上一张效果图]: 一.原理: 其实原理很简单: 1.手机投屏到电脑: 2.截取投屏画面的题目部分,进行识别,得到题目和三个答案: 3.将答案按照一定的算法,进行搜索,得出推荐答案: 4.添加了一些 ...
- 利用OCR文字识别+百度算法搜索,玩转冲顶大会、百万英雄、芝士超人等答题赢奖金游戏
[先上一张效果图]: 一.原理: 其实原理很简单: 1.手机投屏到电脑: 2.截取投屏画面的题目部分,进行识别,得到题目和三个答案: 3.将答案按照一定的算法,进行搜索,得出推荐答案: 4.添加了一些 ...
- 记录这一刻:百度搜索结果“文件格式:-HTML文本”
只要百度搜索关键词无论结果是"文件格式:-HTML文本",现在,这个问题已经被修复. watermark/2/text/aHR0cDovL2Jsb2cuY3Nkbi5uZXQvdG ...
- 利用autocomplete.js实现仿百度搜索效果(ajax动态获取后端[C#]数据)
实现功能描述: 1.实现搜索框的智能提示 2.第二次浏览器缓存结果 3.实现仿百度搜索 <!DOCTYPE html> <html xmlns="http://www.w3 ...
- Vue调用百度接口做百度搜索
这两天由于学习需要,需要用vue来调用api接口,但是以前没怎么接触过用vue来调用接口,不会没关系,发挥我们强大的学习能力,都不是事,学习了半天基本也就可以初级上手了,写篇随笔记录下来,方便以后回顾 ...
- 百度搜索 “Java面试题” 前200页(面试必看)
前言 本文中的题目来源于网上的一篇文章<百度搜索 "Java面试题" 前200页>,但该文章里面只有题目,没有答案.因此,我整理了一些答案发布于本文.本文整理答案的原则 ...
- JavaScript-dom3 json_str dom元素控制 模拟百度搜索
访问关系-封装代码 html <!DOCTYPE html> <html lang="en"> <head> <meta charset= ...
- Python:输入关键字进行百度搜索并爬取搜索结果
学习自:手把手教你用Python爬取百度搜索结果并保存 - 云+社区 - 腾讯云 如何利用python模拟百度搜索,Python交流,技术交流区,鱼C论坛 指定关键字,对其进行百度搜索,保存搜索结果, ...
随机推荐
- Centos6.5系统压力测试过程大量TIME_WAIT
统计tcp状态的命令: netstat -n | awk '/^tcp/ {++S[$NF]} END {for(a in S) print a, S[a]}' netstat -n | awk '/ ...
- CSS3 鲜为人知的属性-webkit-tap-highlight-color的理解
(一)-webkit-tap-highlight-color 这个属性只用于iOS (iPhone和iPad).当你点击一个链接或者通过Javascript定义的可点击元素的时候,它就 ...
- vue $mount 和 el的区别
两者在使用效果上没有任何区别,都是为了将实例化后的vue挂载到指定的dom元素中. 如果在实例化vue的时候指定el,则该vue将会渲染在此el对应的dom中,反之,若没有指定el,则vue实例会处于 ...
- JavaScript onmousewheel鼠标滚轮示例
<!doctype html> <html> <head> <meta charset="utf-8"> <title> ...
- form表单利用iframe高仿ajax
html代码 <!DOCTYPE html> <html lang="en"> <head> <meta charset="UT ...
- 两个select一个选中,另一个就没有选中的那个值
<!DOCTYPE html> <html lang="en"> <head> <meta charset="UTF-8&quo ...
- OpenSSL-Win64创建IdentityServer证书
d:cd xx C:\OpenSSL-Win64\bin\openssl req -newkey rsa:2048 -nodes -keyout identity.key -x509 -days 36 ...
- 044 hive与mysql两种数据源之间的join
这篇文章是基于上一篇文章的续集 一:需求 1.图形表示 二:程序 1.程序. package com.scala.it import java.util.Properties import org.a ...
- json 对象和json字符串
转载至 http://www.cnblogs.com/cstao110/p/3762056.html JSON字符串与JSON对象的区别 Q:什么是"JSON字符串",什么是&q ...
- Maya cmds pymel 单位和轴向设置
Maya cmds pymel 单位和轴向设置 import maya.cmds as cmds # 1. to make the Y-axis of the world to be the up a ...