Dubbo入门到精通学习笔记（十八）：使用Redis3.0集群实现Tomcat集群的Session共享

文章目录

• 1、单节点访问http://192.168.1.61:8082/pay-web-boss/：
• 2、增加多一个消费者节点：192.168.1.62，以同样的方式部署pay-web-boss工程。
• 3、在Keepalived+Nginx组成的反向代理集群中的两个节点同步增加如下两处配置：
• 4、重启Nginx
• 5、通过反向代理集群的VIP访问pay-web-boss时，有时可以登录成功，但有时又会提示验证码错误，原因就是Session没有同步。
• 6、下载
• 7、下载
• 8、添加Tomcat的环境变量 （可选）
• 9、配置 redis.properties ， 集群中的IP:端口用都好隔开，打开Redis集群模式
• 10、在Tomcat7中的 conf/context.xml 中增加如下两行配置：
• 11、在Tomcat的conf/web.xml中核对确认Tomcat的Session超时时间，默认为30分钟。
• 12、重新启动tomcat集群，用vip访问，发现集群使用正常，不会再出现原来会话不同步的现象。

本文内容参考龙果学院《基于Dubbo的分布式系统架构实战》课程内容，以课程中所提供的简易版支付系统中的运营管理系统 pay-web-boss 项目为例

Tomcat版本：Tomca7

1、单节点访问http://192.168.1.61:8082/pay-web-boss/：

2、增加多一个消费者节点：192.168.1.62，以同样的方式部署pay-web-boss工程。

先验证新增节点也可正常访问http://192.168.1.62:8082/pay-web-boss/

3、在Keepalived+Nginx组成的反向代理集群中的两个节点同步增加如下两处配置：

user  root;
worker_processes  1;
#error_log  logs/error.log;
#error_log  logs/error.log  notice;
#error_log  logs/error.log  info;
#pid        logs/nginx.pid;
events {
worker_connections  1024;
}
http {
include      mime.types;
default_type  application/octet-stream;
#log_format  main  '$remote_addr - $remote_user [$time_local] "$request" '
#                  '$status $body_bytes_sent "$http_referer" '
#                  '"$http_user_agent" "$http_x_forwarded_for"';
#access_log  logs/access.log  main;
sendfile        on;
#tcp_nopush    on;
#keepalive_timeout  0;
keepalive_timeout  65;
#gzip  on;
## FastDFS Tracker Proxy
upstream fastdfs_tracker {
server 192.168.1.131:8000 weight=1 max_fails=2 fail_timeout=30s;
server 192.168.1.132:8000 weight=1 max_fails=2 fail_timeout=30s;
}
## web-boss
upstream web_boss {
server 192.168.1.61:8082 weight=1 max_fails=2 fail_timeout=30s;
server 192.168.1.62:8082 weight=1 max_fails=2 fail_timeout=30s;
}
## FastDFS Cluster
server {
listen      88;
server_name  localhost;
#charset koi8-r;
#access_log  logs/host.access.log  main;
location / {
root  html;
index  index.html index.htm;
}
#error_page  404              /404.html;
# redirect server error pages to the static page /50x.html
error_page  500 502 503 504  /50x.html;
location = /50x.html {
root  html;
}
## FastDFS Proxy
location /dfs {
root  html;
index  index.html index.htm;
proxy_passhttp://fastdfs_tracker/;
proxy_set_header Host  $http_host;
proxy_set_header Cookie $http_cookie;
proxy_set_header X-Real-IP $remote_addr;
proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
proxy_set_header X-Forwarded-Proto $scheme;
client_max_body_size  300m;
}
## web-boss Cluster
location /pay-web-boss {
root  html;
index  index.html index.htm;
proxy_passhttp://web_boss/pay-web-boss;
proxy_set_header Host  $http_host;
proxy_set_header Cookie $http_cookie;
proxy_set_header X-Real-IP $remote_addr;
proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
proxy_set_header X-Forwarded-Proto $scheme;
client_max_body_size  100m;
}
}
}

注意配置中的## web-boss和## web-boss Cluster

4、重启Nginx

# /usr/local/nginx/sbin/nginx -s reload

5、通过反向代理集群的VIP访问pay-web-boss时，有时可以登录成功，但有时又会提示验证码错误，原因就是Session没有同步。

http://192.168.1.50:88/pay-web-boss/login_operatorLogin.action

http://192.168.1.51:88/pay-web-boss/login_operatorLogin.action

http://192.168.1.52:88/pay-web-boss/login_operatorLogin.action

上面两个单独访问没问题。

nginx代理后，虚拟ip50，代理51和52两个机器上的tomcat，两个tomcat的session是不同步的，输入验证码之前和之后是走的两个服务器。

接下来就是要解决Tomcat的Session共享问题，使用开源项目：

https://github.com/ran-jit/TomcatRedisClusterEnabledSessionManager

注意，因为我们使用的是Redis3.0集群，相应的插件一定要支持Redis3.0集群。Redis集群地址，请看《Dubbo视频教程–高可用架构篇–第05节–Redis集群的安装（Redis3+CentOS）》

1

92.168.1.111:7111
192.168.1.112:7112
192.168.1.113:7113
192.168.1.114:7114
192.168.1.115:7115
192.168.1.116:7116

6、下载

https://github.com/ran-jit/TomcatRedisClusterEnabledSessionManager/archive/master.zip

解压，找到lib目录中的

jedis-3.0.0-SNAPSHOT.jar

commons-pool2-2.2.jar

commons-logging-1.1.jar

并将这3个jar包上传到Tomcat7中的 lib 目录

7、下载

https://github.com/ranjit/TomcatRedisClusterEnabledSessionManager/releases/download/1.0/TomcatRedisSessionManager-1.0.zip

（当前是1.0，如果出最新版，你们要同步更新到最新版）

解压后得到：TomcatRedisSessionManager-1.0.jar 和 redis.properties

将 TomcatRedisSessionManager-1.0.jar 上传到Tomcat7中的 lib 目录

8、添加Tomcat的环境变量 （可选）

catalina.home="/home/wusc/edu/web/boss-tomcat"

9、配置 redis.properties ， 集群中的IP:端口用都好隔开，打开Redis集群模式

# redis hosts ex: 127.0.0.1:6379, 127.0.0.2:6379, 127.0.0.2:6380, ....
redis.hosts=192.168.1.111:7111,192.168.1.112:7112,192.168.1.113:7113,192.168.1.114:7114,192.168.1.115:7115,192.168.1.116:7116
# Redis Password
redis.password=
# set true to enable redis cluster mode
redis.cluster.enabled=true

配置好之后把 redis.properties 上传到 Tomcat7的 conf目录



注意：此插件支持单节点的Redis，也支持Redis集群，只需要在redis.properties中配置则可。

如果是单节点：redis.hosts=改为一个，redis.cluster.enabled=false即可

原来的TomcatRedisSessionManager-1.0.jar中有redis.properties，和我们现在的是不一样的，建议直接将上面刚刚修改的redis.properties这个文件替换掉TomcatRedisSessionManager-1.0.jar里面的jar包

将TomcatRedisSessionManager-1.0.jar上传到Tomcat7中的lib目录中，注意：因为TomcatRedisClusterEnabledSessionManager项目大家在使用的过程中可能需要做一些自定义的修改工作，在本视频中将和大家讲解如何对项目源码修改后进行全新导打包。

就是在eclipse中import 项目TomcatRedisClusterEnabledSessionManager（git上下载的），然后做修改，修改后，通过export 选择jar，给jar命名为TomcatRedisSessionManager.jar

10、在Tomcat7中的 conf/context.xml 中增加如下两行配置：

//这两行的顺序不能改变
<Value className="com.r.tomcat.session.management.commons.SessionHandlerValue"/>
<Manager className="com.r.tomcat.session.management.redis.RedisSessionManager"/>

11、在Tomcat的conf/web.xml中核对确认Tomcat的Session超时时间，默认为30分钟。

<session-connfig>
	<session-timeout>30</session-timeout>
</session-config>

可按需修改。

12、重新启动tomcat集群，用vip访问，发现集群使用正常，不会再出现原来会话不同步的现象。

启动过程中如果有关于dubbomonitor的错误不用管

期间关闭tomcat1或者tomcat2，再重新启动等操作，对用户的操作没有任何影响。

这样就能够实现平常的平滑升级，先关掉一个升级，再启动，再关闭一个，再启动，用户通过keepalived的vip方式访问感觉不到后端的变化。