第一部分 Redis-HA 搭建

一、Redis-HA 拓扑

一主两从,主从复制,故障时主从切换

三个Redis节点 + Sentinel 节点

Master          127.0.0.1       6379

Slave1       127.0.0.1       6380

Slave2       127.0.0.1       6381

二、环境准备

1 操作系统

CentOS 6.5

2 相关软件

jdk8

Tomcat8

Redis-3.2.8.tar.gz (官网下载)

三、Redis 主从配置

1 将redis-3.2.8.tar.gz 版本,并上传到 Redis 部署服务器上

注:使用xftp 或者 winscp等软件,上传至/opt/softwareRes/ 目录下。

2 建Redis 安装目录

mkdir -p /opt/stools/redis/redis-3.2.8.master/

mkdir -p /opt/stools/redis/redis-3.2.8.slave-1/

mkdir -p /opt/stools/redis/redis-3.2.8.slave-2/

 

分别解压安装包到 Redis 安装目录

cd /opt/softwareRes/

tar zxvf redis-3.2.8.tar.gz -C /opt/stools/redis/redis-3.2.8.master/ --strip-components 1

tar zxvf redis-3.2.8.tar.gz -C /opt/stools/redis/redis-3.2.8.slave-1/ --strip-components 1

tar zxvf redis-3.2.8.tar.gz -C /opt/stools/redis/redis-3.2.8.slave-2/ --strip-components 1

3 分别进入 master、slave-1、slave-2 下的src 文件夹,安装及测试

以master为例

cd /opt/stools/redis/redis-3.2.8.master/src

make

make test

测试通过会提示:All tests passed without errors!

注:如果提示 you need tcl .. 可以使用 yum -y install tcl 进行安装。

注:之后再slave-1、slave-2 下的src分别执行安装测试。

4 配置

master 节点 redis.conf 配置内容(未涉及的保持不变)

# 绑定地址(可配置多个,内外网)

bind 17.13.11.10 127.0.0.1

# 服务端口

port 6379

# pid文件位置

pidfile /var/run/redis_6379.pid

# 日志文件位置

logfile "/data/logs/redis.master.log"

#

daemonize yes

# 保护模式

protected-mode no

#

masterauth "spads"

# 访问数据秘钥

requirepass "spads"

slave1 节点 redis.conf 配置内容(未涉及的保持不变)

# 绑定地址(可配置多个,内外网)

bind 17.13.11.10 127.0.0.1

# 服务端口

port 6380

# pid文件位置

pidfile /var/run/redis_6380.pid

# 日志文件位置

logfile "/data/logs/redis.master.log"

#

daemonize yes

# 保护模式

protected-mode no

#

masterauth "spads"

# 访问数据秘钥

requirepass "spads"

# 从

slaveof 17.13.11.10 6379

 

slave2 节点 redis.conf 配置内容(未涉及的保持不变)

# 绑定地址(可配置多个,内外网)

bind 17.13.11.10 127.0.0.1

# 服务端口

port 6381

# pid文件位置

pidfile /var/run/redis_6381.pid

# 日志文件位置

logfile "/data/logs/redis.master.log"

#

daemonize yes

# 保护模式

protected-mode no

#

masterauth "spads"

# 访问数据秘钥

requirepass "spads"

# 从

slaveof 17.13.11.10 6379

5启动

cd /opt/stools/redis/redis-3.2.8.master/

./src/redis-server redis.conf

 

cd /opt/stools/redis/redis-3.2.8.slave-1/

./src/redis-server redis.conf

 

cd /opt/stools/redis/redis-3.2.8.slave-2/

./src/redis-server redis.conf

6 测试

(1)测试主从同步:

使用客户端连接主节点,添加key-value, 使用客户端连接从节点,按key取value

redis-cli -h 17.13.11.10 -p 6379 -a spads

set name zzz

exit

 

redis-cli -h 17.13.11.10 -p 6380 -a spads

get name

# 检验是否可以取出 “zzz”

 

(2)测试从节点不可写:

redis-cli -h 17.13.11.10 -p 6380 -a spads

set name xxx 

#检验是否提示如下内容

(error) READONLY You can't write against a read only slave.

四、Sentinel 配置

1 配置

cd /opt/stools/redis/redis-3.2.8.master/

sentinel.conf 配置文件

--------------------------------------

sentinel monitor mymaster 17.13.11.10 6379 1

# 定义监控的Redis 主节点

# mymaster 为自定义的主节点名称,需保证与之后的配置一致 

# 17.13.11.10 为主节点IP地址

# 6379  为主节点服务端口

# 1  为 sentinel 节点数量(quorum )。。。

--------------------------------------

sentinel down-after-milliseconds mymaster 60000

# 表示当master redis 60s 没有应答时,就可以断定master挂掉了,但需要结合上面配置的quorum一起

--------------------------------------

sentinel auth-pass mymaster spads

# 设置主节点的秘钥

--------------------------------------

sentinel config-epoch mymaster 9

# 选项指定了在执行故障转移时, 最多可以有多少个从服务器同时对新的主服务器进行同步, 这个数字越小, 完成故障转移所需的时间就越长

--------------------------------------

2 启动

cd /opt/stools/redis/redis-3.2.8.master/

./src/redis-server sentinel.conf --sentinel & 

3 测试

可以在几个节点都启动情况下,杀掉主节点服务,检验是否更换主节点并生效提供服务。

第二部分 Tomcat 集群下 Session 共享

Nginx + 2 * Tomcat 环境下 的Session 共享。此处直接在Tomcat 中配置 Redis Session存储。

1 各节点Tomcat lib 下增加如下库

commons-pool2-2.3.jar、jedis-2.7.2.jar、redissessionjar.jar、tomcat-juli-8.5.13.jar、commons-logging-1.1.3.jar

其中 redissessionjar.jar

出处 https://github.com/jcoleman/tomcat-redis-session-manager

需下载到本地,然后构建,并修改其中  RedisSessionManager.java 代码。

步骤    1> github 下载 tomcat-redis-session-manager 项目

2> eclipse 创建maven工程,并将 src/main/java/com/orangefunction/tomcat/redissessions/ 拷贝到工程。

3> 增加依赖包

Tomcat8 下面的所有lib (检查是否存在 tomcat-juli-8.5.13.jar,没有需单独下载)/ jedis-2.7.2.jar / commons-pool2-2.3.jar / commons-logging-1.1.3.jar

4> 修改 RedisSessionManager.java

Redis3.x HA 方案(基于 Sentinel 方式)-LMLPHP

        5>右键工程 export 导出jar包

2 各节点Tomcat 在 conf 下 context.xml,增加如下内容

<Valve className="com.orangefunction.tomcat.redissessions.RedisSessionHandlerValve" />

<Manager className="com.orangefunction.tomcat.redissessions.RedisSessionManager"

        <!-- host="17.13.11.10" -->

        <!-- port="6378" -->

        database="0"

        password="spads"

        maxInactiveInterval="60"

        sentinelMaster="mymaster"

        sentinels="17.13.11.10:26379"

/>

第三部分 JedisSentinelPool 客户端连接 Redis - HA

jedis.xml 文件配置

<bean id="jedisPoolConfig" class="redis.clients.jedis.JedisPoolConfig">

<property name="maxTotal" value="30" />

<property name="maxIdle" value="30" />

<property name="maxWaitMillis" value="30000" />

<property name="testOnBorrow" value="false" />

<property name="testOnReturn" value="true" />

</bean>

 

<bean id="jedisSentinelPool" class="redis.clients.jedis.JedisSentinelPool">

<constructor-arg index="0" value="mymaster" />

<constructor-arg index="1">

<set>

<value>17.13.11.10:26379</value>

</set>

</constructor-arg>

<constructor-arg index="2" ref="jedisPoolConfig" />

<constructor-arg index="3" value="20000" />

<constructor-arg index="4" value="spads" />

</bean>

java 程序中可以通过 resource 注解,获取到 jedisSentinel实例进行缓存操作。

05-28 23:37