砥砺前行技术经验

Linux 安装redis 及 集群搭建

安装包下载地址：

https://redis.io/

https://sourceforge.net/projects/tcl/files/Tcl/

一、安装

# tar -zxvf tcl8.6.11-src.tar.gz

# cd tcl8.6.11/unix/

# ./configure

# make && make install

# tar -zxvf redis-5.0.13.tar.gz

# cd redis-5.0.13

# make

(64位服务器采用以下命令)

#make MALLOC=libc

redis 6 问题处理(# 查看gcc版本是否在5.3以上，centos7.6默认安装4.8.5
gcc -v
# 升级gcc到5.3及以上,如下：
升级到gcc 9.3：
yum -y install centos-release-scl
yum -y install devtoolset-9-gcc devtoolset-9-gcc-c++ devtoolset-9-binutils
scl enable devtoolset-9 bash
需要注意的是scl命令启用只是临时的，退出shell或重启就会恢复原系统gcc版本。
如果要长期使用gcc 9.3的话：
echo "source /opt/rh/devtoolset-9/enable" >>/etc/profile
这样退出shell重新打开就是新版的gcc了)

# make install

# cp redis.conf /etc/

# echo vm.overcommit_memory=1 >> /etc/sysctl.conf

# sysctl vm.overcommit_memory=1

# vi /etc/redis.conf

daemonize yes

stop-writes-on-bgsave-error no

（启动）

# /usr/local/bin/redis-server /etc/redis.conf

（关闭）

# /usr/local/bin/redis-cli -a password -p 6379 shutdown

二、自动启动脚本

方式一：

chmod +x /etc/rc.d/rc.local

echo '/usr/local/bin/redis-server /etc/redis.conf' >> /etc/rc.d/rc.local

方式二：

#!/bin/bash
# chkconfig: 2345 10 90
# description: Start and Stop redis
#
PATH=/usr/local/bin:/sbin:/usr/bin:/bin
REDISPORT=6379
EXEC=/usr/local/bin/redis-server
REDIS_CLI=/usr/local/bin/redis-cli
PIDFILE=/var/run/redis_6379.pid
CONF="/etc/redis.conf"
AUTH="1234"
case "$1" in
start)
if [ -f $PIDFILE ]
then
echo "$PIDFILE exists, process is already running or crashed."
else
echo "Starting Redis server..."
$EXEC $CONF  &
fi
if [ "$?"="0" ]
then
echo "Redis is running..."
fi
;;
stop)
if [ ! -f $PIDFILE ]
then
echo "$PIDFILE exists, process is not running."
else
PID=$(cat $PIDFILE)
echo "Stopping..."
$REDIS_CLI -p $REDISPORT  SHUTDOWN
sleep 2
while [ -x $PIDFILE ]
do
echo "Waiting for Redis to shutdown..."
sleep 1
done
echo "Redis stopped"
fi
;;
restart|force-reload)
${0} stop
${0} start
;;
*)
echo "Usage: /etc/init.d/redis {start|stop|restart|force-reload}" >&2
exit 1
esac

三、集群搭建配置

创建 Redis 节点

首先在 192.168.1.8 机器上 /usr/local/redis-3.2.6 目录下创建 redis_cluster 目录

$ mkdir /usr/local/redis-3.2.6/redis_cluster

在 redis_cluster 目录下，创建名为7000、7001、7002的目录，并将 redis.conf 拷贝到这三个目录中

  1. $ mkdir 7000 7001 7002
  2. $ cp /usr/local/redis-3.2.6/redis.conf /usr/local/redis-3.2.6/redis_cluster/7000
  3. $ cp /usr/local/redis-3.2.6/redis.conf /usr/local/redis-3.2.6/redis_cluster/7001
  4. $ cp /usr/local/redis-3.2.6/redis.conf /usr/local/redis-3.2.6/redis_cluster/7002

分别修改这三个配置文件，修改如下内容

  1. port                  7000                        //端口7000,7002,7003
  2. bind                  本机ip                      //默认ip为127.0.0.1，需要改为其他节点机器可访问的ip，否则创建集群时无法访问对应的端口，无法创建集群
  3. daemonize             yes                         //redis后台运行
  4. pidfile               /var/run/redis_7000.pid     //pidfile文件对应7000，7001，7002
  5. cluster-enabled       yes                         //开启集群，把注释#去掉
  6. cluster-config-file   nodes_7000.conf             //集群的配置，配置文件首次启动自动生成 7000，7001，7002
  7. cluster-node-timeout  15000                       //请求超时，默认15秒，可自行设置
  8. appendonly            yes                         //aof日志开启，有需要就开启，它会每次写操作都记录一条日志

接着在另外两台机器上(192.168.1.9、192.168.1.10)重复以上三步，只是把目录改为7003、7004、7005、7006、7007、7008对应的配置文件也按照这个规则修改即可

启动各个节点

  1. ##第一台机器上执行
  2. $ /usr/local/redis-3.2.6/src/redis-server /usr/local/redis-3.2.6/redis_cluster/7000/redis.conf
  3. $ /usr/local/redis-3.2.6/src/redis-server /usr/local/redis-3.2.6/redis_cluster/7001/redis.conf
  4. $ /usr/local/redis-3.2.6/src/redis-server /usr/local/redis-3.2.6/redis_cluster/7002/redis.conf
  6. ##第二台机器上执行
  7. $ /usr/local/redis-3.2.6/src/redis-server /usr/local/redis-3.2.6/redis_cluster/7003/redis.conf
  8. $ /usr/local/redis-3.2.6/src/redis-server /usr/local/redis-3.2.6/redis_cluster/7004/redis.conf
  9. $ /usr/local/redis-3.2.6/src/redis-server /usr/local/redis-3.2.6/redis_cluster/7005/redis.conf
  11. ##第三台机器上执行
  12. $ /usr/local/redis-3.2.6/src/redis-server /usr/local/redis-3.2.6/redis_cluster/7006/redis.conf
  13. $ /usr/local/redis-3.2.6/src/redis-server /usr/local/redis-3.2.6/redis_cluster/7007/redis.conf
  14. $ /usr/local/redis-3.2.6/src/redis-server /usr/local/redis-3.2.6/redis_cluster/7008/redis.conf

检查各 Redis 启动情况

  1. ##第一台机器
  2. $ ps -ef | grep redis           //redis是否启动成功
  3. $ netstat -tnlp | grep redis    //监听redis端口

注：确保每个节点没有配置错误，并且启动起来

关闭防火墙

  1. $ firewall-cmd --state  ##查看防火墙状态
  2. running

running 说明防火墙是打开状态

  1. $ systemctl stop firewalld  ##关闭防火墙
  2. $ firewall-cmd --state
  3. not running

注: CentOS 7 关闭防火墙与 CentOS 6 有所不同

安装 Ruby

  1. $ yum -y install ruby ruby-devel rubygems rpm-build
  2. $ gem install redis

注:创建集群时需要安装 Ruby 运行redis-trib.rb

创建集群

Redis 官方提供了 redis-trib.rb 这个工具，就在解压目录的 src 目录中

  1. $ /usr/local/redis-3.2.6/src/redis-trib.rb create --replicas 1 192.168.1.8:7000 192.168.1.8:7001 192.168.1.8:7002 192.168.1.9:7006 192.168.1.9:7004 192.168.1.9:7005 192.168.1.10:7006 192.168.1.10:7007 192.168.1.10:7008

其中，前三个 ip:port 为第一台机器的节点，中间三个为第二台机器，最后三个为第三台机器

结果1

输入 yes，然后出现如下内容，说明安装成功

结果2

集群验证

在第一台机器上连接集群的7000节点，在另外一台连接7004节点，连接方式为：

  1. ##加参数 -C 可连接到集群，因为 redis.conf 将 bind 改为了ip地址，所以 -h 参数不可以省略，-p 参数为端口号
  2. $ /usr/local/redis-3.2.6/src/redis-cli -h 192.168.1.8 -c -p 7000

在7004节点执行命令：

  1. 192.168.1.8:7000> get name

结果3

然后在另两台7000、7007端口，查看 key 为 name 的内容

  1. 192.168.1.8:7000> get name

结果4

  1. 192.168.1.10:7007> get name

结果5

说明集群运作正常

总结

redis cluster在设计的时候，就考虑到了去中心化、去中间件，也就是说，集群中的每个节点都是平等关系，都是对等的，每个节点都保存各自的数据和整个集群的状态。每个节点都和其他所有节点连接，而且这些连接保持活跃，这样就保证了我们只需要连接集群中的任意一个节点，就可以获取到其他节点的数据。

Redis 集群没有并使用传统的一致性哈希来分配数据，而是采用另外一种叫做哈希槽 (hash slot)的方式来分配的。redis cluster 默认分配了 16384 个 slot，当我们 set 一个 key 时，会用CRC16算法来取模得到所属的 slot，然后将这个 key 分到哈希槽区间的节点上，具体算法就是：CRC16(key) % 16384。所以我们在测试的时候看到 set 和 get 的时候，直接跳转到了7000端口的节点。

Redis 集群会把数据存在一个 master 节点，然后在这个 master 和其对应的 salve 之间进行数据同步。当读取数据时，也根据一致性哈希算法到对应的 master 节点获取数据。只有当一个 master 挂掉之后，才会启动一个对应的 salve 节点，充当 master 。

需要注意的是：必须要3个或以上的主节点，否则在创建集群时会失败，并且当存活的主节点数小于总节点数的一半时，整个集群就无法提供服务了。

sys