侧边栏壁纸
  • 累计撰写 98 篇文章
  • 累计创建 20 个标签
  • 累计收到 3 条评论

Linux(cenos 7)redis集群搭建

林贤钦
2020-05-31 / 0 评论 / 13 点赞 / 632 阅读 / 0 字
温馨提示:
本文最后更新于 2020-06-01,若内容或图片失效,请留言反馈。部分素材来自网络,若不小心影响到您的利益,请联系我们删除。

Linux(cenos 7) redis集群搭建

1、简要说明

集群就是使用网络将若干台计算机联通起来,并提供统一的管理方式,使其对外呈现单机的服务效果

集群作用

  • 分散单台服务器的访问压力,实现负载均衡
  • 分散单台服务器的存储压力,实现可扩展性
  • 降低单台服务器宕机带来的业务灾难

数据存储设计

  • 通过算法设计,计算出key应该保存的位置

  • 将所有的存储空间计划切割成16384份,每台主机保存一部分

    每份代表的是一个存储空间,不是一个key的保存空间

  • 将key按照计算出的结果放到对应的存储空间

key--->CRC16(key) --->%16384

可以查看Redis官网查看集群搭建方式,连接如下

https://redis.io/topics/cluster-tutorial

集群中应该至少有三个节点,每个节点有一备份节点。需要6台服务器。

如果条件有限,可以搭建伪分布式,以下步骤是在一台 Linux 服务器上搭建有6个节点的 Redis集群。

2、创建集群步骤

2.1、安装gcc

yum install gcc

2.1、创建目录

​ 新建目录:mkdir /usr/local/redis-cluster

2.2、下载源码并解压编译

下载地址:http://redis.io/download

wget http://download.redis.io/releases/redis-5.0.0.tar.gz
tar xzf redis-5.0.0.tar.gz
cd redis-5.0.0
make
make install PREFIX=/usr/local/redis

3、创建6个Redis配置文件

6个配置文件不能在同一个目录,此处我们定义如下:

/root/software/redis/redis-cluster-conf/7001/redis.conf
/root/software/redis/redis-cluster-conf/7002/redis.conf
/root/software/redis/redis-cluster-conf/7003/redis.conf
/root/software/redis/redis-cluster-conf/7004/redis.conf
/root/software/redis/redis-cluster-conf/7005/redis.conf
/root/software/redis/redis-cluster-conf/7006/redis.conf

一些操作命令仅供参考:

cp redis.conf /usr/local/redis/bin
cd /usr/local/redis/
cp -r bin ../redis-cluster/redis01
cd /usr/local/redis-cluster/redis01
rm dump.rdb #删除快照
vim redis.conf 

配置文件的内容为:

daemonize yes
port 7001
timeout 300
loglevel debug
logfile 7001.log
databases 16
save 900 1
save 300 10
save 60 10000
rdbcompression yes
dbfilename 7001-dump.rdb
appendonly no
appendfsync everysec
appendfilename appendonly-7001.aof
cluster-enabled yes 
cluster-config-file nodes_7001.conf 
cluster-node-timeout 15000 
bind 0.0.0.0

创建剩余5个实例:

[root@master redis-cluster]# cp -r redis01/ redis02
[root@master redis-cluster]# cp -r redis01/ redis03
[root@master redis-cluster]# cp -r redis01/ redis04
[root@master redis-cluster]# cp -r redis01/ redis05
[root@master redis-cluster]# cp -r redis01/ redis06

4、启动节点

分别进入redis01、redis02、...redis06目录,执行: ./redis-server ./redis.conf

创建一个批处理文件,同时启动着六个Redis

vim startall.sh

添加如下内容:

cd redis01
./redis-server redis.conf
cd ..
cd redis02
./redis-server redis.conf
cd ..
cd redis03
./redis-server redis.conf
cd ..
cd redis04
./redis-server redis.conf
cd ..
cd redis05
./redis-server redis.conf
cd ..
cd redis06
./redis-server redis.conf
cd ..

然后执行chmod u+x start-all.shstart-all.sh变成可执行文件

在当前目录下启动: ./startall.sh

查看:ps aux|grep redis 或者 ps -ef | grep redis

5、启动集群

因为我们使用的5.0.0的版本的Redis搭建的集群只需要把编译后的redis目录中的这个redis-cli文件拷贝到redis-cluster目录过来即可。(Redis版本5.0以后都是用C语言直接启动)

建立软引用

ln -s /usr/local/redis/bin/redis-cli /usr/local/redis-cluster/redis-cli

或者直接下面这样启动

/usr/local/redis/bin/redis-cli --cluster create 192.168.235.135:7001 192.168.235.135:7002 192.168.235.135:7003 192.168.235.135:7004 192.168.235.135:7005 192.168.235.135:7006 --cluster-replicas 1

启动后,可看到成功信息,如下:

>>> Performing hash slots allocation on 6 nodes...
Master[0] -> Slots 0 - 5460
Master[1] -> Slots 5461 - 10922
Master[2] -> Slots 10923 - 16383
Adding replica 192.168.235.135:7005 to 192.168.235.135:7001
Adding replica 192.168.235.135:7006 to 192.168.235.135:7002
Adding replica 192.168.235.135:7004 to 192.168.235.135:7003
>>> Trying to optimize slaves allocation for anti-affinity
[WARNING] Some slaves are in the same host as their master
M: f7a97fe1f9b7d1943d80433c59d1549573adb344 192.168.235.135:7001
   slots:[0-5460] (5461 slots) master
M: ae5f16dc4d3a54013531fd891209dc80c04faa1b 192.168.235.135:7002
   slots:[5461-10922] (5462 slots) master
M: d5bd0dcc5bb057fc787f49df5a4077f5b327f3c4 192.168.235.135:7003
   slots:[10923-16383] (5461 slots) master
S: 09dce06dc53ab3634340b142a304fa943e2f0c92 192.168.235.135:7004
   replicates f7a97fe1f9b7d1943d80433c59d1549573adb344
S: 43a698b394eb7836f63ed1999e65ee3cb2e539d7 192.168.235.135:7005
   replicates ae5f16dc4d3a54013531fd891209dc80c04faa1b
S: f020dee508313b38d7611f24112c16145f8469d1 192.168.235.135:7006
   replicates d5bd0dcc5bb057fc787f49df5a4077f5b327f3c4
Can I set the above configuration? (type 'yes' to accept): yes

输入yes回车

>>> Nodes configuration updated
>>> Assign a different config epoch to each node
>>> Sending CLUSTER MEET messages to join the cluster
Waiting for the cluster to join
...
>>> Performing Cluster Check (using node 192.168.235.135:7001)
M: f7a97fe1f9b7d1943d80433c59d1549573adb344 192.168.235.135:7001
   slots:[0-5460] (5461 slots) master
   1 additional replica(s)
M: d5bd0dcc5bb057fc787f49df5a4077f5b327f3c4 192.168.235.135:7003
   slots:[10923-16383] (5461 slots) master
   1 additional replica(s)
S: f020dee508313b38d7611f24112c16145f8469d1 192.168.235.135:7006
   slots: (0 slots) slave
   replicates d5bd0dcc5bb057fc787f49df5a4077f5b327f3c4
S: 43a698b394eb7836f63ed1999e65ee3cb2e539d7 192.168.235.135:7005
   slots: (0 slots) slave
   replicates ae5f16dc4d3a54013531fd891209dc80c04faa1b
M: ae5f16dc4d3a54013531fd891209dc80c04faa1b 192.168.235.135:7002
   slots:[5461-10922] (5462 slots) master
   1 additional replica(s)
S: 09dce06dc53ab3634340b142a304fa943e2f0c92 192.168.235.135:7004
   slots: (0 slots) slave
   replicates f7a97fe1f9b7d1943d80433c59d1549573adb344

至此,Reids5 集群搭建完成。

6、集群的操作

6.1、关闭集群

方法一:

redis5 提供了关闭集群的工具,在如下目录:

/root/redis-5.0.0/utils/create-cluster

打开此文件修改端口为我们自己的,如下所示:

端口PROT设置为7000,NODES为6,工具会自动累加1 生成 7001-7006 六个节点 用于操作。

往下看再修改路径 和 添加 ip地址,如果不加会默认本地127.0.0.1

修改后,执行如下命令关闭集群:

/root/redis-5.0.0/utils/create-cluster/create-cluster stop

方法二:

create-cluster目录下编写脚本文件:vim shutdown.sh
内容如下:

/usr/local/redis/bin/redis-cli -c -h 192.168.235.135 -p 7001 shutdown
/usr/local/redis/bin/redis-cli -c -h 192.168.235.135 -p 7002 shutdown
/usr/local/redis/bin/redis-cli -c -h 192.168.235.135 -p 7003 shutdown
/usr/local/redis/bin/redis-cli -c -h 192.168.235.135 -p 7004 shutdown
/usr/local/redis/bin/redis-cli -c -h 192.168.235.135 -p 7005 shutdown
/usr/local/redis/bin/redis-cli -c -h 192.168.235.135 -p 7006 shutdown

然后执行chmod u+x shutdown.shshutdown.sh变成可执行文件

在当前目录下启动:./shutdown.sh

查看:ps aux|grep redis或者 ps -ef | grep redis

官方:/usr/local/redis-cluster/redis-cli -a xxx -c -h 192.168.5.100 -p 8001

提示:-a访问服务端密码,-c表示集群模式,-h指定ip地址,-p指定端口号

6.2、重新启动集群

/root/redis-5.0.0/utils/create-cluster/create-cluster start

6.3、使用脚本文件启动集群

vim startall.sh 追加如下内容:(记得改自己ip地址)

/usr/local/redis-cluster/redis-cli --cluster create 172.20.10.7:7001 172.20.10.7:7002 172.20.10.7:7003 172.20.10.7:7004 172.20.10.7:7005 172.20.10.7:7006 --cluster-replicas 

启动:./startall.sh

7、测试集群

redis-cluster目录下执行

redis01/redis-cli -h 192.168.25.153 -p 7002 -c

其中-c表示以集群方式连接redis,-h指定ip地址,-p指定端口号

cluster nodes 查询集群结点信息

cluster info 查询集群状态信息

13

评论区