Redis 切片集群(Cluster)

之前我们学习了哨兵机制,保证了主从切换的高可用,但当我们的redis数据越来越大时,这个时候我们需要对redis进行扩容,本章介绍 Redis官方的 Cluster方案。

扩容方案:

  1. 纵向扩容:升级单个 Redis实例。增加内存、磁盘容量、升级cpu等。
  2. 横向扩容:增加 Redis 实例的个数。

image

纵向扩容的好处:实施起来、简单方便。

问题:
1、当使用 RDB 对数据做持久化的时候,如果内存太大,主线程 fork 子进程的时候就有可能会堵塞。
2、纵向扩展会受到硬件和成本的限制。

哈希槽

Redis采用 hash slot来处理数据和实例之前的关系,Redis的 cluster中,一共有 16384 个哈希槽,每个键会根据它的key,被映射到一个哈希槽中。

命令:
1、使用 cluster create 创建集群,redis会自动把这些槽分配在不同的redis 实例上。

2、手动分配redis cluster槽存在哪些实例上。

redis-cli -h 172.16.19.3 –p 6379 cluster addslots 0,1
redis-cli -h 172.16.19.4 –p 6379 cluster addslots 2,3
redis-cli -h 172.16.19.5 –p 6379 cluster addslots 4

image

注意:在手动分配哈希槽时,需要把 16384 个槽都分配完,否则 Redis 集群无法正常工作。

客户端如何定位数据?

redis实例会把自己的哈希槽发送给与它连接的其他实例,这样每个实例都会有所有的 哈希槽的映射信息了。

客户端收到哈希槽信息后,把会哈希槽缓存到本地,当客户端在访问数据时,会根据 key 计算所在的哈希槽,然后就可以给相应的实例发送请求了。

问题:

  1. 在集群中,实例有新增的数据或者删除的数据,Redis需要重新分配哈希槽。
  2. 为了负载均衡,Redis需要把哈希槽中的所有实例重新分布一遍。

这个时候,redis 各个实例还可以相互通信来获取最新的hash槽映射信息,但是客户端是不知道的。

重定向机制 move

重定向指:当客户端发送请求时,这个实例上并没有相应的数据,客户端会重新发送一个请求给新的实例。

如:客户端访问 hello:key,这个时候相应的实例上没有对应的数据,那个这个时候实例会返回一个 move 命令,这个命令结果中就包含了新的实例连接信息,然后更新本地槽缓存,在请求一次move返回实例的信息,就得到了结果。

GET hello:key
(error) MOVED 13320 172.16.19.5:6379

image

数据正在迁移的过程中 ASK 命令

如:当 slot2 的数据正在往 实例3 中迁移过程中,这个时候,如果客户端访问数据,还是会访问到实例2中,这个时候,实例2会返回 ASK 结果。

这个结果中的 ASK 命令就表示,客户端请求的键值对所在的哈希槽 13320,在实例3上,但是这个哈希槽正在迁移。此时,客户端需要先给 实例3发送一个 ASKING 命令。这个命令的意思是,让这个实例允许执行客户端接下来发送的命令。然后,客户端再向这个实例发送 GET 命令,以读取数据

GET hello:key
(error) ASK 13320 172.16.19.5:6379

image

和 MOVED 命令不同,ASK 命令并不会更新客户端缓存的哈希槽分配信息。

评论

暂无评论