1. 先搞清楚Redis集群到底在解决什么问题如果你在Java项目里用过Redis不管是做缓存、会话存储还是分布式锁迟早会遇到单节点Redis的瓶颈。单节点的问题很直接内存不够用、吞吐量上不去、机器挂了服务就全停。这时候你就得考虑集群。Redis集群不是一种固定模式而是根据你的业务压力、数据规模和运维成本有三种主流部署方案主从复制Replication、哨兵模式Sentinel和集群模式Cluster。很多人学的时候容易搞混觉得选一个“最好”的就行但实际落地时选错了模式后期扩容、故障恢复会非常麻烦。这篇文章不讲八股文直接从Java开发者视角拆解这三种模式分别适合什么场景、怎么搭、关键参数怎么配以及生产环境里最容易踩的坑。我会假设你已经知道Redis单机怎么用重点放在集群的差异和选择上。2. 主从复制读写分离与数据备份的基础主从复制是Redis集群里最基础、也最应该先理解的一种模式。它的核心就是“一主多从”一个主节点Master负责处理写请求数据会异步复制到一个或多个从节点Slave。从节点主要用来分担读请求并提供数据冗余。2.1 主从复制解决了什么实际问题对于Java应用来说主从模式主要解决两个问题读压力大如果你的应用读请求远多于写请求比如商品详情页缓存单节点Redis的CPU和网络带宽可能成为瓶颈。通过主从可以把读流量分散到多个从节点上。数据安全与高可用雏形主节点的数据会自动同步到从节点。万一主节点磁盘损坏你至少还有一个从节点保存着几乎实时的数据副本不至于全丢。虽然它不解决主节点自动故障转移那是哨兵的事但为高可用打下了基础。2.2 快速搭建一个主从环境假设你已经在两台服务器或两个Docker容器上装好了Redis端口分别是6379主和6380从。我们不用配置文件先用命令行快速验证原理。在主节点6379上不需要特殊配置正常启动即可。在从节点6380上启动Redis服务后使用Redis客户端执行命令# 连接到从节点的Redis redis-cli -p 6380 # 在从节点执行将其设置为6379的从节点 SLAVEOF 127.0.0.1 6379执行完从节点会清空自身旧数据开始从主节点全量同步RDB然后进入增量同步状态。验证主从在主节点写数据SET mykey “hello-master”在从节点读数据GET mykey应该能立刻读到“hello-master”。2.3 Java客户端如何配置读写分离这是关键。在Java代码里以Spring Boot Lettuce为例你不能只连一个地址。你需要配置多个节点地址并告诉客户端哪些是主哪些是从。一个常见的错误是在application.yml里只写一个从节点地址然后期望它自动从主节点同步数据并接受写操作。这是不对的写操作必须发往主节点。更稳妥的配置方式是使用 Lettuce 的读写分离配置spring: redis: lettuce: pool: max-active: 8 cluster: # 注意这里不是cluster模式只是用lettuce的配置项 nodes: - 你的主节点IP:6379 - 你的从节点IP:6380 # 或者使用单节点配置然后通过代码配置读写分离更灵活实际上对于简单主从更常见的做法是不依赖客户端的自动读写分离而是在业务代码层做区分所有写操作和强一致性读走主节点连接非强一致性读走从节点连接池。或者使用像Redisson这样的客户端它内置了对读写分离的支持。核心经验主从模式搭建简单但它不提供自动故障转移。如果主节点挂了你需要手动执行SLAVEOF no one将一个从节点提升为主节点并修改所有客户端配置指向新的主节点。这个过程会导致服务不可用。所以它适合对可用性要求不是极高但需要扩展读能力的场景。3. 哨兵模式为主从加上自动故障转移主从模式的手动故障切换太麻烦不适合生产。哨兵模式Sentinel就是在主从复制的基础上增加了一套“监控和自动故障转移”的系统。3.1 哨兵是做什么的你可以把哨兵理解为一组独立的、不存储数据的Redis进程。它们的主要工作就三件事监控Monitoring持续检查主节点和从节点是否正常运行。通知Notification当被监控的Redis实例出现问题时可以通过API通知系统管理员或其他程序。自动故障转移Automatic failover如果主节点被判定为下线客观下线哨兵会协商选举出一个领头哨兵由它负责将一个从节点升级为新的主节点并让其他从节点复制新的主节点同时通知客户端更新主节点地址。3.2 搭建一个最小哨兵集群一个高可用的哨兵部署至少需要3个哨兵实例防止自身脑裂。我们假设有一个主6379、一个从6380、三个哨兵26379, 26380, 26381。第一步配置主从。和上一节一样先搭建好主从复制。第二步配置哨兵。每个哨兵一个配置文件例如sentinel-26379.confport 26379 sentinel monitor mymaster 127.0.0.1 6379 2 sentinel down-after-milliseconds mymaster 5000 sentinel failover-timeout mymaster 60000 sentinel parallel-syncs mymaster 1关键参数解释sentinel monitor mymaster 127.0.0.1 6379 2监控名为mymaster的主节点127.0.0.1:6379。2是法定人数quorum表示至少需要2个哨兵同意才能判定主节点“客观下线”。sentinel down-after-milliseconds mymaster 5000连续5秒5000毫秒无法与主节点通信哨兵主观认为其下线。sentinel failover-timeout mymaster 60000故障转移超时时间60秒。第三步启动哨兵。redis-sentinel sentinel-26379.conf redis-sentinel sentinel-26380.conf redis-sentinel sentinel-26381.conf3.3 Java客户端如何连接哨兵这是和主从模式最大的不同。客户端不再直接连接Redis主节点而是连接哨兵集群从哨兵那里询问当前的主节点地址。以Spring Boot配置为例spring: redis: sentinel: master: mymaster # 哨兵监控的主节点名称 nodes: # 哨兵节点地址列表 - 你的哨兵1IP:26379 - 你的哨兵2IP:26380 - 你的哨兵3IP:26381 lettuce: pool: max-active: 8配置好后你的RedisTemplate或StringRedisTemplate在发起请求时会先通过哨兵节点列表查询到当前有效的主节点地址然后进行连接和操作。当故障转移发生时哨兵会通知客户端客户端需要支持重新连接客户端会自动切换到新的主节点。避坑点哨兵数量生产环境至少3个且部署在不同物理机或虚拟机防止单个机器故障导致哨兵集群本身失效。down-after-milliseconds这个值需要根据你的网络状况调整。设得太短网络抖动可能导致误判设得太长故障发现慢。客户端兼容性确保你使用的Redis客户端如Jedis, Lettuce, Redisson版本支持哨兵协议并能正确处理SWITCH-MASTER消息。哨兵模式解决了高可用问题但没有解决数据分片Sharding的问题。单个主节点的内存容量和写吞吐量仍然是上限。当你的数据量超过单机内存或者写并发超过单机能力时就需要集群模式Cluster。4. 集群模式数据分片与高可用的终极方案Redis Cluster是Redis官方提供的分布式解决方案它同时实现了数据分片和高可用。你可以把它理解成由多个主从小组每个小组是一个分片组成的一个大集群。4.1 数据如何分布——哈希槽Hash Slot这是Cluster的核心概念。Redis Cluster把整个数据集划分为16384个槽slot。每个键key通过CRC16算法计算出一个值然后对这个值取模16384决定它属于哪个槽。 集群中的每个主节点负责处理一部分哈希槽。例如一个3主节点的集群槽分配可能是节点A0 - 5500节点B5501 - 11000节点C11001 - 16383客户端请求一个key时会直接或重定向到负责该槽的节点上处理。4.2 搭建一个三主三从的集群Redis提供了redis-cli --cluster工具来简化搭建。假设我们有6个节点3主7001-70033从7004-7006。第一步准备配置文件。每个节点一个配置文件关键配置如下port 7001 cluster-enabled yes cluster-config-file nodes-7001.conf cluster-node-timeout 5000 appendonly yescluster-enabled yes是开启集群模式的关键。第二步启动所有节点。第三步使用命令行创建集群。redis-cli --cluster create \ 127.0.0.1:7001 127.0.0.1:7002 127.0.0.1:7003 \ 127.0.0.1:7004 127.0.0.1:7005 127.0.0.1:7006 \ --cluster-replicas 1--cluster-replicas 1表示每个主节点配1个从节点。工具会自动分配主从关系。4.3 Java客户端连接集群配置变得非常简单只需要列出集群中任意一个或多个节点的地址即可。客户端启动时会通过其中一个节点获取完整的集群拓扑信息。Spring Boot配置示例spring: redis: cluster: nodes: - 你的节点1IP:7001 - 你的节点2IP:7002 - 你的节点3IP:7003 max-redirects: 3 # 最大重定向次数 lettuce: cluster: refresh: adaptive: true # 自适应刷新拓扑建议开启 timeout: 20004.4 集群模式的边界与坑点Cluster功能强大但限制和使用成本也更高Key必须在一个节点上所有针对多个Key的操作如MGET, MSET要求这些Key必须在同一个哈希槽。除非使用Hash Tag即用{}将key的一部分括起来集群只会对{}内的内容计算槽。例如user:{1000}:profile和user:{1000}:orders会被分配到同一个槽。事务支持受限同理事务MULTI/EXEC中的所有命令也必须落在同一个节点上。Lua脚本脚本中涉及的所有Key也必须属于同一个槽。管理复杂度节点增删、槽位迁移需要使用redis-cli --cluster命令比哨兵模式复杂。客户端要求必须使用支持Cluster协议的客户端。老版本的Jedis可能需要额外配置。什么时候用Cluster当你的数据量预计会超过单机内存比如几十GB或者写吞吐量要求非常高时。对于绝大多数中小型项目在数据量达到几十GB之前哨兵模式已经足够。5. 三种模式对比与生产环境选择指南光知道怎么搭还不够关键是要知道怎么选。下面这个表格从Java应用开发者的核心关注点来对比特性主从复制 (Replication)哨兵模式 (Sentinel)集群模式 (Cluster)核心目标数据备份、读写分离高可用、自动故障转移数据分片、高可用、水平扩展数据分布全量复制所有节点数据相同全量复制所有节点数据相同数据分片到多个主节点写能力扩展否单主瓶颈否单主瓶颈是多主节点读能力扩展是多从节点是多从节点是每个分片主从都可读自动故障转移否需手动是是客户端复杂度较低需自行处理读写分离或故障切换中连接哨兵自动发现主节点中支持集群协议自动路由适用数据量单机内存以内单机内存以内远超单机内存典型应用场景读多写少容灾备份对可用性有要求的缓存、Session存储大数据量缓存、全局计数器、高并发写场景生产环境选择建议学习、开发测试环境用主从复制就够了简单直观。中小型生产系统数据量32GBQPS5万优先选择哨兵模式。它在高可用和复杂度之间取得了很好的平衡。大多数公司的业务在这个阶段。大型生产系统数据量巨大或写并发极高必须使用集群模式。在决定使用Cluster前一定要评估好客户端兼容性、是否有跨槽操作的需求并规划好扩容方案。一个常见的误区为了“高大上”或者“一步到位”在项目初期就上Cluster。这会给开发和运维带来不必要的复杂度。我建议的路径是单机 - 主从如果需要读扩展- 哨兵如果需要高可用- Cluster当哨兵模式撑不住时。6. 从Java开发者视角看部署与排查要点无论选择哪种模式最终都要落地到你的服务器上。这里有几个和Java应用强相关的实操要点。6.1 资源规划与参数调优内存这是最重要的。不仅要考虑数据容量还要留出约30%的冗余给Redis自身如复制缓冲区、AOF重写。使用maxmemory参数限制实例用量并配合合理的淘汰策略如allkeys-lru。网络主从、哨兵、集群节点间有大量数据同步和心跳通信。确保它们之间的网络延迟低且稳定。跨机房部署要特别注意。连接池在Java客户端如Lettuce, Jedis中合理配置连接池参数max-active,max-idle,min-idle避免连接数不足或浪费。不要在每个请求里创建新连接超时时间spring.redis.timeout或客户端相关超时要设置合理。太短在网络波动时容易报超时错误太长会导致线程阻塞。建议从2-5秒开始测试。6.2 客户端连接失败排查顺序当你的Java应用连不上Redis集群时按这个顺序查网络连通性在应用服务器上用telnet或nc命令测试是否能通Redis节点的IP和端口。这是最常见的问题。防火墙/Security Group检查服务器和云服务商的防火墙规则是否放行了对应的端口不仅是6379还有哨兵的26379集群的节点间通信端口16379等。配置检查哨兵模式检查spring.redis.sentinel.nodes列表是否完整、可达。检查master名称是否和哨兵配置里的mymaster一致。集群模式检查spring.redis.cluster.nodes列表里至少有一个是活跃的节点。检查客户端版本是否支持集群。查看Redis日志直接登录Redis服务器查看redis-server的日志文件里面通常有连接拒绝、认证失败、集群状态错误等详细信息。查看客户端日志开启Spring Boot或客户端的DEBUG级别日志查看连接建立、拓扑发现的过程。6.3 生产环境部署建议分离部署Redis节点尤其是主节点不要和应用服务器部署在同一台机器上避免资源竞争。持久化虽然集群有副本但务必开启RDB或AOF持久化。这是防止逻辑错误或跨机房灾难的最后防线。监控必须要有监控。监控指标至少包括内存使用率、连接数、命中率、每秒操作数OPS、主从延迟repl_offset、集群节点状态。慢查询日志使用SLOWLOG命令定期检查慢查询优化业务代码或使用大Key。备份即使有AOF/RDB定期对持久化文件进行异地备份。最后记住一点Redis集群的搭建和运维是一个系统工程。作为Java开发者你的首要目标是理解这几种模式的原理、差异和客户端配置方式能够和运维同学顺畅沟通并在代码中正确地使用它们。先在你的本地或测试环境把这三种模式都动手搭一遍跑通一个简单的Spring Boot项目去连接和操作很多概念就自然清晰了。