Redis-3.pdf

### Redis 3.0.5 集群配置详解 #### 一、前言 本文档基于 Redis 3.0.5 版本撰写，详细介绍了如何构建与配置 Redis 集群。Redis 是一种高性能的键值存储系统，被广泛应用于缓存、消息队列等场景。随着数据量的增长和并发请求的增多，单个 Redis 实例往往无法满足需求，因此引入集群模式以提高系统的可用性和扩展性。 #### 二、部署计划 根据官方文档指导，本部署方案计划搭建由三个主节点和三个从节点组成的集群。每个物理服务器上部署两个 Redis 节点，确保高可用性和数据冗余。具体配置如下： - **服务端口**：6379 和 6380。 - **IP 地址**：192.168.0.251、192.168.0.252、192.168.0.253。 - **配置文件名**：redis-6379.conf 和 redis-6380.conf。 注意：为了提高数据的安全性和系统稳定性，主节点和从节点不应部署在同一台物理服务器上。 #### 三、目录结构 为了方便管理和维护，建议将 Redis 的安装路径设为 `/data/redis`。该目录下应包括： - `bin` 目录：存放所有 Redis 可执行文件。 - `redis-benchmark` - `redis-check-aof` - `redis-check-dump` - `redis-cli` - `redis-sentinel` -> `redis-server` - `redis-server` - `conf` 目录：存放配置文件。 - `redis-6379.conf` - `redis-6380.conf` - `redis.conf` - `log` 目录：存放日志文件。 #### 四、编译安装 Redis 通常采用源码编译的方式进行安装。首先需要下载源码包，然后按照以下步骤进行编译安装： 1. **解压源码包**：`tar -zxvf redis-3.0.5.tar.gz` 2. **进入解压后的目录**：`cd redis-3.0.5` 3. **编译**：`make` 4. **安装**：`make install PREFIX=/data/redis-3.0.5` 其中，`PREFIX` 参数指定了安装的目标路径。完成编译安装后，还需要将可执行文件的路径添加到环境变量中以便后续使用。 #### 五、系统参数调整 为了更好地支持 Redis 运行，需要对系统进行一定的优化调整。 - **5.1 修改最大可打开文件数**：通过编辑 `/etc/security/limits.conf` 文件，增加如下内容： ``` * soft nofile 65536 * hard nofile 65536 ``` 之后重新登录终端或者运行 `ulimit -n 65536` 命令。 - **5.2 TCP 监听队列大小**：通过编辑 `/etc/sysctl.conf` 文件，添加如下内容： ``` net.core.somaxconn = 65536 ``` 之后执行 `sysctl -p` 命令使设置生效。 - **5.3 OOM 相关**：避免 Redis 在内存不足时被系统杀死，需要设置 `/etc/sysctl.conf` 文件中的 `vm.overcommit_memory` 参数为 `1`。 - **5.4 透明大页设置**：通过编辑 `/etc/sysctl.conf` 文件，添加如下内容： ``` vm.nr_hugepages = 1024 vm.hugetlb_shm_group = 0 vm.hugetlb_shm_ct = 0 ``` 然后执行 `echo never > /sys/kernel/mm/transparent_hugepage/enabled` 命令。 #### 六、配置 Redis 在 `/data/redis/conf` 目录下，根据实际需求修改 `redis-6379.conf` 和 `redis-6380.conf` 文件。例如，可以指定监听 IP、端口、持久化方式等。 #### 七、启动 Redis 实例 使用如下命令启动 Redis 服务： - 对于主节点：`redis-server /data/redis/conf/redis-6379.conf` - 对于从节点：`redis-server /data/redis/conf/redis-6380.conf` #### 八、创建和启动 Redis 集群前的准备工作 在创建集群之前，需要先安装并配置必要的依赖库： - **8.1 安装 Ruby**：通过包管理器安装 Ruby，例如在 CentOS 上运行 `yum install ruby`。 - **8.2 安装 RubyGems**：Ruby 的包管理工具，同样可以通过包管理器安装。 - **8.3 安装 redis-3.0.0.gem**：运行 `gem install redis-3.0.0`。 #### 九、使用 `redis-trib.rb` 工具 `redis-trib.rb` 是 Redis 提供的一个用于集群管理的命令行工具。通过这个工具可以创建集群、添加/删除节点等。 - **9.1 复制 `redis-trib.rb`**：将该脚本复制到集群管理的服务器上。 - **9.2 创建 Redis 集群**：运行 `redis-trib.rb create --replicas 1 ip1:port1 ip2:port2 ip3:port3 ip4:port4 ip5:port5 ip6:port6` 来创建集群，其中 `-replicas 1` 表示每个主节点有一个从节点。 - **9.3 检查集群状态**：使用 `ps aux | grep redis` 命令查看各个 Redis 实例是否已经正常启动。 #### 十、客户端连接 - **10.1 命令行工具 `redis-cli`**：通过 `redis-cli -c -h ip -p port` 命令连接到集群。 - **10.2 从从节点读取数据**：由于 Redis 集群支持读写分离，因此可以从从节点获取数据。 - **10.3 Java 客户端 Jedis**：使用 Java 编写的 Redis 客户端，支持集群模式。 - **10.4 C++ 客户端 r3c**：适用于 C++ 应用程序的 Redis 集群客户端。 #### 十一、节点管理 - **11.1 添加新主节点**：通过 `redis-trib.rb add-node ip:port master_ip:master_port` 命令添加一个新的主节点。 - **11.2 添加新从节点**：使用 `redis-trib.rb add-node ip:port master_ip:master_port` 命令添加一个新的从节点，并指定对应的主节点 IP 和端口。 #### 十二、节点删除 使用 `redis-trib.rb del-node ip:port node_id` 命令删除指定的节点。 #### 十三、检查节点状态 使用 `redis-cli cluster nodes` 命令查看集群中各节点的状态。 #### 十四、Slots 相关命令 - **14.1 迁移 Slots**：使用 `redis-cli cluster setslot slot_id node_id` 命令手动迁移某个 Slot 至指定节点。 - **14.2 平衡 Slots**：通过 `redis-trib.rb rebalance cluster_ip:cluster_port` 命令自动平衡 Slots 分布。 #### 十五、人工主备切换 当主节点发生故障时，可以使用 `redis-cli failover` 命令进行人工切换，选择一个从节点升为主节点。 #### 十六、查看集群信息 通过 `redis-cli cluster info` 命令获取集群的整体信息，包括 Slots 分布情况、节点状态等。 #### 十七、问题排查 在部署和使用 Redis 集群的过程中可能会遇到各种问题，例如节点连接失败、数据同步延迟等。此时需要根据错误日志和状态信息进行排查。 1. **检查 Redis 实例状态**：确认所有实例都在正常运行。 2. **查看日志文件**：分析 `/data/redis/log` 目录下的日志文件，查找异常信息。 3. **网络连通性测试**：使用 `ping` 或 `telnet` 命令测试各节点间的网络连接。 4. **检查配置文件**：确认配置文件中的各项设置符合预期。 以上就是关于 Redis 3.0.5 集群配置的详细介绍，希望对大家有所帮助。