详解CentOS 6.5搭建Redis3.2.8单机分布式集群

前言

最近在服务器上搭建了一套Redis3.0伪分布式集群,发现一个问题,就是Shell脚本编写能力和运维工具的重要性亟待提高。

集群环境安装

1.安装Redis

$ cd /usr/local #安装目录
$ wget http://download.redis.io/releases/redis-3.2.8.tar.gz
$ tar xzf redis-3.2.8.tar.gz
$ mv redis-3.2.8/ redis
$ cd redis
$ make
$ make install

注意:官方给的命令少了make install,导致redis-server只能在redis的src目录下使用

2.安装Ruby&rubygems

$ yum install ruby ruby-devel rubygems

3.创建集群环境

创建集群需要的目录[至少需要6个,3个master,3个slave,公式6+2N]

$ mkdir -p /usr/local/redis/cluster/16001/
$ mkdir -p /usr/local/redis/cluster/16002/
$ mkdir -p /usr/local/redis/cluster/16003/
$ mkdir -p /usr/local/redis/cluster/16004/
$ mkdir -p /usr/local/redis/cluster/16005/
$ mkdir -p /usr/local/redis/cluster/16006/

复制redis.conf到每个节点下

$ cp /usr/local/redis/redis.conf /usr/local/redis/cluster/16001/redis.conf
$ cp /usr/local/redis/redis.conf /usr/local/redis/cluster/16002/redis.conf
$ cp /usr/local/redis/redis.conf /usr/local/redis/cluster/16003/redis.conf
$ cp /usr/local/redis/redis.conf /usr/local/redis/cluster/16004/redis.conf
$ cp /usr/local/redis/redis.conf /usr/local/redis/cluster/16005/redis.conf
$ cp /usr/local/redis/redis.conf /usr/local/redis/cluster/16006/redis.conf

然后修改每个节点下的redis.conf,主要修改内容如下

port <端口>

daemonize yes

cluster-enabled yes

cluster-config-file nodes.conf

cluster-node-timeout 5000

logfile "redis-server.log"

appendonly yes

4.远程访问

①远程访问配置

如果要远程访问,需要修改redis.conf中的bind

默认是127.0.0.1回环地址,如果要远程访问,需要修改成局域网地址 或者 修改成 0.0.0.0,当然也可以使用双地址模式,比如我的局域网地址是192.168.12.213,此外,服务器上的ip一般是固定的,那么可以修改成如下方式

$ bind 192.168.12.213 127.0.0.1 #推荐
$ bind 0.0.0.0 #不推荐

具体请参考:Redis开启远程登录连接

②.开放防火墙端口

$ service iptables status #查看防火墙状态

$ iptables -I INPUT -p tcp --dport 16001 -j ACCEPT
$ iptables -I INPUT -p tcp --dport 16002 -j ACCEPT
$ iptables -I INPUT -p tcp --dport 16003 -j ACCEPT
$ iptables -I INPUT -p tcp --dport 16004 -j ACCEPT
$ iptables -I INPUT -p tcp --dport 16005 -j ACCEPT
$ iptables -I INPUT -p tcp --dport 16006 -j ACCEPT

④telnet链接

telnet 192.168.12.213 16001

5.启动Redis实例

#分别启动这6个redis实例(此时,节点均以Redis Cluster的方式运行,但并没有自动构建集群,因为还处于“我不认识你,你不属于我”的状态,它们每个都是孤零零的Redis节点,或者说只包含了一个节点的集群)

$ cd /usr/local/redis/cluster/16001 && redis-server redis.conf > redis-server.log 2>&1 &

$ cd /usr/local/redis/cluster/16002 && redis-server redis.conf > redis-server.log 2>&1 &

$ cd /usr/local/redis/cluster/16003 && redis-server redis.conf > redis-server.log 2>&1 &

$ cd /usr/local/redis/cluster/16004 && redis-server redis.conf > redis-server.log 2>&1 &

$ cd /usr/local/redis/cluster/16005 && redis-server redis.conf > redis-server.log 2>&1 &

$ cd /usr/local/redis/cluster/16006 && redis-server redis.conf > redis-server.log 2>&1 &

命令中的 2>&1表示标准错误流输入到标准输出流中,也就是输入到每个节点的redis-server.log中,至于最后的 &表示是否后台启动,在linux上redis-server本身就是后台启动,因此这个 & 可以不加

当然,我们可以通过 tail命令监听每个redis-server.log的变化

tail -f /usr/local/redis/cluster/16002/redis-server.log

上面的所有redis启动之后,我们可以通过如下命令中的任何一条命令进行检测

$ netstat -lntp | grep 'redis*'

$ ps -e | grep 'redis*'

$ lsof -i 4 TCP

$ hping --scan 16001-16006 -S 192.168.12.213

$ nmap -sS 192.168.12.213 -p 1600-16007

创建集群

1.安装redis gem插件

我们需要安装支持redis的gem工具,否则会报错

$ gem install redis --version 3.0.0

注意:gem install redis --version 3.0.0 失败的话,需要修改一下gem的源

gem sources --remove https://rubygems.org/
gem sources -a https://ruby.taobao.org/

2.创建集群

让上面的实例互相通讯(1 表示为每个master分配一个salve)

$ /usr/local/redis/src/redis-trib.rb create --replicas 1 \
127.0.0.1:16001 \
127.0.0.1:16002 \
127.0.0.1:16003 \
127.0.0.1:16004 \
127.0.0.1:16005 \
127.0.0.1:16006

3.集群信息查看

集群创建完成,可以使用下面的命令查看相关信息:

#查看集群目前状况
$ redis-cli -c -p 16001
#关闭其中一个节点
$ redis-cli -p 16001 shutdown
#打印集群的信息
$ redis-cli cluster info
#列出集群当前已知的所有节点(node),以及这些节点的相关信息。
$ redis-cli cluster nodes

输出的信息:

127.0.0.1:16002 master - 0 1439345771781 2 connected 5461-10922
127.0.0.1:16003 master - 0 1439345772286 3 connected 10923-16383
127.0.0.1:16001 myself,master - 0 0 1 connected 0-5460
127.0.0.1:16004 slave 2566ea486fc30c911aafaf1b71130fd24a38dba9 0 1439345772791 4 connected
127.0.0.1:16005 slave edea1e50bd224c6895b1904bce79e83fa07d6017 0 1439345772286 5 connected
127.0.0.1:16006 slave ab06e033698627ce0ecd4c8c645585a1ae70cc84 0 1439345771276 6 connected

从上面的信息可以明显看到哪些是主节点、从节点。

4.保存集群信息

将节点的配置文件保存到硬盘里

$ redis-cli cluster saveconfig

连接端口(可以使用其他端口测试16001 -> 16006)

$ redis-cli -c -p 16001
$ 127.0.0.1:16001> set key001 v001
$ 127.0.0.1:16001> get key001

选举端口检测

如果细心的话,你就会发现,在我们创建了集群之后,启动了一些新的端口

通过如下命令

netstat -lntp | grep 'redis'

你就会找到如下端口,这些端口是用来进行选举和主备切换的

26001 26002 26003 26004 26005 26006

以上就是本文的全部内容,希望对大家的学习有所帮助,也希望大家多多支持我们。

(0)

相关推荐

  • 详解docker搭建redis集群的环境搭建

    本文介绍了docker搭建redis集群的环境搭建,分享给大家,废话不多说,具体如下: 下载镜像 docker pull redis 准备配置文件 mkdir /home/docker/redis/ wget https://raw.githubusercontent.com/antirez/redis/3.0/redis.conf -O /home/docker/redis/redis.conf cd /home/docker/redis/ sed -i 's/# slaveof <maste

  • 详解centos下搭建redis集群

    必备的工具: redis-3.0.0.tar redis-3.0.0.gem (ruby和redis接口) 分析: 首先,集群数需要基数,这里搭建一个简单的redis集群(6个redis实例进行集群). 在一台服务器上操作,因此仅需要6个不同的端口号即可.分别是:7001.7002.7003.7004.7005.7006. 步骤: 1.上传redis-3.0.0.tar到服务器(自己指定自己的软件目录),解压redis-3.0.0.tar. 2.安装c语言环境(安装centos之后,自带c语言环

  • redis集群搭建_动力节点Java学院整理

    现在项目上用redis的话,很少说不用集群的情况,毕竟如果生产上只有一台redis会有极大的风险,比如机器挂掉,或者内存爆掉,就比如我们生产环境曾今也遭遇到这种情况,导致redis内存不够挂掉的情况,当然这些都是我们及其不能容忍的,第一个必须要做到高可靠,其次才是高性能,好了,下面我来逐一搭建一下. 一:Redis集群搭建 1. 下载 首先去官网下载较新的3.2.0版本,下载方式还是非常简单的,比如官网介绍的这样. $ wget http://download.redis.io/releases

  • Redis集群搭建全记录

    Redis集群是一个提供在多个Redis节点间共享数据的程序集. Redis集群中不支持处理多个keys的命令. Redis集群通过分区来提供一定程度的可用性.在某个节点宕机或者不可用的时候可以继续处理命令. Redis集群数据分片 在Redis集群中,使用数据分片(sharding)而不是一致性hash(consistency hashing)来实现,一个Redis集群包含16384个哈希槽(hash slot),数据库中的每个键都存在这些哈希槽中的某一个,通过CRC16校验后对16384取模

  • Redis 集群搭建和简单使用教程

    前言 Redis集群搭建的目的其实也就是集群搭建的目的,所有的集群主要都是为了解决一个问题,横向扩展. 在集群的概念出现之前,我们使用的硬件资源都是纵向扩展的,但是纵向扩展很快就会达到一个极限,单台机器的Cpu的处理速度,内存大小,硬盘大小没办法一直满足需求,而且机器纵向扩展的成本是相当高的.集群的出现就是能够让多台机器像一台机器一样工作,实现了资源的横向扩展. Redis是内存型数据库,当我们要存储的数据达到一定程度时,单台机器的内存满足不了我们的需求,搭建集群则是一种很好的解决方案. 介绍安

  • redis集群搭建教程及遇到的问题处理

    这里,在一个Linux虚拟机上搭建6个节点的redis伪集群,思路很简单,一台虚拟机上开启6个redis实例,每个redis实例有自己的端口.这样的话,相当于模拟出了6台机器了,然后在以这6个实例组建redis集群就可以了. 前提:redis已经安装,目录为/usr/local/redis-4.0.1 如不会,可以参考一下文章  windows下安装redis    Linux下安装redis redis集群是用的ruby脚本,所以要想执行该脚本,需要ruby环境..对应redis的源码src目

  • 详解CentOS 6.5搭建Redis3.2.8单机分布式集群

    前言 最近在服务器上搭建了一套Redis3.0伪分布式集群,发现一个问题,就是Shell脚本编写能力和运维工具的重要性亟待提高. 集群环境安装 1.安装Redis $ cd /usr/local #安装目录 $ wget http://download.redis.io/releases/redis-3.2.8.tar.gz $ tar xzf redis-3.2.8.tar.gz $ mv redis-3.2.8/ redis $ cd redis $ make $ make install

  • 详解.net core下如何简单构建高可用服务集群

    一说到集群服务相信对普通开发者来说肯定想到很复杂的事情,如zeekeeper ,反向代理服务网关等一系列的搭建和配置等等:总得来说需要有一定经验和规划的团队才能应用起来.在这文章里你能看到在.net core下的另一种集群构建方案,通过Beetlex即可非常便捷地构建高可用的集群服务. 简述 Beetlex的Webapi集群应用并没有依赖于第三方服务,而是由Beetlex自身完成:它主要是通过Client和策略监控服务相结合的方式来实现集群化的服务负载访问.以下是服务结构: client一旦从配

  • Kafka多节点分布式集群搭建实现过程详解

    上一篇分享了单节点伪分布式集群搭建方法,本篇来分享一下多节点分布式集群搭建方法.多节点分布式集群结构如下图所示: 为了方便查阅,本篇将和上一篇一样从零开始一步一步进行集群搭建. 一.安装Jdk 具体安装步骤可参考linux安装jdk. 二.安装与配置zookeeper 下载地址:https://www-us.apache.org/dist/zookeeper/stable/ 下载二进制压缩包zookeeper-3.4.14.tar.gz,然后上传到linux服务器指定目录下,本次上传目录为/so

  • 浅析Hadoop完全分布式集群搭建问题

    目录 一.Hadoop是什么 二.Hadoop组成 1.Hadoop1.x 2.Hadoop2.x 三.Hadoop集群搭建所需工具(链接如下,自行下载) 四.Hadoop集群配置前期准备 五.Hadoop运行环境搭建 六.Hadoop完全分布式集群环境正式搭建 1.编写集群分发脚本xsync 2.集群配置 3.SSH无密登录配置 4.群起集群 5.集群启动/停止方式总结 6.集群时间同步(必须root用户) 一.Hadoop是什么 Hadoop是一个由Apache基金会所开发的分布式系统基础架

  • 详解三分钟快速搭建分布式高可用的Redis集群

    这里的Redis集群指的是Redis Cluster,它是Redis在3.0版本正式推出的专用集群方案,有效地解决了Redis分布式方面的需求.当单机内存.并发.流量等遇到瓶颈的时候,可以采用这种Redis Cluster方案进行解决. 分区规则 Redis Cluster采用虚拟槽(slot)进行数据分区,即使用分散度良好的哈希函数把所有键映射到一个固定范围的整数集合里,这里的整数就是槽(slot).Redis Cluster槽的范围是0~16383,计算公式:slot=CRC16(key)

  • 详解Django+Vue+Docker搭建接口测试平台实战

    一. 开头说两句 大家好,我叫林宗霖,是一位测试工程师,也是全栈测开训练营中的一名学员. 在跟着训练营学习完Docker容器技术系列的课程后,理所应当需要通过实操来进行熟悉巩固.正好接口自动化测试平台需要迁移到新的测试服务器上,就想要体验一番Docker的"一次构建,处处运行".这篇文章简单介绍了下这次部署的过程,其中使用了Dockerfile定制镜像和Docker-Compose多容器编排. 二. 项目介绍 项目采用的是前后端分离技术来实现的,前端是Vue+ElementUI,后端是

  • 详解使用docker搭建hadoop分布式集群

    使用Docker搭建部署Hadoop分布式集群 在网上找了很长时间都没有找到使用docker搭建hadoop分布式集群的文档,没办法,只能自己写一个了. 一:环境准备: 1:首先要有一个Centos7操作系统,可以在虚拟机中安装. 2:在centos7中安装docker,docker的版本为1.8.2 安装步骤如下: <1>安装制定版本的docker yum install -y docker-1.8.2-10.el7.centos <2>安装的时候可能会报错,需要删除这个依赖 r

  • 详解用Docker快速搭建一个博客网站

    目录 一.准备工作 二.部署流程  三.访问测试 Halo 是一款现代化的个人独立博客系统,给习惯写博客的同学多一个选择. 官网地址:https://halo.run/ 一.准备工作 本章教程基于Docker搭建,所以需要你提前在服务器上安装好Docker环境. Docker安装教程:https://www.jb51.net/article/94067.htm 二.部署流程 (1)创建工作目录 mkdir ~/.halo && cd ~/.halo (2)下载配置文件到工作目录 wget

  • Kafka单节点伪分布式集群搭建实现过程详解

    Kafka集群搭建分为单节点的伪分布式集群和多节点的分布式集群两种,首先来看一下单节点伪分布式集群安装.单节点伪分布式集群是指集群由一台ZooKeeper服务器和一台Kafka broker服务器组成,如下图所示: 为了搭建单节点Kafka集群,需要依次安装如下软件:安装Java-->安装ZooKeeper-->安装Kafka. 一.安装Java 可以参考linux安装jdk,来进行安装 二.安装ZooKeeper 下载地址:https://www-us.apache.org/dist/zoo

  • linux系统安装hadoop真分布式集群详解

    Hadoop真分布式完全集群安装,基于版本2.7.2安装,在两台Linux机器上面分别安装Hadoop的master和slave节点. 1.安装说明 不管NameNode还是DataNode节点,安装的用户名需要一致.master和slave的区别,只是在于配置的hostname,在config的slaves配置的hostname所代表的机器即为slave,不使用主机名也可以,直接配置为IP即可.在这种集群下面,需要在master节点创建namenode路径,并且使用格式化命令hdfs name

随机推荐