Docker集群的创建与管理实例详解

本文详细讲述了Docker集群的创建与管理。分享给大家供大家参考,具体如下:

在《Docker简单安装与应用入门教程》中编写一个应用程序,并将其转化为服务,在《Docker分布式应用教程》中,使应用程序在生产过程中扩展5倍,并定义应该如何运行。现在将此应用程序部署到集群上,并在多台机器上运行它,通过将多台机器连接到Dockerized集群上,使多容器、多机器应用成为可能。

Swarm(集群)是运行Docker并加入到一个集群中的一组机器,在这种情况下,您将继续运行以往的Docker命令,但是现在它们将由swarm manager(集群管理器)在集群上执行。集群中的机器可以是物理的或虚拟的,加入集群后,它们被称为nodes(节点)。集群管理器可以使用多种策略来运行容器,比如emptiest node(最空的节点),它使用容器填充最少使用的机器。或者global(全局),它确保了每台机器只能得到指定容器的一个实例。您可以指示集群管理器在组成文件中使用这些策略,就像您已经使用的策略一样。

集群管理器是集群中唯一可以执行命令的机器,或者授权其他机器作为workers(工人)加入集群。工人只是在那里提供能力,并没有权力告诉任何其他机器可以做什么和不可以做什么。到目前为止,您已经在本地机器上以单主机模式使用Docker,但是Docker也可以切换到集群模式,这就是使用集群的原因。当立即启用集群模式使当前机器成为集群管理器时,Docker将运行您正在管理的集群上执行的命令,而不仅仅是在当前的机器上。

创建一个集群

一个集群由多个节点组成,可以是物理机或虚拟机,做法很简单,运行docker swarm init来启用集群模式,并让你的当前机器成为集群管理器,然后在其他机器上运行docker swarm join让它们作为工人加入集群。

接下来使用虚拟机快速创建一个集群,需要一个可以创建虚拟机(VMs)的虚拟机管理程序,在机器上安装Oracle VirtualBox应用程序。如果是Windows 10系统,而且安装了Hyper-V,则无需安装VirtualBox,而应该使用Hyper-V。

现在,使用docker-machine创建几个虚拟机,使用VirtualBox驱动程序:

$ docker-machine create --driver virtualbox myvm1
$ docker-machine create --driver virtualbox myvm2

您现在创建了两个名为myvm1和myvm2的虚拟机,使用下面命令列出机器并获取其IP地址:

$ docker-machine ls

第一台机器将作为管理员,执行管理命令,认证工人加入群体,第二台机器将成为工人。可以使用docker-machine ssh将命令发送到虚拟机,执行docker swarm init使myvm1成为集群管理器:

$ docker-machine ssh myvm1 "docker swarm init --advertise-addr <myvm1的ip>"

在执行docker swarm init后,响应中会包含一个预配置的docker swarm join命令,您可以在要添加的任何节点上运行该命令。复制这个命令,并通过docker-machine ssh把它发送到名为myvm2的虚拟机,让myvm2作为工人加入新的集群:

$ docker-machine ssh myvm2 "docker swarm join --token <token> <ip>:2377"

将myvm2加入集群时,端口号要选择2377,因为端口2376是Docker守护进程端口,不要使用此端口,否则可能会遇到错误。在管理器上运行docker node ls以查看集群中的节点:

$ docker-machine ssh myvm1 "docker node ls"

现在集群己经创建完成,如果想要删除集群,可以使用docker swarm leave在每个节点运行。

在集群上部署应用程序

现在只要重复《Docker分布式应用教程》中使用的过程来部署新的集群,只要记住,只有像myvm1这样的集群管理器才能执行Docker命令,工人只是干活的。

到目前为止,您已经在docker-machine ssh中包装了Docker命令来与虚拟机进行通信,另一个选择是运行docker-machine env <machine>来获取并运行一个配置当前的命令,以便与虚拟机上的Docker守护进程通信。这个方法更好,因为它允许使用本地docker-compose.yml文件来“远程”部署应用程序,而不需要将它复制到任何地方。

执行docker-machine env myvm1命令,复制输出的最后一行提供的命令,然后粘贴并运行该命令,以将终端配置为与集群管理器myvm1对话:

$ docker-machine env myvm1
$ eval $(docker-machine env myvm1)

运行docker-machine ls以验证myvm1现在是活动的机器,即活动状态旁边有星号:

$ docker-machine ls

现在可以使用myvm1的权限作为集群管理器,通过使用docker stack deploy命令和docker-compose.yml的本地副本来部署应用程序。通过docker-machine命令配置连接到myvm1,仍然可以访问本地主机上的文件,确保在docker-compose.yml文件同一个目录下,运行以下命令在myvm1上部署应用程序:

$ docker stack deploy -c docker-compose.yml getstartedlab

就这样,应用程序被部署在一个集群上,现在,您可以使用Docker命令看到服务和关联的容器已经在myvm1和myvm2之间分配了:

$ docker stack ps getstartedlab

访问集群

现在可以从myvm1或myvm2的IP地址访问应用程序,网络在它们之间共享并负载平衡。运行docker-machine ls来获取虚拟机的IP地址,并在浏览器中访问其中的任何一个,或使用curl命令访问。

您将看到五个不同的容器ID,它们都是随机循环的,展示了负载平衡。两个IP地址工作的原因是集群中的节点参与入口路由网络,这可以确保部署在群集中某个端口的服务始终将该端口保留给自己,而不管哪个节点实际上正在运行该容器。以下是三节点集群上端口8080上发布一个名为my-web的服务的路由网络示意图:

可以通过更改docker-compose.yml文件来缩放应用程序,编辑代码更改应用程序的行为,然后重新构建,然后推送新的镜像,只需再次运行docker stack deploy来部署这些更改。可以使用docker swarm join命令将任何物理或虚拟机器加入到此集群,并将容量添加到集群,之后只需运行docker stack deploy部署,应用将利用新的资源。

清理并重新启动

可以使用docker stack rm清理堆栈,例如:

$ docker stack rm getstartedlab

可以使用以下命令取消当前终端中的docker-machine环境变量:

$ eval $(docker-machine env -u)

这会将终端与docker-machine创建的虚拟机断开连接,并允许继续在同一个终端中工作。如果关闭本地主机,Docker机器将停止运行,您可以通过运行docker-machine ls来检查机器的状态:

$ docker-machine ls

要重新启动已停止的机器,可以运行:

$ docker-machine start <machine-name>

如果你想删除这个集群,可以使用docker-machine ssh myvm2 "docker swarm leave"命令,或者使用docker-machine ssh myvm1 "docker swarm leave --force"强制删除。

希望本文所述对大家docker容器的使用有所帮

(0)

相关推荐

  • 在Ubuntu 16.04上用Docker Swarm和DigitalOcean创建一个Docker容器集群的方法

    介绍 Docker Swarm是用于部署Docker主机集群的Docker本地解决方案.您可以使用它来快速部署在本地计算机或受支持的云平台上运行的Docker主机集群. 在Docker 1.12之前,设置和部署Docker主机集群需要使用外部键值存储(如etcd或Consul)来进行服务发现.但是,使用Docker 1.12,不再需要外部发现服务,因为Docker提供了一个内置的键值存储,可以开箱即用. 在本教程中,您将了解如何使用Docker 1.12上的Swarm功能部署一组Docker机器

  • 详解docker搭建redis集群的环境搭建

    本文介绍了docker搭建redis集群的环境搭建,分享给大家,废话不多说,具体如下: 下载镜像 docker pull redis 准备配置文件 mkdir /home/docker/redis/ wget https://raw.githubusercontent.com/antirez/redis/3.0/redis.conf -O /home/docker/redis/redis.conf cd /home/docker/redis/ sed -i 's/# slaveof <maste

  • 使用docker快速搭建Spark集群的方法教程

    前言 Spark 是 Berkeley 开发的分布式计算的框架,相对于 Hadoop 来说,Spark 可以缓存中间结果到内存而提高某些需要迭代的计算场景的效率,目前收到广泛关注.下面来一起看看使用docker快速搭建Spark集群的方法教程. 适用人群 正在使用spark的开发者 正在学习docker或者spark的开发者 准备工作 安装docker (可选)下载java和spark with hadoop Spark集群 Spark运行时架构图 如上图: Spark集群由以下两个部分组成 集

  • 详解从 0 开始使用 Docker 快速搭建 Hadoop 集群环境

    Linux Info: Ubuntu 16.10 x64 Docker 本身就是基于 Linux 的,所以首先以我的一台服务器做实验.虽然最后跑 wordcount 已经由于内存不足而崩掉,但是之前的过程还是可以参考的. 连接服务器 使用 ssh 命令连接远程服务器. ssh root@[Your IP Address] 更新软件列表 apt-get update 更新完成. 安装 Docker sudo apt-get install docker.io 当遇到输入是否继续时,输入「Y/y」继

  • Docker使用Swarm组建集群的方法

    Swarm 在 Docker 1.12 版本之前属于一个独立的项目,在 Docker 1.12 版本发布之后,该项目合并到了 Docker 中,成为 Docker 的一个子命令.目前,Swarm 是 Docker 社区提供的唯一一个原生支持 Docker 集群管理的工具.它可以把多个 Docker 主机组成的系统转换为单一的虚拟 Docker 主机,使得容器可以组成跨主机的子网网络. Docker 使用 Swarm 可以很方便的在多个主机上创建容器集群,并且容器之间可以跨主机网络通信. Swar

  • 详解使用docker 1.12 搭建多主机docker swarm集群

    swarm是docker公司自己的容器集群管理工具,本文介绍了使用docker 1.12 搭建多主机docker swarm集群,分享给大家 准备 准备至少两台的centos 7 主机(全新最小安装, 可以使用虚拟机安装) 开放端口2377 tcp端口, 7946 4789 tcp udp 端口 本文使用192.168.99.101(hostname:centos-node4) 作为swarm manager 192.168.99.102(hostname:centos-node5) 作为sw

  • ubuntu docker搭建Hadoop集群环境的方法

    spark要配合Hadoop的hdfs使用,然而Hadoop的特点就是分布式,在一台主机上搭建集群有点困难,百度后发现可以使用docker构建搭建,于是开搞: github项目:https://github.com/kiwenlau/hadoop-cluster-docker 参考文章://www.jb51.net/article/109698.htm docker安装 文章中安装的是docker.io 但是我推荐安装docker-ce,docker.io版本太老了,步骤如下: 1.国际惯例更新

  • 详解使用docker搭建hadoop分布式集群

    使用Docker搭建部署Hadoop分布式集群 在网上找了很长时间都没有找到使用docker搭建hadoop分布式集群的文档,没办法,只能自己写一个了. 一:环境准备: 1:首先要有一个Centos7操作系统,可以在虚拟机中安装. 2:在centos7中安装docker,docker的版本为1.8.2 安装步骤如下: <1>安装制定版本的docker yum install -y docker-1.8.2-10.el7.centos <2>安装的时候可能会报错,需要删除这个依赖 r

  • docker swarm 集群故障与异常详解

    本文介绍了docker swarm 集群故障与异常详解,分享给大家,具体如下: 在上次遭遇 docker swarm 集群故障后,我们将 docker 由 17.10.0-ce 升级为最新稳定版 docker 17.12.0-ce . 前天晚上22:00之后集群中的2个节点突然出现CPU波动,在CPU波动之后,在凌晨夜深人静.访问量极低的时候,整个集群出现了故障,访问集群上的所有站点都出现了502,过了一段时间后自动恢复正常. ECS实例:swarm1-node5,CPU百分比于00:52发生告

  • docker搭建rabbitmq集群环境的方法

    本文主要讲述如何用docker搭建rabbitmq的集群.分享给大家,希望此文章对各位有所帮助. 下载镜像 采用bijukunjummen该镜像. git clone https://github.com/bijukunjummen/docker-rabbitmq-cluster.git 运行 启动集群 cd docker-rabbitmq-cluster/cluster docker-compose up -d ...... Status: Downloaded newer image for

  • Docker构建ELK Docker集群日志收集系统

    当我们搭建好Docker集群后就要解决如何收集日志的问题 ELK就提供了一套完整的解决方案 本文主要介绍使用Docker搭建ELK 收集Docker集群的日志 ELK简介 ELK由ElasticSearch.Logstash和Kiabana三个开源工具组成 Elasticsearch是个开源分布式搜索引擎,它的特点有:分布式,零配置,自动发现,索引自动分片,索引副本机制,restful风格接口,多数据源,自动搜索负载等. Logstash是一个完全开源的工具,他可以对你的日志进行收集.过滤,并将

  • docker 搭建hadoop以及hbase集群详解

    要用docker搭建集群,首先需要构造集群所需的docker镜像.构建镜像的一种方式是,利用一个已有的镜像比如简单的linux系统,运行一个容器,在容器中手动的安装集群所需要的软件并进行配置,然后commit容器到新的镜像.另一种方式是,使用Dockerfile来自动化的构造镜像. 下面采用第二种. 1. 创建带ssh服务的ubuntu14.04系统镜像 使用ubuntu14系统来安装hadoop和hbase,由于hadoop集群机器之间通过ssh通信,所以需要在ubuntu14系统中安装ssh

随机推荐