『中级篇』容器编排Docker Swarm介绍(42)

到今天这次总结,如果跟着我一起学一起练的老铁,完全入门docker了。在日常的开发和测试,绝对是没有问题的。不管是我们自己和docker公司,他们的初心都是想用在生产环境下,但是生产环境和测试环境完全是两种环境条件。

之前的学习实践环境

在用学习容器编排之前,所有操作本地进行的,docker cli 连接是一台的docker host,不管是docker run 还是docker container 都是在一台机器上,但是实际的生产环境下,一个应用很复杂他部署在一台机器上满足不了我们的需求,都是通过集群的方式来解决问题的。

到处都使用容器带来的困扰
  1. 怎么去管理这么多容器?
  2. 怎么能方便的横向扩展?
  3. 如果容器down了,怎么能自动恢复?
  4. 如何去更新融起而不影响业务?
  5. 怎么去调度容器的创建?
  6. 保护隐私数据?
Swarm的架构
  1. swarm集群的架构
  2. 节点下面有角色:Worker Manager
  3. Manager 是整个warm集群的大脑,为了避免单点的故障,我们的大脑至少有2个,状态的同步通过raft协议进行同步。raft协议可以确保多个Manager之前是同步的。

 分布式系统之于单机系统,优势之一就是有更好的容错性

  • 比如,一台机器上的磁盘损坏,数据丢失,可以从另一台机器上的磁盘>恢复(分布式系统会对数据做备份)
  • 比如,集群中某些机器宕机,整个集群还可以对外提供服务 这是如何做到的?比较容易的一个想法就是备份(backup)。一个系统的工作模是:接受客户端的command,系统进行处理,将处理的结果返回给客户端。由此可见,系统里的数据可能会因为command而变化。 实现备份的做法之一就是复制状态机(Repilcated State Machine,RSM),它有一个很重要的性质——确定性(deterministic)
  • 如果两个相同的、确定性的状态从同一状态开始,并且以相同的顺序获得相同的输入,那么这两个状态机将会生成相同的输出,并且结束在相同的状态 也就是说,如果我们能按顺序将command作用于状态机,它就可以产生相同的状态和相同的输出 那么一个状态机如何实现呢?如下图所示(来自raft协议):

上图中,每个RSM都有一个replicated log,存储的是来自客户端的commands。每个RSM中replicate log中commads的顺序都是相同的,状态机按顺序处理replicate log中的command,并将处理的结果返回给客户端。由于状态机具有确定性,因此每个状态机的输出和状态都是相同的。 上图中有一个模块——Consensus Module刚刚没有提及。这个模块用于保证每个server上Log的一致性

  • 如果不做任何保障,直接将commad暴力写入,一旦服务器宕机或者出现什么其他故障,就会导致这个Log丢失,并且无法恢复。而出现故障的可能性是很高的,这就导致系统不可用
  • raft就是Consensus Module的一个实现 因此,raft是一致性协议,是用来保障servers上副本一致性的一种算法。
  1. worker是通过gossip的网络结构进行同步
  2. Service 和Replicas,这里的Service在docker compose中的Service是一样的。
命令合集

PS:之后通过很多很多的实践操作一起来学习Swarm。

本文分享自微信公众号 - 编程坑太多(idig88)

原文出处及转载信息见文内详细说明,如有侵权,请联系 yunjia_community@tencent.com 删除。

原始发表时间:2018-08-02

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏刘明的小酒馆

使用Docker三剑客部署集群

DOCKER技术在推出后掀起了一阵容器化技术的热潮,容器化使得服务的部署变得极其简易,这为微服务和分布式计算提供了很大的便利。

75360
来自专栏云计算认知升级

【腾讯云的1001种玩法】十分钟轻松搞定云架构:CDN的命中率是什么

十分钟轻松搞定云架构,这节课中我们来深入了解什么是CDN 的命中率,CDN为什么能帮你省下钱?又如何省下更多的钱?

93500
来自专栏Python攻城狮

GitHub 系列之「团队合作利器 Branch」1.什么是分支?2.分支的常用操作3.基本的团队协作流程4.Git Flow

Git 相比于 SVN 最强大的一个地方就在于「分支」,Git 的分支操作简直不要太方便,而实际项目开发中团队合作最依赖的莫过于分支了,关于分支前面的系列也提到...

13510
来自专栏程序你好

如何使用Redis进行微服务间通信

12120
来自专栏机器学习实践二三事

Mac无法升级six, numpy等

OS 10.10以上,会出现你无法直接使用pip升级向six, numpy等,报错就是各种权限不够,加上sudo结果也一样,原因就是MacOS的系统完整性保护(...

33080
来自专栏架构师小秘圈

大型网站图片服务器架构的演进

作者:丁浪,非著名架构师。关注高并发、高可用的架构设计,对系统服务化、分库分表、性能调优等方面有深入研究和丰富实践经验。热衷于技术研究和分享。 声明:版权归丁浪...

93740
来自专栏编程坑太多

『高级篇』docker之镜像仓库(20)

想在mac上安装一个harbor 下载了harbor-offline-installer-v1.6.1.tgz

19340
来自专栏日暮星辰

腾讯云云主机实现多IP绑定

腾讯云主机实际上一直允许绑定弹性IP,最开始是可以实现经典IP更换为弹性IP可以有效的屏蔽掉攻击,释放IP进行更换。

64030
来自专栏Timhbw博客

自用图片压缩工具推荐(优化博客加载速度)

2016-03-2318:22:27 发表评论 609℃热度 之前wordpress写博客时文章里面的图片都是上传到服务器中,以前以为这样省事,都是原图上传,...

510120
来自专栏aoho求索

NSQ深入与实践

1. 介绍 最近在研究一些消息中间件,常用的MQ如RabbitMQ,ActiveMQ,Kafka等。NSQ是一个基于Go语言的分布式实时消息平台,它基于MIT开...

72290

扫码关注云+社区

领取腾讯云代金券