基础架构之百变魔方

引言:

“基础架构即代码(Infrastructure-as-Code,IaC)”是一种使用新的技术来构建和管理动态基础设施的方式。它把基础设施、工具和服务以及对基础设施的管理本身作为一个软件系统,采纳软件工程实践以结构化的安全的方式来管理对系统的变更。

通过第三方调查报告显,Forrester咨询公司在一项针对拥有1000多名员工的企业的727名云技术决策者的全球调查中发现,业务优先级的转变正在推动企业采用多云战略。根据该研究,绝大多数的受访者将其当前的云计算策略描述为多云策。

根据该研究,绝大多数的受访者将其当前的云计算策略描述为多云策略,其性能和创新已超越成本节约成为了成功的最佳衡量标准。此外,60%的企业现在正在迁移或已经将关键任务应用程序迁移到公有云上。

如今,大多数企业都采用多云策略来优化性能并实现业务目标。该研究指出,“没有一个单一的云平台可以满足所有企业工作负载需求。”因此,企业正在利用多个共有云和私有云来处理不同的应用程序工作负载。在将工作负载与云环境相匹配时,性能是大多数企业的首要考虑因素,甚至超过了合规性与安全性。

接受调查的IT领导者展示了对多云平台的各种使用案例,并认为多云策略可以带来诸多好处,比如改进的IT基础架构管理和灵活性(33%),更好的IT成本管理(33%)以及提高安全性和合规性(30%)。此外,该研究还发现,在选择云服务供应商时,企业更喜欢能提供更深层次帮助和支持的供应商。

企业更多采用云服务,让物理机销量出现了10年来首次负增长。6月18日,市场研究机构IDC公布最新数据,2019年第一季度中国市场物理机出货量下跌0.7%,全球市场物理机销量下跌5.1%。这背后是企业全面向云转移,新旧IT交替出现拐点,云计算市场持续强劲增长,平均增幅达40%。云计算还可以帮助企业大幅削减IT成本,还具有弹性扩容、按需使用、按量付费、成本低等明显优势,已经成为企业数字化转型的基础设施。互联网、政府、电信和金融等行业已经把自己迁移至云上,不再独立采购物理服务器。

1.我们该如何应对多云化的挑战?

“基础架构即代码(Infrastructure-as-Code,IaC)”是一种使用新的技术来构建和管理动态基础设施的方式。它把基础设施、工具和服务以及对基础设施的管理本身作为一个软件系统,采纳软件工程实践以结构化的安全的方式来管理对系统的变更。

从开发的角度看提倡一切皆对象,从操作系统的角度看提倡一切皆文件,那么在多云化的时代我们应该提倡把一切资源皆代码,通过代码的方式编排和管理我们的基础资源,这样才能满足企业业务快速发展的需求。

针对一个复杂的业务系统我们如何借助云端的优势进行部署?

传统手工的部署方式大致要通过以上8个步骤完成一个应用的部署,如果我们的公有云环境是多个,那么就意味着以上步骤要重复多次,这还仅仅是一个简单的web环境,如果我们要部署的是一套业务系统,涉及多个应用系统的创建,我们的基础平台交付需要多长时间?显然通过手工的方式是不现实的。

我们需要通过infrastructure as code的方式来管理我们的基础架构,构建企业自己的技术中台。

基础设施即代码四项关键原则:

  • 可再生性:环境中的任何元素可以轻松复制。
  • 一致性:无论何时,创建的环境各个元素的配置是完全相同的。
  • 快速反馈:能够频繁、容易地进行变更,并快速知道变更是否正确。
  • 可见性:所有对环境的变更应该容易理解、可审计、受版本控制。

基础设施即代码的目标:

  • 标准化:以代码来定义环境,实现开发环境、测试环境、生产环境的标准化。
  • 自动化:以自动化工具来驱动代码准备环境。包括创建环境、更新环境以及销毁环境。
  • 可视化:以监控来可视化环境信息。环境当前状态可视、环境变更历史可视化、可追溯。

infrastructure as code 的工具有哪些:

  • Microsoft为用户提供的IaC工具是:Azure Resource Manager。用户可以通过Azure Resource Manager(ARM)的不同模板,配置出自己的基础架构、并处理各种依赖项。可以在模板中使用那些已在JSON中声明描述了的资源,也可以在同一个ARM模板中声明多个Azure资源,以构建整体性的项目环境。ARM模板具有幂等性,因此可以无限次数地重复使用相同的模板,并获得相同的结果。Resource Manager还支持服务器的实例分组、以及对不同分组的统一管理。
  • CloudFormation是专为那些在AWS云中工作的用户而设计的。目前已经配置了342种AWS资源类型。允许使用JSON或YAML定制各种模板来构建不同复杂程度的基础架构模型。
  • (CDM)是基于Google云平台的配置文件(YAML)和模板(JINJA2或PYTHON)的一种自动化执行工具。它允许用户自行定义和同步部署各种系统资源。Google CDM也支持预览功能。这意味着:您在不直接提交更改的情况下,便可以直接了解到部署和变更所带来的影响。可以帮助用户避免出现人为的错误,还能够起到加强与稳定整体基础架构的作用。
  • Terraform 是一个IT基础架构自动化编排工具,可以用代码来管理维护 IT 资源。Terraform的命令行接口 (CLI) 提供一种简单机制,用于将配置文件部署到任意支持的云上,并对其进行版本控制。通过配置文件可以描述云资源的拓扑基础架构。

Terraform 支持的服务商众多

安装Terraform简单

Terraform 可以随意部署在任意的客户端上,只要可以连通公网即可(Initializing provider plugins and Call Cloud OpenAPI) ,通过http://1t.click/vND下载对应平台的可执行二进制包,解压出来Executable Binary 放指定目录,配置好相应的PATH则可使用terraform 指令。

$ terraform
Usage: terraform [--version] [--help] <command> [args]
Common commands:
    apply              Builds or changes infrastructure
    console            Interactive console for Terraform interpolations
    destroy            Destroy Terraform-managed infrastructure
    fmt                Rewrites config files to canonical format
    get                Download and install modules for the configuration
    graph              Create a visual graph of Terraform resources
    import             Import existing infrastructure into Terraform
    init               Initialize a new or existing Terraform configuration
    output             Read an output from a state file
    plan               Generate and show an execution plan
    providers          Prints a tree of the providers used in the configuration
    push               Upload this Terraform module to Terraform Enterprise to run
    refresh            Update local state file against real resources
    show               Inspect Terraform state or plan
    taint              Manually mark a resource for recreation
    untaint            Manually unmark a resource as tainted
    validate           Validates the Terraform files
    version            Prints the Terraform version
workspace          Workspace management

(左右滑动可查看全部代码)

整个基础架构的建设只需要terraform init,terraform plan , terraform apply 三步来完成。删除整个环境只需要terraform destroy一步来完成。

通过一个main.tf文件(只需要是.tf 文件)定义了ECS(镜像、实例类型)、VPC(CIDR、VPC Name)、OSS资源(ACL、实例Name)信息,通过Terraform 对资源配置参数做解析,调用阿里cloud OpenAPI 进行资源校验于创建,同时把整个资源创建状态化到一个.tf.state文件中,基于该文件则可以得知资源创建的所有信息,包括资源数量调整,规格调整,实例变更都依赖这种非常重要的文件。

terraform 具体使用案例

通过配置main.tf文件定义各种资源

定义认证资源

} # Configure the Alicloud Provider
provider "alicloud" {
  access_key = "${var.access_key}"
  secret_key = "${var.secret_key}"
  region     = "${var.region}"

(左右滑动可查看全部代码)

定义云主机资源

# Create a web server
resource "alicloud_instance" "web" {
  # cn-beijing
  provider          = "alicloud"
  availability_zone = "cn-beijing-a"
  image_id          = "ubuntu_140405_32_40G_cloudinit_20161115.vhd"
  internet_charge_type  = "PayByBandwidth"
  instance_type        = "ecs.n1.medium"
  io_optimized         = "optimized"
  system_disk_category = "cloud_efficiency"
  security_groups      = ["${alicloud_security_group.default.id}"]
  instance_name        = "web"
}

(左右滑动可查看全部代码)

定义安全组资源

# Create security group
resource "alicloud_security_group" "default" {
  name        = "default"
  provider    = "alicloud"
  description = "default"
}
resource "alicloud_security_group_rule" "allow_all_tcp" {
  type              = "ingress"
  ip_protocol       = "tcp"
  nic_type          = "intranet"
  policy            = "accept"
  port_range        = "1/65535"
  priority          = 1
  security_group_id = "${alicloud_security_group.default.id}"
  cidr_ip           = "0.0.0.0/0"
}

(左右滑动可查看全部代码)

定义输出结果信息

# Output message
output "ecs instance name" {
  value = "${alicloud_instance.web.instance_name}"
}
output "ecs private ip" {
  value = "${alicloud_instance.web.private_ip}"
}

(左右滑动可查看全部代码)

terraform init

$ terraform init
Initializing provider plugins...
- Checking for available provider plugins on https://releases.hashicorp.com...
- Downloading plugin for provider "alicloud" (0.1.0)...
The following providers do not have any version constraints in configuration,
so the latest version was installed.
To prevent automatic upgrades to new major versions that may contain breaking
changes, it is recommended to add version = "..." constraints to the
corresponding provider blocks in configuration, with the constraint strings
suggested below.
* provider.alicloud: version = "~> 0.1"
Terraform has been successfully initialized!
You may now begin working with Terraform. Try running "terraform plan" to see
any changes that are required for your infrastructure. All Terraform commands
should now work.

(左右滑动可查看全部代码)

执行terraform plan,查看资源创建计划

An execution plan has been generated and is shown below.
Resource actions are indicated with the following symbols:
  + create
Terraform will perform the following actions:
  + alicloud_instance.web
      id:                   <computed>
      allocate_public_ip:   "false"
      availability_zone:    "cn-beijing-a"
      host_name:            <computed>
      image_id:             "ubuntu_140405_32_40G_cloudinit_20161115.vhd"
      instance_name:        "web"
      instance_type:        "ecs.n1.medium"
      internet_charge_type: "PayByBandwidth"
      io_optimized:         "optimized"
      private_ip:           <computed>
      public_ip:            <computed>
      security_groups.#:    <computed>
      status:               <computed>
      subnet_id:            <computed>
      system_disk_category: "cloud_efficiency"
      system_disk_size:     <computed>
  + alicloud_security_group.default
      id:                   <computed>
      description:          "default"
      name:                 "default"
Plan: 2 to add, 0 to change, 0 to destroy.

(左右滑动可查看全部代码)

执行terraform apply,在云端创建资源

$ terraform apply
alicloud_security_group.default: Creating...
  description: "" => "default"
  name:        "" => "default"
alicloud_security_group.default: Creation complete after 1s (ID: sg-2zec9v8aq2hgb244qrqf)
alicloud_instance.web: Creating...
  allocate_public_ip:         "" => "false"
  availability_zone:          "" => "cn-beijing-a"
  host_name:                  "" => "<computed>"
  image_id:                   "" => "ubuntu_140405_32_40G_cloudinit_20161115.vhd"
  instance_name:              "" => "web"
  instance_type:              "" => "ecs.n1.medium"
  internet_charge_type:       "" => "PayByBandwidth"
  io_optimized:               "" => "optimized"
  private_ip:                 "" => "<computed>"
  public_ip:                  "" => "<computed>"
  security_groups.#:          "" => "1"
  security_groups.2344301974: "" => "sg-2zec9v8aq2hgb244qrqf"
  status:                     "" => "<computed>"
  subnet_id:                  "" => "<computed>"
  system_disk_category:       "" => "cloud_efficiency"
  system_disk_size:           "" => "<computed>"
alicloud_instance.web: Still creating... (10s elapsed)
alicloud_instance.web: Still creating... (20s elapsed)
alicloud_instance.web: Creation complete after 51s (ID: i-2zedvfowy4m39sg1xdig)
Apply complete! Resources: 2 added, 0 changed, 0 destroyed.
Outputs:
ecs instance name = web
ecs private ip = 10.31.28.93

(左右滑动可查看全部代码)

2.IaC结合共有云的使用

  1. 我们可以将我们的应用系统通过Packer打包成镜像存储到公有云。
  2. 结合Terraform 在公有云部署云主机时拉取自定义镜像文件生成云主机,并对公有云的资源进行统一的配置和管理。
  3. 通过结合Ansible对公有云的应用进行统一的维护和管理。

3.IaC在DevOps中的运用

我们在整个软件开发生命周期的过程中,其中基础环境的制备是非常重要的一环,也是从开发到测试再到生产部署最靠近底层的一环,我们可以借助IaC既能满足基础架构的快速部署,又能灵活的使用私有云或公有云资源,充分利用公有云的优势为企业服务,同时降低企业成本投入,做到真正的按需付费。

4.基础平台代码化的优势

  • 将基础结构部署到多个云

Terraform适用于多云方案,将相类似的基础结构部署到阿里云、其他云提供商或者本地数据中心。开发人员能够使用相同的工具和相似的配置文件同时管理不同云提供商的资源。

  • 自动化管理基础结构

Terraform能够创建配置文件的模板,以可重复、可预测的方式定义、预配和配置ECS资源,减少因人为因素导致的部署和管理错误。能够多次部署同一模板,创建相同的开发、测试和生产环境。

  • 基础架构即代码(Infrastructure as Code)

可以用代码来管理维护资源。允许保存基础设施状态,从而使您能够跟踪对系统(基础设施即代码)中不同组件所做的更改,并与其他人共享这些配置 。

  • 降低开发成本

可以通过按需创建开发和部署环境来降低成本,让企业真正做到按需付费。

资料来源:Forrester调查报告、财经网、云有料、博客园、阿里云

精选提问:

问1:Terraform能完成不同公有云间的迁移吗?

答:terraform只做环境管理,不做数据迁移。

问2:有没有不同公有云迁移的工具推荐?

答:目前各公有云有本地数据中心向公有云迁移到工具,各公有云之间迁移暂时没有。

问3:能说下Terraform 和 Terragrunt 的区别吗?

答:terragrunt 是一家咨询公司写的软件在terraform外边wrap了一层。

问4:Terraform 的status状态怎么来管理的?

答:状态文件可以存在一个文件里,这个文件可以是本地,也可以是远程的共享存储上。terraform主持workspaces,各团队可以维护自己的状态文件。

问5:ansible也可以做基础设施管理,terraform和它对比的优势在哪里?

答:terraform在对接各云供应商已有成熟的接口,在社区也有成熟的模块,在使用上可以标准化,也可以降低管理和使用的复杂度。

本文分享自微信公众号 - EAWorld(eaworld)

原文出处及转载信息见文内详细说明,如有侵权,请联系 yunjia_community@tencent.com 删除。

原始发表时间:2019-07-25

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏腾讯云安全的专栏

业务出海之路,王总终于不再为这个发愁了

“我们除了做好业务转移到云上,业务的海外扩张也需要快速推进了。”某快速消费品公司负责海外业务的王总站在北京CBD办公室的投影旁边说道。 这家刚刚把业务放在云上...

11220
来自专栏云计算D1net

通过3个步骤实现安全的云存储

企业可以使用云计算供应商为其提供额外的工具来保护数据,但仍有来自用户端的工作要做。

13040
来自专栏罗超频道

为什么第三方数据报告总是不准?

一到年底,就有各种第三方数据报告发布,呈现2018年互联网行业的发展状况,对2019年行业趋势进行洞察,理论上来说,这样的报告对于创业者、投资者、媒体都是重要的...

15120
来自专栏智能相对论

相互掐架,日韩贸易摩擦是否只是半导体产业之争?

2019 G20峰会刚过不久,中美贸易摩擦稍稍缓和,7月1日,日本经济产业省宣布,限制对韩国出口用于制造电视机和智能手机的三种半导体材料,其中包括氟聚酰亚胺、光...

7820
来自专栏数据云团

Django实战-初篇-信息资讯平台

本次项目的信息资讯平台,是在前一篇的电商项目上的延伸。对之前所用到知识点,再一次巩固,会发现,不同类型项目之间的构建的差别,包括数据表的设计、前端页面的实现、C...

13030
来自专栏数据云团

Django实战-信息资讯-CMS后台管理-上

Django网络应用开发的5项基础核心技术包括模型(Model)的设计,URL 的设计与配置,View(视图)的编写,Template(模板)的设计和Form(...

11330
来自专栏7DGroup

架构级全链路性能咨询服务

案例:在之前的一个企业做性能咨询之后,硬件降到原来的1/4,同时容量提高10倍,也即系统整体性能提升40倍,每年节省费用超过500万。

10220
来自专栏罗超频道

挑战者纷至沓来!微信战略藐视,战术还得重视?

2019年1月15日是互联网的大日子:前快播CEO王欣创办的马桶MT、抖音旗下的多闪和罗永浩的聊天宝,一共三款社交App同日发布,成为古老的社交市场难得一见的奇...

11430
来自专栏罗超频道

微信的下半场红利在哪?从这家刚敲钟的公司身上可以找到答案

1月9日,张小龙在微信公开课Pro上4小时演讲余音绕梁,当我们试图从这3万字演讲中挖掘微信的下半年场红利时,今天就有一家从做微信开发服务起家的公司——微盟在港交...

11420
来自专栏云计算D1net

业务就绪:混合云的连锁反应

在很大程度上,关于混合云未来发展的讨论正转向随着技术影响的实现而被揭示的长期、高影响的商业机会。这种讨论的焦点集中在“业务就绪”上,或者改变它的工作方式,以便更...

11630

扫码关注云+社区

领取腾讯云代金券

年度创作总结 领取年终奖励