在Swarm集群中创建和管理有状态服务

### 在Swarm集群中创建和管理有状态服务 #### 1. 有状态服务的持久化方法选择 在处理有状态服务的状态持久化时，有几种常见的方法： 1. 不持久化状态。 2. 将状态持久化到主机。 3. 将状态持久化到集群外部。 显然，不持久化状态不可取，因为有状态服务的数据持久化至关重要。而将状态持久化到主机也存在问题，在集群环境中，无法保证某个主机始终可用，服务可能会被重新调度，且更新服务时也不能保证新副本在同一主机上运行。若使用约束将服务绑定到特定主机，就失去了使用Swarm的意义。 因此，应将状态持久化到集群外部，如网络驱动器。传统做法是系统管理员在所有主机上挂载网络驱动器，但这种方式存在问题，比如需要挂载单个驱动器供所有有状态服务使用，或者为每个服务挂载新驱动器，这会增加管理负担。若使用Terraform管理基础设施，每次有新服务都需更新配置。按照十二因素应用的原则，服务应具有单一代码库，基础设施配置工具不应包含特定服务的详细信息。 解决方案是采用类似管理服务的原则来管理卷，就像使用调度器（如Swarm）管理服务一样，应采用卷调度器来处理挂载。由于使用Docker容器运行服务，卷调度器应能与Docker集成，提供无缝体验。Docker卷插件可实现这一点，它能将第三方解决方案集成到Docker生态系统中，使卷管理透明化。 REX - Ray是一种可行的解决方案，它能以透明方式在集群中持久化数据。只需确保安装了REX - Ray，之后就可以像挂载普通主机卷一样挂载卷，REX - Ray会在后台创建、挂载和管理网络驱动器。我们将使用REX - Ray来处理所有不使用实例间复制和同步的有状态服务。 #### 2. 将REX - Ray添加到Packer和Terraform配置中 添加REX - Ray到Packer和Terraform配置相对容易，将不依赖运行时资源的静态部分添加到Packer，其余部分添加到Terraform。Packer将创建安装了REX - Ray的AMI，Terraform将创建其配置并启动服务。 以下是`packer-ubuntu-docker-rexray.json`文件的相关内容，与之前的配置相比，在`shell provisioner`中多了一条命令： ```json "provisioners": [{ "type": "shell", "inline": [ ... "curl -sSL https://dl.bintray.com/emccode/rexray/install | sh -s -- stable" ... }] ``` 创建将成为AMI的VM时，Packer会执行与手动安装REX - Ray相同的命令。 构建AMI的步骤如下： ```bash packer build -machine-readable \ packer-ubuntu-docker-rexray.json \ | tee packer-ubuntu-docker-rexray.log export TF_VAR_swarm_ami_id=$(\ grep 'artifact,0,id' \ packer-ubuntu-docker-rexray.log \ | cut -d: -f2) ``` Terraform部分的配置更复杂，因为其配置需要动态决定。配置定义在`rexray.tpl`模板中： ```plaintext libstorage: service: efs server: services: efs: driver: efs efs: accessKey: ${aws_access_key} secretKey: ${aws_secret_key} region: ${aws_default_region} securityGroups: ${aws_security_group} tag: rexray ``` 可以看到，AWS密钥、区域和安全组被定义为变量。在`common.tf`文件中，有如下相关配置： ```hcl data "template_file" "rexray" { template = "${file("rexray.tpl")}" vars { aws_access_key = "${var.aws_access_key}" aws_secret_key = "${var.aws_secret_key}" aws_default_region = "${var.aws_default_region}" aws_security_group = "${aws_security_group.docker.id}" } } ``` 模板内容在`rexray.tpl`文件中，变量在`vars`部分定义，`aws_security_group`的值将在创建名为`docker`的`aws_security_group`后动态决定。 最后，在`swarm.tf`文件中，`swarm-