如何实践 DevOps

第 1 步 - 选择一个组件

第一步是从小处着手。选择当前正在生产的组件。理想的组件具有简单的代码库，几乎没有依赖关系和最少的基础架构。该组件将成为团队在实施 DevOps 时起步训练的试验场。

第 2 步 - 考虑采用像 Scrum 这样的敏捷方法

DevOps 通常会搭配敏捷工作方法，例如 Scrum。没有必要采用与某种方法（如 Scrum）相关的所有仪式和做法。Scrum 的三个要素通常易于采用并能快速提供价值：待办事项、冲刺和冲刺规划。

DevOps 团队可以在 Scrum 待办事项中添加工作并确定其优先级，然后将该工作的一部分提取到冲刺中，这是完成特定工作部分的固定时间长度。冲刺计划是决定哪些任务从待办事项转到下一个冲刺的过程。

第 3 步 - 使用基于 Git 的源代码控制

版本控制是 DevOps 的最佳实践，它可以加强协作和缩短发布周期。像 Bitbucket 这样的工具允许开发人员共享、协作、合并和备份软件。

选择分支模型。本文概述了这个概念。对于刚接触 Git 的团队来说，GitHub Flow 是一个很好的起点，因为这个概念易于理解且易于实现。基于 Trunk 的开发通常是首选，但需要更多的纪律，这使得首次尝试 Git 变得更加困难。

第 4 步 - 将源代码控制与工作跟踪相结合

将源代码管理工具与工作跟踪工具集成。通过在一个集中位置查看与特定项目相关的所有内容，开发人员和管理层将节省大量时间。以下是来自基于 Git 的源代码管理存储库更新的 Jira 事务的示例。Jira 事务包括一个开发部分，其中汇总了在源代码管理中针对 Jira 事务所做的工作。这个事务有一个分支、六个提交、一个拉取请求和一个生成。

第 5 步 - 编写测试

CI/CD 管道需要测试来验证部署到各种环境的代码是否正常运行。首先为代码编写单元测试。虽然宏伟的目标是 90％ 的代码覆盖率，但这在刚开始时是不现实的。为代码覆盖率设置较低的基准，并随着时间逐步提高单元测试覆盖率的标准。您可以将工作项目添加到待办事项来解决这个问题。

修复生产代码中发现的缺陷时使用测试驱动的开发。发现一个缺陷时，编写单元测试、集成测试和/或系统测试，这些测试会在存在缺陷的环境中失败。然后修复缺陷，观察测试现在是否通过。随着时间的推移，此过程将系统性地增加代码覆盖率。如果错误是在测试或暂存环境中发现的，则测试将让您确信代码在升级到生产环境后可以正常运行。

如果从一开始就进行，这个步骤很费力，但也很重要。最终用户接触到这些代码更改之前，测试使团队能够看到代码更改对系统行为产生的影响。

单元测试

单元测试将验证源代码是否正确，并且应作为 CI/CD 管道中的第一步运行。开发人员应针对绿色路径、有问题的输入以及已知的极端情况编写测试。在编写测试时，开发人员可以模拟输入和预期输出。

集成测试

集成测试验证两个组件之间的通信是否正确。模拟输入和预期输出。在将 CI/CD 管道在部署到任何环境之前，都必须首先进行这些测试。这些测试通常需要比单元测试更广泛的模拟才能让组件正常运行。

系统测试

系统测试可验证系统的端到端性能，并确保系统在每个环境中都能按预期运行。模拟组件可能接收的输入并执行系统。接下来，验证系统是否返回了必要的值并正确更新系统的其余部分。应在部署到每个环境后运行这些测试。

步骤 6 - 构建 CI/CD 流程来部署组件

在构建 CI/CD 管道时，考虑部署到多个环境。如果团队构建仅部署到单个环境的 CI/CD 管道，则会对某些内容进行硬编码。为基础设施和代码构建 CI/CD 管道非常重要。首先构建 CI/CD 管道，在每个环境中部署必要的基础架构。然后，再构建一个 CI/CD 管道来部署代码。

管道结构

该管道首先运行单元测试和集成测试，然后再部署到测试环境。系统测试在部署到环境后执行。

基础设施

环境之间基础架构的差异使得在某一环境中运行的软件难以在另一个环境中正确执行。防火墙规则、用户权限、数据库访问和其他基础架构级组件必须采用已知配置，这样软件才能正常运行。手动基础架构部署可能很难正确重现。由于此过程涉及许多步骤，因此依靠记忆力来使用正确的参数以正确的顺序执行每个步骤，这可能会导致错误。必须尽可能在代码中定义基础架构，以缓解这些问题以及其他问题。

可以通过各种工具在代码中定义基础设施，这些工具包括 AWS CloudFormation、Terraform、Ansible、Puppet 或 Chef。

编写多个管道来部署基础架构。与编写代码一样，保持基础架构部署的模块化也很有帮助。尽可能将所需的基础设施分解为不相交的子集。假设 A、B、C 和 D 是可以相互依赖的基础架构组件的抽象。例如，A 可能是 EC2 盒子，B 可能是 S3 存储桶。基础架构组件 A（仅有 A）依赖组件 B 的依赖关系应该一起保存在同一 CI/CD 管道中。A、B 和 C 依赖 D（但 A、B 和 C 相互独立）的依赖关系应分解为多个 CI/CD 管道。在本例中，有四个独立的管道。在这种情况下，您应该为 D 构建一个其他三个组件都依赖的流水线，并为 A、B 和 C 各构建一个流水线。

代码

CI/CD 管道是为部署代码而构建的。这些管道通常易于实施，因为由于之前的工作，基础架构已经可供使用。这里的重要考虑因素是测试、可重复性以及从错误部署中恢复的能力。

可重复性是指在不损害系统的情况下重复部署相同转换的能力。部署应该是可重入且等效的。部署应将系统的状态设置为已知配置，而不是对现有状态应用修改器。不能重复应用修改器，因为在第一次部署之后，修改器正常运行所需的起始状态已经发生了变化。

对于不可重复更新，一个简单示例是通过向配置文件添加数据来更新该文件。请勿在配置文件中追加行或使用任何此类修改技术。如果通过追加方式完成更新，则配置文件最终可能会出现数十行重复行。正确做法是，将配置文件替换为源代码管理中写入的正确文件。

这一原则也应适用于数据库更新。数据库更新可能会出现问题，需要注意细节。必须使数据库更新过程具有可重复性且具备容错能力。在应用更改之前立即进行备份，以便可以恢复。

另一个考虑因素是如何从错误的部署中恢复。有两种情况：部署失败，系统处于未知状态；部署成功，警报被触发，故障单开始流入。有两种一般的处理方法。第一种方法是回滚。第二种方法是使用功能标志并关闭必要的标志，以恢复到已知的良好状态。有关功能标志的更多信息，请参阅本文的步骤 8。

在检测到错误的部署后，回滚会将先前已知的良好状态部署到环境中。这应该在一开始就做好计划。在操作数据库之前，请先进行备份。确保您可以快速部署以前版本的代码。定期在测试或暂存环境中测试回滚过程。

步骤 7 - 添加监控、警报和仪器

DevOps 团队需要监控每个环境中正在运行的应用程序的行为。日志中有错误吗？对 API 的调用超时了吗？数据库崩溃了吗？监视系统的每个组件是否存在问题。如果监控检测到问题，则会提交故障单，以便有人能够解决问题。作为解决过程的一部分，需要编写可以发现问题的其他测试。

修复缺陷

监控和响应问题是运行生产软件的一部分。采用 DevOps 文化的团队负责软件的运营，并借用站点可靠性工程师 (SRE) 的行为。对问题进行根本原因分析，编写测试以检测问题，修复问题，并验证测试现在是否通过。这个过程在前期通常很费力，但从长远来看，一定会有所回报，因为它减少了技术债务并保持了运营灵活性。

性能优化

一旦实现了基本的运行状况监控，下一个常见的步骤便是性能优化。了解系统各个部分的运行状况，并对慢速部分进行优化。正如 Knuth 所说：“过早的优化是万恶之源”。不要优化系统中所有组件的性能。只优化最慢、最昂贵的部分。监控有助于确定哪些组件速度慢且成本高昂。

第 8 步 - 使用功能标志实现金丝雀测试

要启用金丝雀测试，请将每项新功能封装在一个功能标志中，并附上包含测试用户的允许列表。只有在部署到环境后，新功能代码才会为允许列表中的用户运行。让新功能浸泡在每个环境中，然后再将其推广到下一个环境。当新功能渗入到某个区域时，请注意指标、警报和其他工具，以发现问题迹象。具体而言，请留意新的请求单的增加。

在将问题升级到下一个环境之前，先解决该环境中的问题。在生产环境中发现的问题的处理方式应与在测试或暂存环境中发现的问题的处理方式相同。确定问题的根本原因后，编写测试以确定问题，实施修复，验证测试是否通过，然后通过 CI/CD 管道提升修复程序。新的测试将通过，请求单数量将下降，而更改将渗透到检测到问题的环境中。