A/B测试vs灰度测试vs蓝绿部署

A/B测试

• 简单来说，A/B测试是一种比较两个版本的测试，以确定哪个版本的性能更好。
• 在A/B测试中，部分用户会接收到“版本A”，其他用户则会接收“版本B”。
• 这是一个可控的过程。为了进行实验，用户组被分成两组。“A组”通常被称为“对照组”，继续接收现有的产品版本。而“B组”通常被称为“实验组”，根据待测量指标，收到不同的实验数据。
• 最后，比较两组不同指标的结果，以确定哪个版本性能更好。

灰度测试

• 灰度测试是一种通过向一小部分用户发布新版本，来降低风险和验证新版本的方法。
• 由于新功能只分发给少数用户，因此它的影响相对较小。如果新代码被证明存在缺陷，可以快速回滚更改的内容。
• 这是一种降低在生产中引入新版本带来的风险的技术。先将更新缓慢地推广到一小部分用户，然后再将其推广到整个环境中，让所有人使用。
• 灰度测试是检测问题和回滚更新的好方法，A/B 测试是测试新版本的一种方法。

蓝绿部署

• 蓝绿部署是一种软件部署策略，它利用两套生产环境（“蓝色环境”和“绿色环境”），使软件部署过程更容易、更安全。
• 这两个生产环境要尽可能保持一致，当部署新版本时，新版本会被推送到当前处于非活动状态的环境中。一旦在生产中测试了新版本，路由就可以切换到新版本所在的环境，从而实现平滑切换。
• 蓝绿部署的主要好处之一是灾难恢复。因为有两个相同的生产环境，如果一个环境（比如蓝色环境）部署了新版本，并且发现了问题，那么路由就可以切换回另一个环境（绿色环境），该环境不用停机就能提供旧版本。
• 蓝绿部署可以用于灰度测试，只需让路由将一定比例的流量定向到新版本的代码，看看它在实时使用中的表现，然后再将更新推广到所有用户。

翻译自：A/B Testing vs Canary Release vs Blue Green Deployment