专栏首页DevOps时代的专栏基于 Nginx+lua+Memcache 实现灰度发布

基于 Nginx+lua+Memcache 实现灰度发布

一、灰度发布原理说明

灰度发布在百度百科中解释:

灰度发布是指在黑与白之间,能够平滑过渡的一种发布方式。AB test就是一种灰度发布方式,让一部分用户继续用A,一部分用户开始用B,如果用户对B没有什么反对意见,那么逐步扩大范围,把所有用户都迁移到B上面 来。灰度发布可以保证整体系统的稳定,在初始灰度的时候就可以发现、调整问题,以保证其影响度。

这里的用于WEB系统新代码的测试发布,让一部分(IP)用户访问新版本,一部分用户仍然访问正常版本,其原理如图:

执行过程:

  • 当用户请求到达前端代理服务Nginx,内嵌的lua模块解析Nginx配置文件中的lua脚本代码;
  • Lua变量获得客户端IP地址,去查询memcached缓存内是否有该键值,如果有返回值执行@client_test,否则执行@client。
  • Location @client_test把请求转发给部署了new版代码的服务器,location @client把请求转发给部署了normal版代码的服务器,服务器返回结果。整个过程完成。

下面把安装配置过程详细说明。

二、安装配置过程详解

1、安装 nginx

安装依赖包

yum -y install gcc gcc-c++ autoconf libjpeg libjpeg-devel libpng libpng-devel freetype freetype-devel libxml2 libxml2-devel zlib zlib-devel glibc glibc-devel glib2 glib2-devel bzip2 bzip2-devel ncurses ncurses-devel curl curl-devel e2fsprogs e2fsprogs-devel krb5 krb5-devel libidn libidn-devel openssl openssl-devel openldap openldap-devel nss_ldap openldap-clients openldap-servers make pcre-devel

yum -y install gd gd2 gd-devel gd2-devel lua lua-devel

yum –y install memcached

下载 lua 模块、lua-memcache 操作库文件 和 nginx 包

wget https://github.com/simpl/ngx_devel_kit/archive/v0.2.18.tar.gz
wget https://github.com/chaoslawful/lua-nginx-module/archive/v0.8.5.tar.gz
wget https://github.com/agentzh/lua-resty-memcached/archive/v0.11.tar.gz
wget http://nginx.org/download/nginx-1.4.2.tar.gz

#解压编译安装
tar xvf nginx-1.4.2.tar.gz
cd nginx-1.4.2/
./configure \
--prefix=/soft/nginx/ \
--with-http_gzip_static_module \
--add-module=/root/ngx_devel_kit-0.2.18/ \
--add-module=/root/lua-nginx-module-0.8.5/

make && make install

拷贝 lua 的 memcached 操作库文件

tar xvf v0.11.tar.gz

cp -r lua-resty-memcached-0.11/lib/resty/ /usr/lib64/lua/5.1/

配置 nginx

#vim /soft/nginx/conf/nginx.conf
worker_processes  1;
events {
    worker_connections  1024;
}
http {
    include       mime.types;
    default_type  application/octet-stream;
    sendfile        on;
    keepalive_timeout  65;

    proxy_next_upstream     error timeout;
    proxy_redirect          off;
    proxy_set_header        Host $host;
    proxy_set_header        X-Real-IP $http_x_forwarded_for;
    proxy_set_header        X-Forwarded-For $proxy_add_x_forwarded_for;

    client_max_body_size    100m;
    client_body_buffer_size 256k;

    proxy_connect_timeout   180;
    proxy_send_timeout      180;
    proxy_read_timeout      180;
    proxy_buffer_size       8k;
    proxy_buffers       8 64k;
    proxy_busy_buffers_size 128k;
    proxy_temp_file_write_size 128k;

     upstream client {
        server   192.168.200.29:80;
    }
    upstream client_test {
       server   192.168.200.29:81;
    }

    server {
      listen       80;
      server_name  localhost;
       location / {
       content_by_lua '
            clientIP = ngx.req.get_headers()["X-Real-IP"]
            if clientIP == nil then
                clientIP = ngx.req.get_headers()["x_forwarded_for"]
            end
            if clientIP == nil then
                clientIP = ngx.var.remote_addr
            end
                local memcached = require "resty.memcached"
                local memc, err = memcached:new()
                if not memc then
                    ngx.say("failed to instantiate memc: ", err)
                    return
                end
                local ok, err = memc:connect("127.0.0.1", 11211)
                if not ok then
                    ngx.say("failed to connect: ", err)
                    return
                end
                local res, flags, err = memc:get(clientIP)
                if err then
                    ngx.say("failed to get clientIP ", err)
                    return
                end
                if res == "1" then
                    ngx.exec("@client_test")
                    return
                end
                 ngx.exec("@client")             
               ';
       }
       location @client{
           proxy_pass http://client;
       }
      location @client_test{
           proxy_pass http://client_test;
       }

    location /hello {
       default_type 'text/plain';
      content_by_lua 'ngx.say("hello, lua")';
    }

    location = /50x.html {
        root   html;
    }
   }
}

检测配置文件。

#/soft/nginx/sbin/nginx -t

nginx: the configuration file /soft/nginx/conf/nginx.conf syntax is ok

nginx: configuration file /soft/nginx/conf/nginx.conf test is successful

启动nginx

/soft/nginx/sbin/nginx

启动 memcached 服务

memcached -u nobody -m 1024 -c 2048 -p 11211 –d

三、测试验证

测试lua模块是否运行正常

访问http://测试服务器ip地址/hello。如果显示:hello,lua 表示安装成功。

在另一台测试机(这里是192.168.200.29)设置两个虚拟主机,一个用80端口是执行正常代码,一个是81端口执行灰度测试代码。

在memcached中以你的客户机IP地址为key,value值为1。这里我的IP是192.168.68.211.

telnet localhost 11211
Trying ::1...
Connected to localhost.
Escape character is '^]'.
set 192.168.68.211 0 3600 1
1
STORED
get 192.168.68.211
VALUE 192.168.68.211 9 1
1
END
quit

注意:

  • set后第一个值为key值。
  • 192.168.68.211这是key值是需要灰度测试的IP地址;
  • 0 表示一个跟该key有关的自定义数据;
  • 3600 表示该key值的有效时间;
  • 1 表示key所对应的value值的字节数。

下面访问 Nginx,效果符合预期,我的IP已经在 memcached 中存储值,所以请求转发给执行灰度测试代码的主机。

从memcached删除我的主机IP值。

再次请求Nginx,请求转发给执行正常代码内容的主机。

整个配置并不复杂,整个判断过程对服务的影响非常小。如果需要使用这个系统最好自己看看lua脚本。

作者:文彪 原文:https://www.cnblogs.com/wenbiao/p/3227998.html

本文分享自微信公众号 - DevOps时代(DevOpsTimes),作者:文彪

原文出处及转载信息见文内详细说明,如有侵权,请联系 yunjia_community@tencent.com 删除。

原始发表时间:2020-06-08

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

我来说两句

0 条评论
登录 后参与评论

相关文章

  • 中国银行 DevOps 历程、 效果及展望

    ? 讲师 | 张新 编辑 | 白凡 作者简介: ? 个人简介:张新,曾从事中国银行软件设计开发工作,熟悉银行业务系统和开发过程;现作为中国银行软件中心DevO...

    DevOps时代
  • DevOps 三步工作法之持续反馈的技术与案例

    导言 很高兴参与DevOps时代社区的拆书联盟第一季活动,有幸能与几位DevOps大牛一起解读《DevOps Handbook》一书,这本书作者牛,内容也很牛,...

    DevOps时代
  • Jenkins 中如何实现参数联动构建

    日常编写pipeline的时候,有时候会遇到针对参数作出处理(联动,校验值格式等)。一开始想到的是能不能针对build按钮作出改变,比如我在提交的时候校验下参数...

    DevOps时代
  • 百度理财如何玩转社交营销?玩法比收益率更重要

    节日是品牌的营销盛宴,人工造节也已是互联网巨头的拿手好戏——除了阿里双11、京东618,还有类似于微信支付的“无现金日”,百度打造的三七女生节,O2O平台们联手...

    罗超频道
  • 超越村后端开发(7:修改完善代码(持续更新))

    玩蛇的胖纸
  • Vue3.0 beta源码学习笔记(二)

    在进入effect后首先把effect包装成响应式的effect,并且为了后边的使用会通过配置参数对其包装。

    用户7572539
  • 百度金融独立分拆,不过朱光透露的这个信息更值得关注

    节前,百度正式宣布旗下金融服务事业群组(FSG)融资19亿美元独立拆分,拆分后新公司将启用全新品牌“度小满”。度小满金融CEO由百度高级副总裁、FSG当家人朱光...

    罗超频道
  • MediaPlayer 的学习总结

    在用 Android 的 MediaPlayer 做 音频播放器 开发时,遇到了一些问题,在此总结。

    tonglei0429
  • Python深度学习的十大入门视频教程

    人工智能无疑是2017年最火爆的技术,许多外行的朋友想学习却不知道从何下手,所以特意将此文翻译过来,供大家参考。可以在短期之内进入这个领域。这些视频大多数都可以...

    企鹅号小编
  • 站在更高的角度,看微服务架构的理论基础

    微服务是近些年非常火热的新概念,大家都在追,也都觉得很对,但是似乎没有很充足的理论基础说明这是正确的,给人的感觉是 不明觉厉 。前段时间看了Mike Amund...

    李红

扫码关注云+社区

领取腾讯云代金券