• OpenResty(Nginx+Lua)高并发最佳实践


    OpenResty(Nginx+Lua)高并发最佳实践


    分类专栏: OpenResty 文章标签: OpenResty 高并发 Lua nginx执行lua
    版权
    文章目录
    OpenResty简介
    Nginx优点
    Lua基础学习
    环境搭建
    window下环境搭建
    Linux(CentOS 7)下环境搭建
    linux下ab性能测试
    总结
    优点
    缺点
    可适用的场景
    OpenResty简介
    以下内容来源与OpenResty官网,更多信息可进入官网了解
    OpenResty® 是一个基于 Nginx 与 Lua 的高性能 Web 平台,其内部集成了大量精良的 Lua 库、第三方模块以及大多数的依赖项。用于方便地搭建能够处理超高并发、扩展性极高的动态 Web 应用、Web 服务和动态网关。

    OpenResty® 通过汇聚各种设计精良的 Nginx 模块(主要由 OpenResty 团队自主开发),从而将 Nginx 有效地变成一个强大的通用 Web 应用平台。这样,Web 开发人员和系统工程师可以使用 Lua 脚本语言调动 Nginx 支持的各种 C 以及 Lua 模块,快速构造出足以胜任 10K 乃至 1000K 以上单机并发连接的高性能 Web 应用系统。

    OpenResty® 的目标是让你的Web服务直接跑在 Nginx 服务内部,充分利用 Nginx 的非阻塞 I/O 模型,不仅仅对 HTTP 客户端请求,甚至于对远程后端诸如 MySQL、PostgreSQL、Memcached 以及 Redis 等都进行一致的高性能响应

    Nginx优点
    可参考以下文章
    https://blog.csdn.net/nangeali/article/details/60143560

    Lua基础学习
    可参考菜鸟教程

    环境搭建
    window下环境搭建
    资源下载
    本人电脑64位操作系统,这里下载windows 32位的版本,后续有他用
    点击下载32位版
    64位版下载

    解压压缩包


    创建lua目录源文件目录,用于写测试脚本
    进入lualib目录,创建testcode目录


    编写测试lua脚本
    在testcode目录下创建testlua.lua,并编写以下脚本信息

    --用于接收前端数据的对象
    local args=nil
    --获取前端的请求方式 并获取传递的参数
    local request_method = ngx.var.request_method
    --判断是get请求还是post请求并分别拿出相应的数据
    if"GET" == request_method then
    args = ngx.req.get_uri_args()
    elseif "POST" == request_method then
    ngx.req.read_body()
    args = ngx.req.get_post_args()
    --兼容请求使用post请求,但是传参以get方式传造成的无法获取到数据的bug
    if (args == nil or args.data == null) then
    args = ngx.req.get_uri_args()
    end
    end

    --获取前端传递的name值
    local name = args.name
    --响应前端
    ngx.say("hello:"..name)
    1
    2
    3
    4
    5
    6
    7
    8
    9
    10
    11
    12
    13
    14
    15
    16
    17
    18
    19
    20


    编辑nginx配置
    按以下目录编辑对应配置文件

    在80的server中添加以下配置:

    location /luatest
    {
    default_type text/html;
    #这里的lua文件的路径为绝对路径,请根据自己安装的实际路径填写
    #记得斜杠是/这个。从window中拷贝出来的是这样,这样是有问题的,务必注意
    content_by_lua_file F:/DATA/software/other/openresty-1.13.6.2-win32/lualib/testcode/testlua.lua;
    }
    1
    2
    3
    4
    5
    6
    7


    启动服务openresty的Nginx服务

    进入cmd,并进入到openresty对应的目录
    使用nginx -t 检测nginx的配置是否正确

    启动nginx服务


    测试nginx是否正常
    打开浏览器,输入:http://127.0.0.1/ ,得到以下界面说明Nginx配置正常且已经正常运行


    测试OpenResty
    打开浏览器,输入:http://127.0.0.1/luatest?name=openresty

    到这里,window下的OpenResty环境即搭建完成

    Linux(CentOS 7)下环境搭建
    更多linux版本下的源码安装,请参考官网
    你可以在你的 CentOS 系统中添加 openresty 仓库,这样就可以便于未来安装或更新我们的软件包(通过 yum update 命令)。

    运行下面的命令就可以添加openresty 的仓库:

    sudo yum install yum-utils
    sudo yum-config-manager --add-repo https://openresty.org/package/centos/openresty.repo
    1
    2
    然后就可以像下面这样安装软件包,比如 openresty:

    sudo yum install openresty
    1
    如果你想安装命令行工具 resty,那么可以像下面这样安装 openresty-resty 包:

    sudo yum install openresty-resty
    1
    命令行工具 opm 在 openresty-opm 包里,而 restydoc 工具在 openresty-doc 包里头。
    列出所有 openresty 仓库里头的软件包:

    sudo yum --disablerepo="*" --enablerepo="openresty" list available
    1
    添加lua的脚本目录
    cd /usr/local/openresty/lualib/
    mkdir testcode
    cd testcode

    创建测试lua脚本
    cd /usr/local/openresty/lualib/testcode
    vim testlua.lua
    添加以下脚本内容

    --用于接收前端数据的对象
    local args=nil
    --获取前端的请求方式 并获取传递的参数
    local request_method = ngx.var.request_method
    --判断是get请求还是post请求并分别拿出相应的数据
    if"GET" == request_method then
    args = ngx.req.get_uri_args()
    elseif "POST" == request_method then
    ngx.req.read_body()
    args = ngx.req.get_post_args()
    --兼容请求使用post请求,但是传参以get方式传造成的无法获取到数据的bug
    if (args == nil or args.data == null) then
    args = ngx.req.get_uri_args()
    end
    end

    --获取前端传递的name值
    local name = args.name
    --响应前端
    ngx.say("linux hello:"..name)
    1
    2
    3
    4
    5
    6
    7
    8
    9
    10
    11
    12
    13
    14
    15
    16
    17
    18
    19
    20
    保存:wq!

    配置ngnix关联lua文件
    cd /usr/local/openresty/nginx/conf/
    vi nginx.conf
    在80的server中添加以下配置信息

    location /luatest
    {
    default_type text/html;
    #这里的lua文件的路径为绝对路径,请根据自己安装的实际路径填写
    #记得斜杠是/这个。
    content_by_lua_file /usr/local/openresty/lualib/testcode/testlua.lua;
    }
    1
    2
    3
    4
    5
    6
    7


    启动nginx服务
    cd /usr/local/openresty/nginx
    sbin/nginx


    测试nginx是否正常
    打开浏览器,输入linux的ip地址,如:http://192.168.1.130/ 显示如下效果,说明nginx已经正常启动


    测试OpenResty是否正常
    打开浏览器,输入:http://192.168.1.130/luatest?name=openresty 显示如下效果,说明OpenResty正常

    linux下ab性能测试
    linux服务器环境说明
    测试使用的是window下安装的VM虚拟机,linux的硬件分配为1核 700兆内存

    linux下ab工具安装
    yum -y install httpd-tools

    查看ab版本
    ab -v


    压力测试

    1W并发
    ab -c 10000 -n 100000 127.0.0.1/luatest
    注:10000个并发,一共请求10万次
    测试结果:


    1.5W并发
    ab -c 15000 -n 100000 127.0.0.1/luatest


    2W并发
    ab -c 20000 -n 100000 127.0.0.1/luatest


    总结
    优点
    高并发
    根据以上的测试来看,一台1核700兆的linux虚拟机即可跑出2W的并发,足以说明OpenResty处理高并发的能力,由于ab工具的限制,只能测试上限2W的并发,因此,这里也只做到了2W的测试。

    热更新
    Lua属于脚本语言,编译之后即可运行;Nginx具备优雅重启的功能;因此,线上业务如果出现问题需要及时修复的,更新修改Lua脚本之后,重启Nginx即可完成更新发布;如果没有配置Lua缓存功能的话,只要更新Lua脚本即可更新修复线上问题,不重启Nginx也可以。

    缺点
    不适合处理复杂的业务逻辑
    由于功能性的东西主要使用Lua进行开发,受Lua语言特性的影响,不太适合做业务比较复杂的功能。

    互联网上资料比较少
    互联网上可以找的资料比较少;不过,本身Lua的学习过程不是特别的复杂,所以,这基本不会成为你学习它的障碍

    可适用的场景
    高访问下的应用及官网的主页
    如商城,咨询类的应用首页,会存在大量的请求,由于涉及到的内容比较多;所以可是私用预载入的形式,将主页的数据放置在redis中;使用OpenResty+redis实现首页,官网主页的高并发加载

    商城类的秒杀功能
    秒杀功能会存在短时间的请求洪峰,如果处理不当可能会造成down机的风险,可以结合OpenResty+redis实现秒杀的功能

    ip限流
    互联网系统可能存在非法用户恶意暴力请求,导致正常的用户无法使用,可以通过OpenResty+redis实现ip的白名单机制,去拦截非法的用户ip

    APP灰度升级发布
    可以根据系统的数据及条件实现APP的灰度升级测试

  • 相关阅读:
    drf认证组件
    播放音频
    推荐
    makefile编写
    qt文件操作mv
    qt文件http网络下载
    为qt在window上用源代码编译库 (部分转载)
    qt线程池(转)
    crc校验
    树莓派网络配置查询
  • 原文地址:https://www.cnblogs.com/fengkun125/p/14780842.html
Copyright © 2020-2023  润新知