【转载】利用nginx+lua实现通用的请求输入输出日志打印

原文地址:利用nginx+lua实现通用的请求输入输出日志打印

利用nginx+lua实现通用的请求输入输出日志打印

nginx+lua在web开发中现在越来越多用于实现一些公共策略逻辑,比如防攻击等,nginx有着高性能高并发的处理框架,lua语言开发也简单,这次我们尝试在nginx层用lua实现我们请求日志的打印。

在开发调试、问题排查中,日志信息很重要,尤其是一个请求的输入及输出信息,但nginx本身的日志定义不能打印输出信息及POST参数,我们往往会在后端业务代码中(如用PHP)打印一个这样的notice日志,不过也可以在nginx中用lua中实现,所有经过这个nginx的请求日志都会按你想要的格式打印出来,这样实现简单而且统一。下面介绍下我在nginx中用lua实现的一个日志打印脚本。

nginx+lua的具体开发教程见这里 https://github.com/openresty/lua-nginx-module,我就不介绍了,下面主要是介绍一下实现代码:

我们要建立nginx各个处理阶段的代码文件,首先创建一个access.lua文件,代码如下:
 

if ngx.var.log_val ~= nil then
    local request = "["..ngx.var.time_local.."] ".."\""..ngx.var.request_method.." "..ngx.var.scheme.."://"..
                     ngx.var.host..ngx.var.request_uri.."\""
    local post = ""
    local delimiter = ""
    local item = ""
    ngx.req.read_body()
    local args, err = ngx.req.get_post_args()
    if args then
        for key, val in pairs(args) do
           item = ""
           if type(val) == "string" then
               key =  string.gsub(key,"%c"," ")
               val = string.gsub(val,"%c"," ")
               item = key.."="..val
           elseif type(val) == "table" then
               item = key.."="
               local tstr = "";
               local tdelimiter = ""
               for k, v in pairs(val) do
                   if type(v) == "string" then
                      tstr = tstr..tdelimiter..v
                      tdelimiter = ','
                   end
               end
               item = item..tstr
           end
           post = post..delimiter..item
           delimiter = "&"
        end
    end

    ngx.var.log_val = request.."      ".."  postdata=["..post.."]   output=["
end

这个文件主要是记录请求的时间、url及输入参数等信息,包括post数据

接着创建一个body_filter.lua文件,内容如下:

if ngx.var.log_val ~= nil then
    local newcontent = string.gsub(ngx.arg[1],"%c"," ")
    ngx.var.log_val = ngx.var.log_val..newcontent
end

这里记录输出信息,开发中发现ngx.arg[1]与任何字符串进行连接的话,日志打印都会打印两次,除了与内置log_val变量连接,原因可能跟内部跳转有关,所以这里就两行代码,不会有更多其它操作。

再创建一个log.lua文件,内容如下:

if ngx.var.log_val ~= nil then
    function mylog(msg)
        file = io.open ("/opt/lua/mytest/log/monitor.log","a+") -- 请确保你的此文件已存在,且拥有写权限
        file:write (msg)
        file:flush();
        file:close();
    end

    ngx.var.log_val = ngx.var.log_val.."]      httpstatus="..
                      ngx.var.status.." request_time="..ngx.var.request_time.."\n"
    mylog(ngx.var.log_val)
end

这里将拼接起来的各个日志信息写入文件。

创建了各个阶段的处理文件,将其加入nginx配置文件中,如下:

--我存放到/etc/nginx/conf.d/default.conf的 location =/mytest {} 这个里面了
......
 access_by_lua_file /opt/lua/mytest/access.lua;
 body_filter_by_lua_file  /opt/lua/mytest/body_filter.lua;
 log_by_lua_file /opt/lua/mytest/log.lua;
 .....

注意nginx配置中 client_body_buffer_size 与 client_max_body_size的值要设得一样大,且不能过小。

最后还要在server段定义一个变量,作为存储每条日志信息用

server{
     ......
     set $log_val '';
     ......
}

这样,有请求过来时,在 /opt/lua/mytest/log/monitor.log文件 中就可以很清楚地看到输入输出信息了。

我模拟的请求方式是,浏览器访问 http://xxx/mytest

你可能感兴趣的:(lua)