ngx_lua_waf适应多站点情况的研究

zhangsan 2015-04-30 08:00:00

0x00 前言


在前一篇文章《基于ngx_lua模块的waf开发实践》(链接为:http://drops.wooyun.org/tips/5136)中,提出了后续的三个研究方向,其中一个就是在多站点下waf分离的研究,现在将这方面的研究跟大家分享一下。

0x01 问题分析


最初的思路是直接在nginx中配置多个站点,然后在每个站点中都加载一份waf代码。

流程图如下:

这样做的情况下,如果站点比较多,就会导致nginx配置比较乱,而且当nginx配置多站点的情况下,会出现一些问题。我这里就借用安全宝的一份对比表来说明。

当然,在实际应用中,一般并不会应用到这么多站点,这里只是做个说明。但是上面说的问题确实是存在的。

0x02 需求分析


需求1:在nginx中能够只监听1个站点,能够实现所有站点转发

需求2:各个站点可以独立进行控制,包括waf开发,日志开关以及使用的规则

0x03 需求实现


针对需求1,流程图如下:

nginx.conf关键代码:

waf.lua关键代码:

访问过程分析:

当一个用户访问到waf服务器时,首先获取host参数,根据网址配置里查询到对应的upstream,给预先定义的变量$upstream,从而达到正确转发的目的。

而且后期还可以将网站信息存储在数据库,当第一次访问的时候再加载到内存,达到动态加载的目的。

针对需求2:

网址配置代码如下:

规则配置代码如下:

这样可以给每一个网站单独配置规则集,并在网址配置里面注明即可。

在网址配置里面可以注明每个网站的waf开关,是否记录日志,以及哪个规则。

在规则配置中可以指定规则的放行或阻拦,日志的开启或关闭。

0x04 后续需解决问题


  • 此种方式是一种针对对站点的很好的思路,但此方式还是依赖在nginx中配置各站点的upstream,后续考虑直接在lua代码中配置。

  • 针对多站点的情况,最好能够结合数据库,将网站信息都存储在数据库中,实现动态加载。

  • 针对nginx每次变更需要reload,后期考虑写一个控制页面来动态的进行控制,比如规则的的开启或者关闭针对waf各种状态的展示以及日志的处理与展示

0x05 总结


此文只是提供一种思路,当然也不是我想出来的,也是参考各种资料,最主要的是针对现在各种大流量大并发的网络环境下,很多公司包括我们公司有这样一种需求,所以分享出来,希望和更多的人交流,学习。

评论

phith0n 2015-04-30 13:41:10

对的,简单一点的方法就是在lua里判断ngx.var.host再来加载规则防御

胡小树 2015-04-30 14:43:30

@phith0n 如果能有实际案例分析就好了

Z

zhangsan 2015-04-30 15:13:41

@phith0n 有没有办法做到upstream也在lua中控制,我想后做到动态加载站点,添加和删除站点都不用reload。现在的困难就是upstream必须写在nginx.conf上。

N

NaiBa 2015-05-04 11:02:57

其实我比较关心的是这个的性能怎么样! 现在做软件很重要一点就是性能。

Z

zhangsan 2015-05-04 12:38:49

@NaiBa 性能非常的好。。自己可以测试下。

超耐蘑 2015-05-07 16:53:31

站点情况复杂的还是分开比较好

路人甲 2015-11-11 11:35:49

set $upstream "";
proxy_pass http://$upstream;
这两句有问题,nginx会报错:[error] 9866#0: *231 invalid URL prefix in "http://"

路人甲 2016-03-17 20:39:18

@zhangsan 记得好像是新浪开源了一个产品就是支持upstream动态配置调整的,你可以找找看。

Z

zhangsan

http://www.zhangsan.me

twitter weibo github wechat

随机分类

数据安全 文章:29 篇
memcache安全 文章:1 篇
渗透测试 文章:154 篇
企业安全 文章:40 篇
区块链 文章:2 篇

扫码关注公众号

WeChat Offical Account QRCode

最新评论

K

k0uaz

foniw师傅提到的setfge当在类的字段名成是age时不会自动调用。因为获取

Yukong

🐮皮

H

HHHeey

好的,谢谢师傅的解答

Article_kelp

a类中的变量secret_class_var = "secret"是在merge

H

HHHeey

secret_var = 1 def test(): pass

目录