前端负载一台,做用是客户端发起一条http请求到前端负载均衡服务器,而后负载层根据web server已定义的轮询算法,把各消息原封不动的转发到后段的各web server上,压力这块不是很大,由于都转到后端了。
可是有个问题,客户端在发起一条http请求到前端负载层的时候,一分钟内这个请求数会达到惊人的几十万条不等(项目业务须要,客户端自身须要把金额等数据同步到各项目服务器上),基本是客户端对服务端发起的同步请求,还有其它的对web站点的访问请求。而后可能有些同步请求不是必须也不须要那么频繁或者是在这个时间内根本不须要把数据同步上来。固鉴于此就想着看能不能在前端负载层作个并发控制,对这个传过来的客户端IP作个操做。当这个IP请求次数大于内部设定的某个值的时候就让它拒绝访问服务器,这样的话服务器在处理消息的时候也会更加有效率,也能起到必定的宫级做用。想了想应该能够实现,因此才有了下面的脚本。记录下来供各位小伙伴参考下......前端
#!/bin/bash #Author:You Names #Contact Mail:455436588@qq.com #Version:3.0 #Company:COMPANY #Create time:2019-07-17 17:31:58 #Description:Nginx server concurrency restrictions Max=100000 CFS=/usr/local/nginx/conf/nginx.conf LOGS=/usr/local/nginx/logs/access.log #执行循环体 #过滤出access.log日志里所定义的'$remote_addr'地址。重复的打印出来并排序; cat $LOGS | awk '{print $2}' | sort -n | uniq -c | sort -rn | head -n 10 | while read line do #定义变量$IP,打印出是哪一个IP; IP=`echo "$line" | awk '{print $2}'` #定义变量$Count,打印出这个IP出现的次数; Count=`echo "$line" | awk '{print $1}'` #定义变量$Docs,值为nginx的配置文件; Docs=${cat $CFS} #定义变量$CFG,看配置文件里有没有这个IP; CFG=`echo "$Docs" | grep "${IP}"` #判断,若是$Count的值大于$Max的值,而且在$CFG里为空,不是这也不是那,执行替换并写入到$Docs指定location下作deny操做,重载并continue; if [[ $Count -gt $Max ]] && [[ $CFG == " " ]] && [[ $IP != "IP ADDRESS" ]] && [[ $IP != "IP ADDRESS" ]] then sed -i '/location \/ {/a\deny '${IP}';' $CFS sed -i '/location \/pads {/a\deny '${IP}';' $CFS sed -i '/location \~\* \\\.ios\$ {/a\deny '${IP}';' $CFS sed -i '/location \~\* \\\.android\*\$ {/a\deny '${IP}';' $CFS /usr/local/nginx/sbin/nginx -t && /usr/local/nginx/sbin/nginx -s reload && echo "SUCCESS!!" else continue fi done