今日服务器流量监控发现2台下载服务器流量愈来愈低,到最后居然直接连不上了。html
通知机房排除机房缘由以后,连上系统查看日志,发现message里面不少kernel: ip_conntrack: table full, dropping packet.报错。sql
google了一下,发现也有其余人遇到相似问题,原来是ip_conntrack(链接跟踪表)中的数量过过多致使的,默认是65528。bash
wc -l /proc/net/ip_conntrack能够统计当前有多少个,超过65528就会kernel报错,cat /proc/sys/net/ipv4/ip_conntrack_max查看当前设置。服务器
解决办法:
增长ip_conntrack_max设置,能够在/etc/sysctl.conf文件中增长:
net.ipv4.ip_conntrack_max = 655280而后键入命令sysctl -p生效tcp
net.ipv4.netfilter.ip_conntrack_tcp_timeout_established=86400 设置链接跟踪表中失效时间为1天,若是以为一天仍是长的话能够改成3600(一小时)或者600(10分钟)ide
若是想当即降下来跟踪表中的链接能够尝试使用如下办法:
下载hping:
http://www.hping.org/download.html
./configure
make
make install
安装后写一个script.this
- #!/bin/bash
- echo
- echo "############################"
- echo "# Edit by Youngh 2003.06.24 v1.1 "
- echo "# Usage : clr_conns IpAddress"
- echo "# This will clear all connections from this IP_Address"
- echo "# Example:/root/clr_conns 10.0.3.3 "
- echo "############################"
- echo
- if [ -z $1 ] ; then
- exit
- fi
- grep -E "^tcp .{10,25}ESTABLISHED src=$1 " /proc/net/ip_conntrack | while read line ; do
- S_IP=`echo $line | awk '{print substr($5,5)}'`
- S_SOCK=`echo $line | awk '{print substr($7,7)}'`
- D_IP=`echo $line | awk '{print substr($6,5)}'`
- D_SOCK=`echo $line | awk '{print substr($8,7)}'`
- echo "$S_IP:$S_SOCK $D_IP:$D_SOCK"
- hping2 $D_IP -R -s $S_SOCK -p $D_SOCK -a $S_IP -k -c 1 >/dev/null 2>/dev/null &
- done