TCP: time wait bucket table overflow解決方法

隨着訪問量的增大，系統默認的承受能力達到上限，系統日誌頻繁出現。/var/log/messages中常見的「kernel: TCP: time wait bucket table overflow」這個信息，會發現每隔5s就會報出幾行。此時查看鏈接狀態以下：

[root@IPTV001 ~]# netstat -an | awk '{print $6}' | sort | uniq -c | sort -rn
   6216 TIME_WAIT
     30 LISTEN
     21 ESTABLISHED
     20 CONNECTED
     14 
      4 STREAM
      2 FIN_WAIT1
      1 I-Node
      1 Foreign
      1 FIN_WAIT2
      1 established)
      1 CLOSE_WAIT
      1 and
      1 987101641
      1 8614
      1 8613
      1 8597
能夠看見 TIME_WAIT值仍是比較大的 

修改 vi /etc/sysctl.conf

net.ipv4.tcp_syncookies = 1
kernel.msgmnb = 65536
kernel.msgmax = 65536
kernel.shmmax = 68719476736
kernel.shmall = 4294967296
fs.file-max=65535
fs.inotify.max_user_instances = 8192
net.ipv4.tcp_fin_timeout = 30
net.ipv4.tcp_tw_reuse = 1
net.ipv4.tcp_tw_recycle = 1
net.ipv4.ip_local_port_range = 1024 65000
net.ipv4.tcp_max_syn_backlog = 65536
net.ipv4.tcp_max_tw_buckets = 20000
net.ipv4.route.gc_timeout = 100
net.ipv4.tcp_syn_retries = 1
net.ipv4.tcp_synack_retries = 1
net.core.somaxconn = 65535
net.core.netdev_max_backlog = 262144
net.ipv4.tcp_timestamps = 0
net.ipv4.tcp_max_orphans = 262144
net.netfilter.nf_conntrack_max = 1048576
net.netfilter.nf_conntrack_tcp_timeout_established = 1200

　說明：
　　net.ipv4.tcp_syncookies = 1 表示開啓SYN Cookies。當出現SYN等待隊列溢出時，啓用cookies來處理，可防範少許SYN攻擊，默認爲0，表示關閉；
　　net.ipv4.tcp_tw_reuse = 1 表示開啓重用。容許將TIME-WAIT sockets從新用於新的TCP鏈接，默認爲0，表示關閉；
　　net.ipv4.tcp_tw_recycle = 1 表示開啓TCP鏈接中TIME-WAIT sockets的快速回收，默認爲0，表示關閉。
　　net.ipv4.tcp_fin_timeout = 30 表示若是套接字由本端要求關閉，這個參數決定了它保持在FIN-WAIT-2狀態的時間。
　　net.ipv4.tcp_keepalive_time = 1200 表示當keepalive起用的時候，TCP發送keepalive消息的頻度。缺省是2小時，改成20分鐘。
　　net.ipv4.ip_local_port_range = 1024 65000 表示用於向外鏈接的端口範圍。缺省狀況下很小：32768到61000，改成1024到65000。
　　net.ipv4.tcp_max_syn_backlog = 65536 表示SYN隊列的長度，默認爲1024，加大隊列長度爲65536，能夠容納更多等待鏈接的網絡鏈接數。
　 　net.ipv4.tcp_max_tw_buckets = 20000 表示系統同時保持TIME_WAIT套接字的最大數量，若是超過這個數字，TIME_WAIT套接字將馬上被清除並打印警告信息。默認爲180000，改 爲5000。對於Apache、Nginx等服務器，上幾行的參數能夠很好地減小TIME_WAIT套接字數量，可是對於Squid，效果卻不大。此項參 數能夠控制TIME_WAIT套接字的最大數量，避免Squid服務器被大量的TIME_WAIT套接字拖死。

　　執行如下命令使配置生效：

sysctl -p

觀察幾分鐘後，報錯消失，TIME_WAIT鏈接數減小了。

root@IPTV001 ~]# netstat -an | awk '{print $6}' | sort | uniq -c | sort -rn
   4962 TIME_WAIT
     30 LISTEN
     22 ESTABLISHED
     20 CONNECTED
     14 
      4 STREAM
      2 FIN_WAIT1
      1 I-Node
      1 Foreign
      1 established)
      1 and
      1 987101641
      1 8614
      1 8613
      1 8597