本人微信公众号"aeolian"~

CentOS出现内存溢出

出现状况

网站挂了,ssh也连不上,登上百度云管理中心使用VNC控制台一看,一直报内存溢出,问题出在httpd。

《CentOS出现内存溢出》

free -m 查看内存,正常的话可以适当增加swap。

top查看发现cpu的wa占用比较高,全是IO等待占用CPU的百分比,下面出现一堆httpd。

查看下httpd的进程

ps查看进程

ps -aux |grep httpd

查看一下httpd有好多进程

《CentOS出现内存溢出》

 

 

 top查看进程

top |grep httpd

不仅有很多还一直增加httpd

《CentOS出现内存溢出》

很明显是被SYN Flood攻击。

 

 

lsof -p 查看pid的文件,找到其中的access_log文件。

《CentOS出现内存溢出》

 

 

tail -f /var/log/httpd/access_log查看访问文件并找到请求服务器的对方ip

找到后可以重启服务器。

killall -9 httpd , service httpd start 强制杀掉http进程,再重新启动。

预防攻击

能够有效防范SYN Flood攻击的手段之一,就是SYN Cookie

查看TCP TIME_WAIT套接字数量。通过修改Linux内核参数,可以减少服务器的TIME_WAIT套接字数量。如果数值很大很容易被拖死。

netstat -an | grep "TIME_WAIT" | wc -l

修改配置文件vi /etc/sysctl.conf,添加如下代码

net.ipv4.tcp_fin_timeout = 30
net.ipv4.tcp_keepalive_time = 1200
net.ipv4.tcp_syncookies = 1
net.ipv4.tcp_tw_reuse = 1
net.ipv4.tcp_tw_recycle = 1
net.ipv4.ip_local_port_range = 1024    65000
net.ipv4.tcp_max_syn_backlog = 8192
net.ipv4.tcp_max_tw_buckets = 5000
net.ipv4.tcp_synack_retries = 2
net.ipv4.tcp_syn_retries = 2

说明:

net.ipv4.tcp_syncookies = 1 表示开启SYN Cookies,这是个BOOLEAN。当出现SYN等待队列溢出时,启用cookies来处理,可防范少量SYN***,默认为0,表示关闭;
net.ipv4.tcp_tw_reuse = 1 表示开启重用,这是个BOOLEAN。允许将TIME-WAIT sockets重新用于新的TCP连接,默认为0,表示关闭;
net.ipv4.tcp_tw_recycle = 1 表示开启TCP连接中TIME-WAIT sockets的快速回收,这是个BOOLEAN,默认为0,表示关闭。
net.ipv4.tcp_fin_timeout = 30 表示如果套接字由本端要求关闭,这个参数决定了它保持在FIN-WAIT-2状态的时间。单位为秒。
net.ipv4.tcp_keepalive_time = 1200 表示当keepalive起用的时候,TCP发送keepalive消息的频度。缺省是2小时,改为20分钟。单位为秒。
net.ipv4.ip_local_port_range = 1024    65000 表示用于向外连接的端口范围。缺省情况下很小:32768到61000,改为1024到65000。
net.ipv4.tcp_max_syn_backlog = 8192 表示SYN队列的长度,默认为1024,加大队列长度为8192,可以容纳更多等待连接的网络连接数。 
net.ipv4.tcp_max_tw_buckets = 5000 表示系统同时保持TIME_WAIT套接字的最大数量,如果超过这个数字,TIME_WAIT套接字将立刻被清除并打印警告信息。默认为180000,改为5000。对于Apache、Nginx等服务器,上几行的参数可以很好地减少TIME_WAIT套接字数量,但是对于Squid,效果却不大。此项参数可以控制TIME_WAIT套接字的最大数量,避免Squid服务器被大量的TIME_WAIT套接字拖死。
net.ipv4.tcp_synack_retries和net.ipv4.tcp_syn_retries是定义SYN重试次数。

执行代码使配置生效

/sbin/sysctl -p

 

点赞

Leave a Reply

Your email address will not be published. Required fields are marked *