客户网站访问慢分析和排查过程
近日本人维护的一个客户网站打开非常慢,于是便按照以往的排查步骤进行排查
1,登录服务器top命令查看负载IO情况发现负载有点高并有很多php进程占了很大的资源
2,进入mysql服务器查看数据库线程,并没有发现锁表情况。
3,打开web访问日志发现有很多百度爬虫访问。导致点了很多php资源
解决方案:
1,禁用爬虫(不利于SEO)
在nginx配置文件中加入
if ( $http_user_agent ~ Baiduspider ){return 503;}
if ( $http_user_agent ~ EtaoSpider ){return 503;}
if ( $http_user_agent ~ Googlebot ){return 503;}
if ( $http_user_agent ~ " bingbot" ){return 503;}
据说返回503是跟据seo考虑的
2,通过nginx判断是否是百度爬虫如果是就访问缓存
郑重声明:本站内容如果来自互联网及其他传播媒体,其版权均属原媒体及文章作者所有。转载目的在于传递更多信息及用于网络分享,并不代表本站赞同其观点和对其真实性负责,也不构成任何其他建议。