进程占用cpu资源过多负载高的原因分析及解决步骤-阿里云开发者社区

开发者社区> 科技小能手> 正文

进程占用cpu资源过多负载高的原因分析及解决步骤

简介:
+关注继续查看

觉得写的非常好,以后会用到 ,所以转了过来,一切归原作者所有!

转自这里

服务器环境:redhat linux 5.5 , nginx , phpfastcgi 

在此环境下,一般php-cgi运行是非常稳定的,但也遇到过php-cgi占用太多cpu资源而导致服务器响应过慢,我所遇到的php-cgi进程占用cpu资源过多的原因有: 

1. 一些php的扩展与php版本兼容存在问题,实践证明 eAccelerater与某些php版本兼容存在问题,具体表现时启动php-cgi进程后,运行10多分钟,奇慢无比,但静态资源访问很快,服务器负载也很正常(说明nginx没有问题,而是php-cgi进程的问题),解决办法就是从php.ini中禁止掉eAccelerater模块,再重启 php-cgi进程即可 

2. 程序中可能存在死循环,导致服务器负载超高(使用top指令查看负载高达100+), 需要借助Linux的proc虚拟文件系统找到具体的问题程序 

3. php程序不合理使用session , 这个发生在开源微博记事狗程序上,具体表现是有少量php-cgi进程(不超过10个)的cpu使用率达98%以上, 服务器负载在4-8之间,这个问题的解决,仍然需要借助Linux的proc文件系统找出原因。 

4. 程序中存在过度耗时且不可能完成的操作(还是程序的问题),例如discuz x 1.5的附件下载功能: source/module/forum/forum_attachement.php中的定义


  1. function getremotefile($file) { 
  2. global $_G; 
  3. @set_time_limit(0); 
  4. if(!@readfile($_G['setting']['ftp']['attachurl'].'forum/'.$file)) { 
  5. $ftp = ftpcmd('object'); 
  6. $tmpfile = @tempnam($_G['setting']['attachdir'], ''); 
  7. if($ftp->ftp_get($tmpfile, 'forum/'.$file, FTP_BINARY)) { 
  8. @readfile($tmpfile); 
  9. @unlink($tmpfile); 
  10. } else { 
  11. @unlink($tmpfile); 
  12. return FALSE; 
  13. return TRUE; 
  14. }  


没有对传入的参数作任何初步检查,而且设置了永不超时,并且使用readfile一次读取超大文件,就可能存在以下问题: 
A. 以http方式读取远程附件过度耗时 
B. FTP无法连接时,如何及时反馈出错误? 
C. readfile是一次性读取文件加载到内存中并输出,当文件过大时,内存消耗惊人 

根据实验发现采用readfile一次性读取,内存消耗会明显增加,但是CPU的利用率会下降较多。如果采用分段读取的方式,内存消耗会稍微下降,而CPU占用却会明显上升。 

对discuz x 1.5的这个bug较好解决方法就是后台重新正确设置远程附件参数。 

以下是我逐步整理的故障排除步骤: 

1. 得到占用cpu资源过多的php-cgi进程的pid(进程id), 使用top命令即可,如下图: 
经过上图,我们发现,有两个php-cgi进程的cpu资源占用率过高,pid分别是10059,11570,这一般都是程序优化不够造成,如何定位问题的php程序位置? 

2. 找出进程所使用的文件 
/proc/文件系统保存在内存中,主要保存系统的状态,关键配置等等,而/proc/目录下有很多数字目录,就是进程的相关信息,如下图,我们看看进程10059正在使用哪些文件? 

显然,使用了/home/tmp/sess_*文件,这明显是PHP的session文件, 我们查看这个session文件的内容为:view_time|123333312412 

到这里,我们已经可以怀疑是由于php程序写入一个叫view_time的session项而引起, 那么剩余的事件就是检查包含view_time的所有php文件,然后修改之(比如改用COOKIE),这实话, 这个view_time并非敏感数据,仅仅记录用户最后访问时间,实在没必要使用代价巨大的session, 而应该使用cookie。 

3. 找出有问题的程序,修改之 
使用vi编辑以下shell程序(假设网站程序位于/www目录下) 


  1. #!/bin/bash 
  2. find /www/ -name "*.php" > list.txt 
  3.  
  4. f=`cat ./list.txt` 
  5.  
  6. for n in $f 
  7. do 
  8. r=`egrep 'view_time' $n` 
  9. if [ ! "$r" = "" ] ; then 
  10. echo $n 
  11. fi 
  12. done  

运行这个shell程序,将输出包含有view_time的文件, 对记事狗微博系统,产生的问题位于modules/topic.mod.class文件中

来自这里


  1. 大家好,公司有一台服务器上部署了mysql+php+apache! 
  2. 但是发现apache有一个httpd进程占用很高的cup,请教有没有什么命令能查看到时什么文件调用了这个进程? 
  3.  
  4. lsof -p 13321 

 

本文转自 dongnan 51CTO博客,原文链接:http://blog.51cto.com/dngood/692615


版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。

相关文章
RocketMQ 消息发送system busy、broker busy原因分析与解决方案
1、现象 最近收到很多RocketMQ使用者,反馈生产环境中在消息发送过程中偶尔会出现如下4个错误信息之一:1)[REJECTREQUEST]system busy, start flow control for a while2)too many requests and system thre.
1597 0
Ubuntu系统进程绑定CPU核
版权声明:本文为博主chszs的原创文章,未经博主允许不得转载。 https://blog.csdn.net/chszs/article/details/47278019 Ubuntu系统进程绑定CPU核 作者:chszs,版权所有,未经同意,不得转载。
803 0
【AIX 学习】内存和CPU消耗进程排序
(1)显示10个消耗cpu最多的进程ufserver[/]#ps aux|head -1ufserver[/]#ps aux |sort -rn +2|head -10USER        PID %CPU %MEM   SZ  RSS    TTY STAT    STIME  TIME COMMANDroot       8196 12.
769 0
SAS进阶《深入解析SAS》之SAS数据挖掘的一般流程
SAS进阶《深入解析SAS》之SAS数据挖掘的一般流程 1. 所谓数据挖掘,是指通过对大量的数据进行选择、探索与建模,来揭示包含在数据中以前不为人所知的模式或规律,从而为商业活动或科学研究提供帮助和服务。 2. 数据挖掘重要的两个类别:有监督分析(SupervisedAnalysis),无监督分析(UnsupervisedAnalysis)。 有监督分析属于目标
1072 0
在python中单线程,多线程,多进程对CPU的利用率实测以及GIL原理分析
首先关于在python中单线程,多线程,多进程对cpu的利用率实测如下:   单线程,多线程,多进程测试代码使用死循环。   1)单线程:   2)多线程:   3)多进程:   查看cpu使用效率:   开始观察分别执行时候cpu的使用效率: 1)单线程执行的时候:   2)多线程执行的时候:   3)多进程执行的时候:   总结: 1)单进程单线程时,对于双核CPU的利用率只能利用一个核,没有充分利用两个核。
1928 0
14527
文章
0
问答
文章排行榜
最热
最新
相关电子书
更多
文娱运维技术
立即下载
《SaaS模式云原生数据仓库应用场景实践》
立即下载
《看见新力量:二》电子书
立即下载