我要在命令行同时不间断地运行八九个python爬虫程序(爬不同的网站)?
迷茫
迷茫 2017-04-18 10:28:03
0
2
536

但是过一段时间总有一两个程序会无响应,好像是被挂起了,CPU占用率并不高,不到10%,内存占用也不算多,60%左右,爬虫程序是去批量下载文件,平均每个几兆到十几兆。我设置了这几个程序的优先级高于普通标准,但是还是会出现无响应的状况。版本 python 2.7

求问:这个问题算不算进程被挂起?以及应该如何解决这个问题?

谢谢!

迷茫
迷茫

业精于勤,荒于嬉;行成于思,毁于随。

모든 응답 (2)
阿神

这种问题得自己调,多打log

    左手右手慢动作

    Python 有 GIL

      최신 다운로드
      더>
      웹 효과
      웹사이트 소스 코드
      웹사이트 자료
      프론트엔드 템플릿
      회사 소개 부인 성명 Sitemap
      PHP 중국어 웹사이트:공공복지 온라인 PHP 교육,PHP 학습자의 빠른 성장을 도와주세요!