windows - Python爬虫爬资源时由于连接方在一段时间后没有正确答复或连接的主机没有反应,连接尝试失败。怎么破?
迷茫
迷茫 2017-04-18 10:14:55
0
2
4429
迷茫
迷茫

业精于勤,荒于嬉;行成于思,毁于随。

全部回复(2)
小葫芦

可以换用scrapy框架来实现爬虫,可以实现抓取失败尝试3次,如果还失败可以自定义写进日志里面,后边自己再慢慢处理

PHPzhong

requests.get有超时参数。

 a = requests.get("http://www.baidu.com",timeout = 500)
热门教程
更多>
最新下载
更多>
网站特效
网站源码
网站素材
前端模板