84669 人學習
152542 人學習
20005 人學習
5487 人學習
7821 人學習
359900 人學習
3350 人學習
180660 人學習
48569 人學習
18603 人學習
40936 人學習
1549 人學習
1183 人學習
32909 人學習
认证0级讲师
这有个用scrapy爬取https的解决方法:http://stackoverflow.com/questions/23958073/scrapy-not-scraping-https
用Scrapy对https是不行的,你可以用Facebook的SDK
https://github.com/pythonforfacebook/facebook-sdk
到最后发现是proxy的问题。线上测试就没问题
这有个用scrapy爬取https的解决方法:http://stackoverflow.com/questions/23958073/scrapy-not-scraping-https
用Scrapy对https是不行的,你可以用Facebook的SDK
https://github.com/pythonforfacebook/facebook-sdk
到最后发现是proxy的问题。线上测试就没问题