简体中文(ZH-CN) English(EN) 繁体中文(ZH-TW) 日本語(JA) 한국어(KO) Melayu(MS) Français(FR) Deutsch(DE)
python - scrapy能爬取https的网页么
PHP中文网
PHP中文网 2017-04-17 13:58:59
0
3
490
PHP中文网
PHP中文网

认证0级讲师

全部回复 (3)
PHPzhong
PHPzhong2017-04-17 14:00:59 3 楼

这有个用scrapy爬取https的解决方法：http://stackoverflow.com/questions/23958073/scrapy-not-scraping-https

点赞+0
添加回复
    黄舟
    黄舟2017-04-17 14:00:59 2 楼

    用Scrapy对https是不行的，你可以用Facebook的SDK

    https://github.com/pythonforfacebook/facebook-sdk

    点赞+0
    添加回复
      Peter_Zhu
      Peter_Zhu2017-04-17 14:00:59 1 楼

      到最后发现是proxy的问题。线上测试就没问题

      点赞+0
      添加回复
        热门专题
        更多>
        热门文章
        热门教程
        更多>
        相关教程
        热门推荐
        最新课程
        最新下载
        更多>
        网站特效
        网站源码
        网站素材
        前端模板
        关于我们 免责声明 Sitemap
        PHP中文网：公益在线PHP培训，帮助PHP学习者快速成长！