简体中文(ZH-CN) English(EN) 繁体中文(ZH-TW) 日本語(JA) 한국어(KO) Melayu(MS) Français(FR) Deutsch(DE)
python - requests.get使用代理能转发http头部吗
巴扎黑
巴扎黑 2017-04-18 09:52:20
0
1
289

需要爬取的网页需要登陆才可以获取，但是又对爬取ip有限制，所以我想要使用代理ip进行爬取；
但是我在request的session中使用proxy后无法爬取到有信息的网页，所以猜想可能是代理地址没有进行头部转发，这里想请教一下大家！

巴扎黑
巴扎黑

全部回覆 (1)
迷茫
迷茫2017-04-18 09:54:20 1樓

如果是從某個代理ip網站上抓取的ip，絕大部分是不可用的，可用的也因為超時等原因影響程序的穩定性，requests會自動幫你對HTTP頭部的處理了，不存在你猜想的問題，應該是你代理ip的問題，看看我的使用代理ip

點贊+0
新增回覆
    熱門專題
    更多>
    熱門文章
    熱門教學
    更多>
    相關教學
    熱門推薦
    最新課程
    最新下載
    更多>
    網站特效
    網站源碼
    網站素材
    前端模板
    關於我們 免責聲明 Sitemap
    PHP中文網：公益線上PHP培訓，幫助PHP學習者快速成長！