python - requests.get使用代理能转发http头部吗
巴扎黑
巴扎黑 2017-04-18 09:52:20
0
1
357

需要爬取的网页需要登陆才可以获取,但是又对爬取ip有限制,所以我想要使用代理ip进行爬取;
但是我在request的session中使用proxy后无法爬取到有信息的网页,所以猜想可能是代理地址没有进行头部转发,这里想请教一下大家!

巴扎黑
巴扎黑

répondre à tous(1)
迷茫

Si l'adresse IP est capturée à partir d'un certain site Web IP proxy, la plupart d'entre elles sont indisponibles. Celles disponibles affectent également la stabilité du programme en raison du délai d'attente et d'autres raisons. Les requêtes vous aideront automatiquement à traiter l'en-tête HTTP. il n'y a pas de problème comme vous l'avez deviné, cela devrait être un problème avec votre adresse IP proxy, jetez un œil à mon adresse IP proxy

Derniers téléchargements
Plus>
effets Web
Code source du site Web
Matériel du site Web
Modèle frontal