python爬虫 - python访问豆瓣突然遇到403forbidden,用过edge浏览器也无法访问?
高洛峰
高洛峰 2017-04-17 16:52:07
0
4
582

如题,使用requests访问,昨天写代码的时候两个多小时一直在访问豆瓣主页,没有什么问题,今天用相同的程序就变成了403forbidden,chrome、edge访问网址也变成了403forbidden..不知是什么原因..

高洛峰
高洛峰

拥有18年软件开发和IT教学经验。曾任多家上市公司技术总监、架构师、项目经理、高级软件工程师等职务。 网络人气名人讲师,...

全員に返信(4)
刘奇

Douban をクロールする方法を学ぶのは良いことです。適用したい場合は、Douban のオープン プラットフォーム http://developers.douban.com/

を使用してください。
いいねを押す +0
巴扎黑

逮捕が厳しすぎてDoubanから禁止されました~

いいねを押す +0
Peter_Zhu

UGC を作成するにはどれくらいの労力がかかりますか? どうすればそれを気軽に入手できるでしょうか?
高密度プロキシ IP を使用してキャプチャできます。以前に淘宝網のデータをキャプチャし、数回キャプチャした後に禁止しました。その後、プロキシを使用して問題を完全に解決しましたが、相手は禁止できませんでした。それはまったく。

いいねを押す +0
黄舟

Douban は Cookie を使用してクロール頻度を制限しています。Cookie を分析した結果、2 時間で 107 万ページがクロールされた可能性があります。

いいねを押す +0
人気のチュートリアル
詳細>
最新のダウンロード
詳細>
ウェブエフェクト
公式サイト
サイト素材
フロントエンドテンプレート
私たちについて 免責事項 Sitemap
PHP中国語ウェブサイト:福祉オンライン PHP トレーニング,PHP 学習者の迅速な成長を支援します!