ホームページ > バックエンド開発 > PHPチュートリアル > PHP 収集中に IP がブロックされる場合の解決策_PHP チュートリアル

PHP 収集中に IP がブロックされる場合の解決策_PHP チュートリアル

WBOY
リリース: 2016-07-21 15:34:16
オリジナル
1038 人が閲覧しました

インターネットでいくつかの情報を検索しましたが、見つけることができませんでした。検索中に、検索エンジン クローラー スパイダーを使用する USERAGENT について言及した人がいました。少ししか触れませんでしたが、私なりに考えて解決策を列挙しました

1. Snoopy またはcurlを使用して、検索エンジン クローラーの USERAGENT 値を渡します。
検索エンジン クローラーの USERAGENT 値を表示します: http://www.jb51.net/yunying/29357.html

2. Snoopy またはcurl を使用してリファラー値を渡します。
例: $snoopy->referer = 'http://www.google.com';
$header[] = "Referer: http://www.google.com/"; 3. スヌーピーを使用します。またはカールプロキシ。
例: $snoopy->proxy_host = "59.108.44.41";
$snoopy->proxy_port = "3128";

4. IP の作成を防ぐには、Snoopy またはcurl を使用します。
例: $snoopy->rawheaders['X_FORWARDED_FOR'] = '127.0.0.1';

5. PHP とプログラムを使用して、新しい IP アドレスを取得します。

6. 再起動後もルートがブロックされている場合は、相手があなたの MAC アドレスをブロックしている可能性があります。プログラムを作成するか、手動で MAC アドレスを変更することができます。インターネット上のネットワーク カードのアドレス ツールを変更するための特別な方法もあります。

http://www.bkjia.com/PHPjc/322449.html

tru​​ehttp://www.bkjia.com/PHPjc/322449.html技術記事インターネットで情報を探しましたが、見つけることができませんでした。検索しているときに、検索エンジンのクローラー スパイダーを使用する USERAGENT について言及した人がいました。少ししか触れませんでしたが…
ソース:php.cn
このウェブサイトの声明
この記事の内容はネチズンが自主的に寄稿したものであり、著作権は原著者に帰属します。このサイトは、それに相当する法的責任を負いません。盗作または侵害の疑いのあるコンテンツを見つけた場合は、admin@php.cn までご連絡ください。
最新の問題
人気のチュートリアル
詳細>
最新のダウンロード
詳細>
ウェブエフェクト
公式サイト
サイト素材
フロントエンドテンプレート