PHPのcurl、fsocket、file_get_content関数の比較-PHPチュートリアル-php.cn

最近、Web 泥棒プログラムに取り組んでいたとき、file_get_content ではニーズを満たせないことがわかりました。リモートコンテンツを読むとき、file_get_content は、curl よりも使いやすいという点を除けば、curl ほど良くないと思います

リモートコンテンツをキャプチャするには、以前からfile_get_content関数を使用していました。curlなどの優れた機能の存在は知っていましたが、実際に見てみると、使い方がかなり複雑であると感じました。 file_get_content ほど単純ではないし、需要も大きくないので、curl の使い方を学びませんでした。

phpでのcurlとfile_get_contentの比較主な違い: Curl は、FTP、FTPS、HTTP、HTTPS、GOPHER、TELNET、DICT、FILE、LDAP などの多くのプロトコルをサポートしています。つまり、file_get_content では実行できない多くのことを実行できます。 Curl は、PHP でのコンテンツのリモート取得と収集を実現します。PHP Web バージョンの FTP アップロードとダウンロードを実装します。インターフェイスドッキング (API) の実装、ダウンロードファイルのブレークポイントの再開などを実行します。機能は非常に強力です。 curl の基本的な使い方をいくつか理解した後は、設定パラメータの一部を覚えるのが少し難しいだけで、一般的に使用されるパラメータをいくつか覚えておくだけで十分であることがわかりました。カールをオンにします。 PHP はデフォルトではcurl関数をサポートしていないため、curlを使用したい場合は、まずphp.iniでこの関数を有効にする必要があります。つまり、;extension= php_curl.dllの前のセミコロンを削除し、保存して再起動します。 apache/iis 。基本的な構文:

$my_curl =curl_init(); //curl オブジェクトを初期化します
curl_setopt($my_curl, CURLOPT_URL, "http://bbs.it-home.org") // クロールに必要なものを設定しますURL
curl_setopt($my_curl,CURLOPT_RETURNTRANSFER,1); //結果を文字列に保存するか画面に出力するかを設定します
$str =curl_exec($curl); Execute Request
echo $str; //クロールした結果を出力
curl_close($curl); //URL requestをクローズ

コードをコピー

最近、他の人のWebサイトから音楽データを取得する必要があります。 file_get_contents 関数を使用しましたが、マニュアルの例に従ってタイムアウトを設定しても、ほとんどの場合機能しません。

'timeout' => 5//このタイムアウト期間は安定していないため、動作しないことがよくあります
)
));

コードをコピー

この時点で、サーバーの接続プールを見ると、同様のエラーが大量に見つかり、非常に頭が痛くなります: file_get_contents(http://***): ストリームを開けませんでした… ここで、curl ライブラリを使用して、関数の置換を作成します。

$ch =curl_init();
curl_setopt($ch, CURLOPT_URL, $durl);
curl_setopt($ch, CURLOPT_TIMEOUT, 5);
curl_setopt($ch, Curlopt_useragent, _Userager _); exec ($ ch);
CURL_CLOSE ($ ch);
コードをコピー
したがって、実際のネットワークの問題以外には問題はありません。これは、他の人がcurlとfile_get_contentsに対して行ったテストです。 file_get_contents が google.com をクロールするのにかかる秒数: 2.31319094 2.30374217 2.21512604 3.30553889 2.30124092 カール使用時間： 0.68719101 0.64675593 0.64326 0.81983113 0.63956594 大きく異なりますか？あはは、私の経験から言えば、これら 2 つのツールは速度が異なるだけでなく、安定性も異なります。ネットワークデータキャプチャの安定性に対する要求が高い友人には、上記のcurl_file_get_contents関数を使用することをお勧めします。これは、安定して高速であるだけでなく、ブラウザを偽装してターゲットアドレスを偽装することもできます。
curl と file_get_contents の使用法については、以前の記事で説明されています。参考として推奨されるいくつかの優れた記事を以下に示します。

PHP file_get_contentsのタイムアウト処理の設定方法 PHP file_get_contents が文字化けした Gzip Web ページを取得する問題の解決策

phpのfile_get_contentsタイムアウト問題の解決策

PHP file_get_contents タイムアウトを設定する方法

方法 1: file_get_contents を使用して取得モードでコンテンツを取得する
$url='http://www.domain.com/';

$html = file_get_contents($url);

echo $html;

コードをコピー
方法 2: fopen で URL を開き、get メソッドでコンテンツを取得する
2. $fp = fopen($url, 'r');
3. stream_get_meta_data($fp);
4. while(!feof($fp)) {
5. $result .= fgets($ fp, 1024);
6. }
7. echo "url body: $result";
8. fclose($fp);
9. ?>
コードをコピー
方法 3: file_get_contents 関数を使用してポストの URL を取得するモード
2. $data = array ('foo' => 'bar');
3. $data = http_build_query($data);
4. $opts = array (
5. 'http' => array (
6. 'method' => 'POST',
7. 'header'=> "Content-type: application/x-www-form-urlencodedrn" .
8. "Content-Length: " . strlen($data) . "rn",
9. 'content' => $data
10. )
11. );
12. $context = stream_context_create($opts);
13. $html = file_get_contents('http://localhost/e/admin/test.html', false , $context);
14. echo $html;
15. ?>
コードをコピー
方法 4: fsockopen 関数を使用して URL を開き、ヘッダーと本文を含む完全なデータを取得モードで取得します
2. function get_url ($url,$cookie=false)
3. {
4. $url = parse_url($url);
5. $query = $url[パス]."?".$url [クエリ];
6. echo "クエリ:".$query;
7. $fp = fsockopen( $url[ホスト], $url[ポート]?$url[ポート]:80 , $errno, $errstr, 30);
8. if (!$fp) {
9. return false;
10. } else {
11. $request = "GET $query HTTP/1.1rn";
12. $request .= "ホスト: $url[host]rn";
13. $request .= "接続: 閉じる";
14. if($cookie) $request.="Cookie: $cookien";
15. $request.="rn";
16. fwrite($fp,$request);
17. while()) {
18. $ result .= @fgets($fp, 1024);
19. }
20. fclose($fp);
21. return $result;
22. }
23. }
24. //URL の HTML 部分を取得し、ヘッダーを削除します
25. function GetUrlHTML($url ,$cookie =false)
26. {
27. $rowdata = get_url($url,$cookie);
28. if($rowdata)
29. {
30. $body= stristr($rowdata,"rnrn");
31. $body=substr($ body,4 ,strlen($body));
32. return $body;
33. }
34. return false;
35. }
36. ?>
コードをコピー
方法 5: fsockopen 関数を使用して URL を開いて取得しますPOST モードの完全なデータ (ヘッダーと本文を含む)
2. function HTTP_Post($URL,$data,$cookie, $referrer="")
3. {
4. // 指定された URL を解析します
5. $URL_Info=parse_url($URL);
6. / / リファラーを構築する
7. if($referrer=="") // 指定されていない場合は、このスクリプトをリファラーとして使用します
8. $referrer="111″;
9. // $data から文字列を作成します
10. foreach($data as $key=> $value)
11. $values[]="$key=".urlencode($value);
12. $data_string=implode("&",$values);
13. // 必要なポートを調べます – 指定されていない場合は標準を使用します(=80)
14. if(!isset($URL_Info["port"]))
15. $URL_Info["port"]=80;
16. // ビルド POST-request:
17. $request.="POST ".$URL_Info[ "パス"]." HTTP/1.1n";
18. $request.="ホスト: ".$URL_Info["host"]."n";
19. $request.="リファラー: $referern";
20. $request. ="Content-type: application/x-www-form-urlencodedn";
21. $request.="Content-length: ".strlen($data_string)."n";
22. $request.="接続: closen";
23. $request.="Cookie: $cookien";
24. $request.="n";
25. $request.=$data_string."n";
26. $fp = fsockopen($URL_Info["host"],$URL_Info[ "ポート"]);
27. fputs($fp, $request);
28. while(!feof($fp)) {
29. $result .= fgets($fp, 1024);
30. }
31. fclose($fp);
32. return $result;
33. }
34. ?>
コードをコピー
方法 6:curl ライブラリを使用するcurl ライブラリを使用する前に、php.ini でcurl 拡張機能がオンになっているかどうかを確認する必要がある場合があります。
2. $ch =curl_init();
3. $timeout = 5;
4. curl_setopt ($ch, CURLOPT_URL, 'http://www.domain.com/');
5. curl_setopt ($ ch, CURLOPT_RETURNTRANSFER, 1);
6. curl_setopt ($ch, CURLOPT_CONNECTTIMEOUT, $timeout);
7. $file_contents =curl_exec($ch);
8. curl_close($ch);
9. echo $file_contents;
10. ?>
コピーコード
phpのcurl、fsockopen、file_get_contentsの3つの関数はいずれも模擬音声の収集を実現できます。 3つの違いや注意点はありますか？趙永斌： file_get_contents() を使用して外部ファイルを呼び出すと、タイムアウトによるエラーが報告されやすくなることがあります。これをcurlに変更するだけです。具体的な理由は不明です。その理由は、CURL が DNS 情報を自動的にキャッシュするためです (ハイライトは私が個人的にテストするためのものです)。
ファン・ジアペン: file_get_contentsカールfsockopen 一般化せずに、現在要求されている環境での選択的な操作: 当社が開発した KBI アプリケーションを見てみましょう。使い始めたばかり: file_get_contents 後に採用された: fsockopen 現在まで最後に使用されたもの:curl （リモート）私の個人的な理解は以下の通りです（間違っていたらご指摘ください、違っていたら追記してください） file_get_contents は php.ini のallow_url_fopen を有効にする必要があります。 http をリクエストする場合は、keeplive.curl を知らなくても大丈夫です。 file_get_contents() は 1 回の実行効率が高く、ヘッダーのない情報を返します。通常のファイルを読み取る場合には問題ありませんが、リモートファイルを読み取る場合には問題が発生します。継続的に接続したい場合は、複数のページを複数回リクエストしてください。その場合、file_get_contents と fopen に問題が発生します。取得した内容が正しくない場合もあります。したがって、同様の収集作業を行う場合、必ず問題が発生します。 Sock は比較的低レベルで、設定が面倒で、操作も困難です。完全な情報を返します。

潘少寧-テンセント: file_get_contents は、特定の URL のコンテンツを取得できますが、post get はできません。カールは、投稿したり入手したりすることができます。頭部情報も取得可能ソケットは下位レベルです。 UDP または TCP プロトコルに基づいて対話するように設定可能 file_get_contents とcurl がそれを実行できる場合は、socket も実行できます。ソケットでできることは、curl ではできない場合があります。 file_get_contents は、多くの場合、データを取得するだけです。より効率的でシンプルです。私も Zhao の状況に遭遇し、CURL を介してホストを設定しましたが、問題ありませんでした。これにはネットワーク環境が関係しています。

以上、PHP における url、fsocket、file_get_content 関数の使用法の類似点と相違点を例を通して紹介しました。