PHP는 크롤링 HTTPS content_php 기술을 구현합니다.-PHP 튜토리얼-php.cn

PHP는 크롤링 HTTPS content_php 기술을 구현합니다.

WBOY

풀어 주다： 2016-05-16 20:29:21

원래의

1268명이 탐색했습니다.

최근 Hacker News API를 조사하는 동안 HTTPS 문제가 발생했습니다. 모든 Hacker News API는 일반 HTTP 프로토콜과 다르게 암호화된 HTTPS 프로토콜을 통해 접근하기 때문에, API에서 제공하는 데이터를 얻기 위해 PHP에서 file_get_contents() 함수를 사용할 때 사용되는 코드는 다음과 같습니다. :

<&#63;php<br />$data = file_get_contents("<a href="https://hacker-news.firebaseio.com/v0/topstories.json&#63;print=pretty">https://hacker-news.firebaseio.com/v0/topstories.json&#63;print=pretty</a>");<br />......

로그인 후 복사

위 코드를 실행하면 다음과 같은 오류 메시지가 나타납니다.

PHP Warning:  file_get_contents(): Unable to find the wrapper "https" - did you forget to enable it when you configured PHP&#63;

로그인 후 복사

다음은 스크린샷입니다.

php https error

왜 이런 오류가 발생하나요?

인터넷에서 검색한 결과 많은 사람들이 이 오류를 발견했습니다. PHP 구성 파일에 활성화된 매개 변수가 없기 때문에 문제는 매우 직접적입니다. 내 로컬 컴퓨터에서는 /apache/bin/php.ini입니다. 🎜> 이 항목의 경우 앞의 세미콜론을 제거해야 합니다. 다음 스크립트를 사용하여 PHP 환경 구성을 확인할 수 있습니다. ;extension=php_openssl.dll

$w = stream_get_wrappers();<br />echo 'openssl: ',  extension_loaded  ('openssl') &#63; 'yes':'no', "\n";<br />echo 'http wrapper: ', in_array('http', $w) &#63; 'yes':'no', "\n";<br />echo 'https wrapper: ', in_array('https', $w) &#63; 'yes':'no', "\n";<br />echo 'wrappers: ', var_dump($w);

로그인 후 복사

위 스크립트 조각을 실행하면 내 컴퓨터의 결과는 다음과 같습니다.

openssl: no<br />http wrapper: yes<br />https wrapper: no<br />wrappers: array(10) {<br />  [0]=><br>  string(3) "php"<br>  [1]=><br>  string(4) "file"<br>  [2]=><br>  string(4) "glob"<br>  [3]=><br>  string(4) "data"<br>  [4]=><br>  string(4) "http"<br>  [5]=><br>  string(3) "ftp"<br>  [6]=><br>  string(3) "zip"<br>  [7]=><br>  string(13) "compress.zlib"<br>  [8]=><br>  string(14) "compress.bzip2"<br>  [9]=><br>  string(4) "phar"<br>}

로그인 후 복사

대안

오류를 찾아서 수정하는 것은 매우 간단합니다. 어려운 점은 오류를 찾은 후에는 수정할 수 없다는 것입니다. 원래는 이 스크립트 메소드를 원격 호스트에 넣고 싶었지만 원격 호스트의 PHP 구성을 수정할 수 없었습니다. 결과적으로 이 솔루션을 사용할 수 없었지만 우리는 나무에 매달릴 수 없었습니다. 이 도로는 작동하지 않습니다. 다른 방법이 있나요?

내가 PHP에서 콘텐츠를 캡처하는 데 자주 사용하는 또 다른 기능은

입니다. curl보다 더 강력하고 많은 선택적 매개변수를 제공합니다. file_get_contents() 콘텐츠 액세스 문제의 경우 사용해야 하는 HTTPS 구성 매개변수는 다음과 같습니다. CURL

curl_setopt($ch, CURLOPT_SSL_VERIFYPEER, FALSE);

로그인 후 복사

SSL 보안 확인을 무시/건너뛰는 것을 의미적으로 볼 수 있습니다. 어쩌면 이것은 좋은 생각이 아닐 수도 있지만 일반적인 시나리오에서는 이것으로 충분합니다.

다음은 HTTPS 콘텐츠에 접근할 수 있는

으로 캡슐화된 함수입니다. Curl

function getHTTPS($url) {<br>  $ch = curl_init();<br>  curl_setopt($ch, CURLOPT_SSL_VERIFYPEER, FALSE);<br>  curl_setopt($ch, CURLOPT_HEADER, false);<br>  curl_setopt($ch, CURLOPT_FOLLOWLOCATION, true);<br>  curl_setopt($ch, CURLOPT_URL, $url);<br>  curl_setopt($ch, CURLOPT_REFERER, $url);<br>  curl_setopt($ch, CURLOPT_RETURNTRANSFER, TRUE);<br>  $result = curl_exec($ch);<br>  curl_close($ch);<br>  return $result;<br>}

로그인 후 복사

위는 PHP에서 https 콘텐츠를 얻는 전체 과정입니다. 이는 매우 간단하고 실용적이며 동일한 프로젝트 요구 사항을 가진 친구에게 권장됩니다.