PHP는 스누피 클래스를 사용하여 페이지 크롤링을 구현합니다.-PHP 튜토리얼-php.cn

이 글은 주로 스누피 클래스를 사용하여 PHP에서 페이지 크롤링을 구현하는 방법을 소개합니다. 관심 있는 친구들이 참고하면 좋겠습니다.

이 문서의 예는 PHP에서 스누피 클래스의 사용법을 설명합니다. 구체적인 분석은 다음과 같습니다.

다음은 php

/* You need the snoopy.class.php from http://snoopy.sourceforge.net/ */ include("snoopy.class.php"); $snoopy = new Snoopy; // need an proxy?: //$snoopy->proxy_host = "my.proxy.host"; //$snoopy->proxy_port = "8080"; // set browser and referer: $snoopy->agent = "Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1)"; $snoopy->referer = "http://www.jonasjohn.de/"; // set some cookies: $snoopy->cookies["SessionID"] = '238472834723489'; $snoopy->cookies["favoriteColor"] = "blue"; // set an raw-header: $snoopy->rawheaders["Pragma"] = "no-cache"; // set some internal variables: $snoopy->maxredirs = 2; $snoopy->offsiteok = false; $snoopy->expandlinks = false; // set username and password (optional) //$snoopy->user = "joe"; //$snoopy->pass = "bloe"; // fetch the text of the website www.google.com: if($snoopy->fetchtext("http://www.google.com")){ // other methods: fetch, fetchform, fetchlinks, submittext and submitlinks // response code: print "response code: ".$snoopy->response_code."
\n"; // print the headers: print "Headers:
"; while(list($key,$val) = each($snoopy->headers)){ print $key.": ".$val."
\n"; } print "
\n"; // print the texts of the website: print "".htmlspecialchars($snoopy->results)."\n"; } else { print "Snoopy: error while fetching document: ".$snoopy->error."\n"; }
        
         로그인 후 복사

요약:위 내용은 이 글의 전체 내용입니다. 모든 분들의 공부에 도움이 되었으면 좋겠습니다.

관련 권장사항:

PHP가 Memcache를 기반으로 링 큐를 구현하는 방법

PHP는 이미지 크기 수정, 워터마킹, 인증 코드 생성, 출력 및 저장을 수행합니다.

PHP는 구성을 읽습니다. 파일 클래스 인스턴스

위 내용은 PHP는 스누피 클래스를 사용하여 페이지 크롤링을 구현합니다.의 상세 내용입니다. 자세한 내용은 PHP 중국어 웹사이트의 기타 관련 기사를 참조하세요!