실제 크롤러 연습: PHP를 사용하여 주식 정보 크롤링-PHP 튜토리얼-php.cn

실제 크롤러 연습: PHP를 사용하여 주식 정보 크롤링

王林

풀어 주다： 2023-06-13 17:34:02

원래의

1425명이 탐색했습니다.

주식시장은 언제나 큰 관심사였습니다. 매일의 주식 상승, 하락 및 변동은 투자자의 결정에 직접적인 영향을 미칩니다. 주식 시장의 최신 동향을 이해하려면 적시에 주식 정보를 얻고 분석해야 합니다. 전통적인 방법은 주요 금융 웹사이트를 수동으로 열어 주식 데이터를 하나씩 보는 것이었습니다. 이 방법은 확실히 너무 번거롭고 비효율적입니다. 현재 크롤러는 매우 효율적이고 자동화된 솔루션이 되었습니다.

다음으로, PHP를 사용하여 간단한 주식 크롤러 프로그램을 작성하여 주식 데이터를 얻는 방법을 보여드리겠습니다.

준비 작업

크롤러 프로그램을 작성하기 전에 다음 작업을 준비해야 합니다.

PHP 개발 환경 설치
PHP 관련 HTTP 요청 라이브러리 설치
HTML DOM에 대한 기본 지식 이해
Be XPath 구문에 익숙함

그 중 HTTP 요청 라이브러리는 대상 웹사이트의 HTML 소스 코드를 얻기 위해 HTTP 요청을 보내는 데 사용됩니다. HTML DOM은 HTML 페이지를 구문 분석하고 탐색하는 데 사용됩니다. XML 및 HTML 문서.

Programming

크롤러 프로그램 작성을 시작하기 전에 대상 웹사이트의 URL과 획득해야 하는 스톡 코드를 알아야 합니다. Sina Finance를 예로 들면 주식 데이터의 URL은 다음과 같습니다.

http://finance.sina.com.cn/realstock/company/sh600000/nc.shtml

로그인 후 복사

그중 sh600000은 상하이 증권 거래소의 주식 코드를 나타냅니다. 마찬가지로 심천 증권 거래소의 주식 코드는 sz로 시작합니다. 우리는 얻어야 하는 스톡 코드를 기반으로 URL을 구축하고 HTTP 요청 라이브러리를 사용하여 HTML 소스 코드를 얻을 수 있습니다.

HTML 소스 코드를 얻은 후에는 HTML DOM 파서를 사용하여 HTML 페이지를 구문 분석하고 XPath 구문을 사용하여 필수 주식 데이터를 필터링해야 합니다. 이 예에서는 주식의 이름과 현재 가격을 필터링해야 합니다.

마지막으로 획득한 주식 데이터를 인쇄할 수 있습니다. 구체적인 코드는 다음과 같습니다.

$code = 'sh600000'; // 股票代码
$url = 'http://finance.sina.com.cn/realstock/company/' . $code . '/nc.shtml'; // 构建URL

$html = file_get_contents($url); // 获取HTML源码
$dom = new DOMDocument();
@$dom->loadHTML($html); // 解析HTML

$xpath = new DOMXPath($dom);
$name = $xpath->query('//h1[@class="name"]/text()')->item(0)->nodeValue; // 筛选股票名称
$price = $xpath->query('//span[@class="price"]/text()')->item(0)->nodeValue; // 筛选当前价格

echo $name . '的当前价格为' . $price;

로그인 후 복사

Program Test

테스트를 실행하기 전에 HTTP 요청 라이브러리 및 관련 확장 프로그램이 로컬 PHP 환경에 설치되어 있는지 확인해야 합니다. Windows 시스템을 예로 들면 다음 명령을 사용하여 설치할 수 있습니다.

composer require php-http/guzzle6-adapter
composer require php-http/message

로그인 후 복사

다음으로 Shanghai Composite Index(주식 코드 sh000001)의 주식 데이터를 가져올 수 있습니다.

$code = 'sh000001'; // 上证指数
$url = 'http://finance.sina.com.cn/realstock/company/' . $code . '/nc.shtml';

$client = new HttpAdapterGuzzle6Client();
$request = new HttpMessageRequest('GET', $url);
$response = $client->sendRequest($request);

$html = $response->getBody()->getContents();
$dom = new DOMDocument();
@$dom->loadHTML($html); // 解析HTML

$xpath = new DOMXPath($dom);
$name = $xpath->query('//h1[@class="name"]/text()')->item(0)->nodeValue;
$price = $xpath->query('//span[@class="price"]/text()')->item(0)->nodeValue;

echo $name . '的当前价格为' . $price;

로그인 후 복사

코드를 실행한 후, 콘솔에서 Shanghai Composite Index의 출력을 볼 수 있습니다. 해당 지수의 현재 가격 정보.