Laravel에서 Symfony의 Crawler 컴포넌트를 사용하는 분석 예

이 글은 주로 Laravel에서 HTML을 분석하기 위해 Symfony의 Crawler 컴포넌트를 사용하는 방법을 소개합니다. 도움이 필요한 친구들이 참고할 수 있습니다.

Crawler의 전체 이름은 Symfony 프레임워크의 컴포넌트인 DomCrawler입니다. 특이한 점은 DomCrawler에는 중국어 문서가 없고 Symfony에서는 이 부분을 번역하지 않았기 때문에 DomCrawler를 사용한 개발은 조금씩만 탐색할 수 있다는 것입니다. 이제 사용 과정에서의 경험을 요약하겠습니다.

먼저 css selector

composer require symfony/dom-crawler
composer require symfony/css-selector

매뉴얼에 사용된 예시는

use Symfony\Component\DomCrawler\Crawler;
$html = <<<‘HTML‘
Hello World!
Hello Crawler!
HTML;
$crawler = new Crawler($html);
foreach ($crawler as $domElement)
{
var_dump($domElement->nodeName);
}

인쇄된 결과는

string ‘html‘ (length=4)

이 때문에 html 코드의 nodeName이 html입니다. 제가 사용하기 시작했을 때 프로그램이 잘못된 줄 알았어요. . .

실제 사용 과정에서 새로운 크롤러($html)에 코드 깨짐 문제가 발생한다면 이는 페이지 인코딩과 관련이 있어야 하므로 다음 방법을 사용하여 먼저 크롤러를 초기화한 후 node

$crawler = new Crawler();
$crawler->addHtmlContent($html);

addHtmlContent의 두 번째 매개변수는 charset이고 기본값은 utf-8입니다.

다른 예시는 공식 문서인 http://symfony.com/doc/current/comComponents/dom_crawler.html

직장에서 조금 시도해 본 사용법을 기록해 주세요

filterXPath( string $xpath) 메소드, 매뉴얼에 따르면 이 메소드의 매개변수는 $xpath이며, p, p 등의 블록이 자주 사용된다고 합니다.

echo $crawler->filterXPath(‘//body/p‘)->text();
echo $crawler->filterXPath(‘//body/p‘)->last()->text();

출력은 첫 번째와 다음 p 태그 블록의 텍스트입니다.

var_dump($crawler->filterXPath(‘//body‘)->html());

출력은 본문의 HTML입니다.

foreach ($crawler->filterXPath(‘//body/p‘) as $i => $node) {
$c = new Crawler($node);
echo $c->filter(‘p‘)->text();
}

filterXPath는 DOMElement 블록의 배열을 얻고 각 DOMElement 블록은 새로운 크롤러 객체를 사용하여 계속할 수 있습니다. parsing

$nodeValues =
$crawler->filterXPath(‘//body/p‘)->each(function (Crawler $node, $i) {
return $node->text();
});

crawler는 각 루프를 제공하고 클로저 함수를 사용하여 코드를 단순화합니다. 그러나 $nodeValues를 이렇게 작성하면 추가 처리가 필요한 배열이 생성된다는 점에 유의하세요.

기타 용도

echo $crawler->filterXPath(‘//body/p‘)->attr(‘class‘);

첫 번째 p 태그에 해당하는 클래스 속성의 "message" 값을 얻을 수 있습니다

$crawler->filterXPath(‘//p[@class="样式"]‘)->filter(‘a‘)->attr(‘href‘);
$crawler->filterXPath(‘//p[@class="样式"]‘)->filter(‘a>img‘)->extract(array(‘alt‘, ‘href‘))

위는 태그 속성을 얻는 몇 가지 방법입니다

filter는 filterXPath와 다릅니다. 매뉴얼에는 CSS가 선택기를 잘 이해하지 못한다고 되어 있습니다. p와 같은 XPath 노드에 포함된 요소라는 것을 알고 있습니다. 특정 상황은 실제 개발에서 시도해야 합니다.

일반적으로 DomCrawler는 단순한 HTML DOM보다 사용하기 쉽다고 생각합니다. 아마도 더 쉽게 사용하기 때문일 것입니다.

위 내용은 Crawler의 기본 기능일 뿐입니다. 자세한 사용법은 Symfony 매뉴얼의 Crawler 부분에 있는 기능을 참조하세요

http://api.symfony.com/3.2/Symfony/Component/DomCrawler/Crawler .html

Crawler의 가장 큰 문제점은 여전히 ​​예제가 너무 적고, 기능 매뉴얼에 사용법 예제가 없어 실제 사용에서만 살펴볼 수 있다는 것입니다. . . .

몇 가지 예가 포함된 DomCrawler에 대한 Symfony의 문서

http://symfony.com/doc/current/comComponents/dom_crawler.html

위는 HTML의 laravel 구성 요소 분석에서 Symfony의 Crawler를 사용하는 방법에 대한 편집자의 소개입니다. 모든 분들께 도움이 되기를 바랍니다. 질문이 있으신 경우 메시지를 남겨주시면 편집자가 제 시간에 답변해 드리겠습니다.

위 내용은 Laravel에서 Symfony의 Crawler 컴포넌트를 사용하는 분석 예의 상세 내용입니다. 자세한 내용은 PHP 중국어 웹사이트의 기타 관련 기사를 참조하세요!