simple_html_dom 크롤링을 사용하여 전체 소설을 laravel로 표시합니다.

프로그래머도 광고가 있는 소설을 읽습니다에서 언급했듯이, 많은 소설 웹사이트에는 기본적으로 매우 짜증나는 광고가 있습니다. 전체 div에 링크를 추가하거나 실수로 터치하면 일부 웹사이트로 이동하거나 심지어 무한 루프가 발생합니다. . 일부 모바일 앱에는 광고가 많이 포함되어 있습니다. 이 기사에서는 이를 laravel 프레임워크에 먼저 적용한 후 직접 배포하는 것이 가장 좋습니다.

1. laravel에 타사 클래스 도입

1. 프로젝트 루트 디렉토리 아래 app 디렉토리에 새 폴더를 만들고 이름을 Lib(맞춤 이름)로 지정합니다

2. 라이브러리의 경우 Lib 아래에 몇 가지 디렉토리 카테고리를 더 만들 수 있습니다. 클래스가 하나만 도입되었으므로 여기에는 새 폴더가 없습니다. (가져온 클래스 수에 따라 직접 정의)

simple_html_dom.php를 Lib에 복사

3. 프로젝트 루트 디렉터리에서 작곡가.json 파일을 찾아 아래의 클래스맵에 타사 클래스의 경로를 씁니다. 자동 로드, 이렇게 자동으로 로드하려면

"autoload": {
"classmap": [
"database/seeds",
"database/factories",
"app/Lib/simple_html_dom.php"
]
},

4. cmd 콘솔에서 프로젝트 루트 디렉터리로 전환하고

composer dumpautoload

5 명령을 실행합니다. 컨트롤러에서 이 클래스를 사용하세요

use simple_html_dom;

$html = new simple_html_dom();

2. Route 생성

Route::get('/novel_list','index\Spnovel@index');

3. 컨트롤러 생성 Spnovel.php

load($list_html); $list = $html->find('#list dd a'); foreach ($list as $k=>$v) { $arr1=$arr2=[]; $p1 = '/(.*?)<\/a>/i'; $p2 = '/.*?<\/a>/i'; preg_match($p1,$v->outertext,$arr1); preg_match($p2,$v->outertext,$arr2); $content[$k][0]=$arr1[1]; $content[$k][1]=$arr2[1]; } array_splice($content,0,12); return $content; } } class mySpClass{ // 向服务器发送最简单的get请求 public static function getCurl($url,$header=null){ // 1.初始化 $ch = curl_init($url); //请求的地址 // 2.设置选项 curl_setopt($ch,CURLOPT_RETURNTRANSFER,1);//获取的信息以字符串返回,而不是直接输出(必须) curl_setopt($ch,CURLOPT_TIMEOUT,10);//超时时间（必须） curl_setopt($ch, CURLOPT_HEADER,0);// 启用时会将头文件的信息作为数据流输出。 //参数为1表示输出信息头,为0表示不输出 curl_setopt($ch,CURLOPT_SSL_VERIFYPEER,false); //不验证证书 curl_setopt($ch,CURLOPT_SSL_VERIFYHOST,false); //不验证证书 if(!empty($header)){ curl_setopt($ch,CURLOPT_HTTPHEADER,$header);//设置头信息 }else{ $_head = [ 'User-Agent:Mozilla/5.0 (Windows NT 10.0; Win64; x64; rv:70.0) Gecko/20100101 Firefox/70.0' ]; curl_setopt($ch,CURLOPT_HTTPHEADER,$_head); } // 3.执行 $res = curl_exec($ch); // 4.关闭 curl_close($ch); return $res; } }

     
   
 
 @foreach($List as $item) 
 {{$item[0]}} 
 @endforeach 
 
  

위 코드 설명: 여기서는 CSS를 간단하게 작성하고, img를 배경 이미지로 사용합니다. ul의 루프 li에서 {{$item[1]}}은 얻은 주소 매개변수이고, {{$item[0]}}은 얻은 장 이름입니다. 배열과 최종 효과를 살펴보세요.

5. 실행

다음은 각 장의 내용입니다

경로를 먼저 살펴보세요:

Route::get('/novel_con/{a}/{b}/{c}','index\Spnovel@get_nContent');

이것은 특정 장의 URL 매개변수에 해당합니다. 해당 장의 매개변수는 다음과 같습니다: Novel_con/85/85445/27248645.html

get_nContent 메소드작성:

public function get_nContent(Request $req){ $url1 = $req->a.'/'.$req->b.'/'.$req->c; $url = "https://www.7kzw.com/".$url1; $res = mySpClass::getCurl($url);//获得 // 开始解析 $data['artic']= self::getContent($res); $next = (int)$req->c; $next = $next+1; $data['artic']['next']="/novel_con/".$req->a.'/'.$req->b.'/'.$next.'.html'; return view('index.spnovel.ncontent',$data); } private static function getContent($get_html){ $html = new simple_html_dom(); @$html->load($get_html); $h1 = $html->find('.bookname h1'); foreach ($h1 as $k=>$v) { $artic['title'] = $v->innertext; } // 查找小说的具体内容 $divs = $html->find('#content'); foreach ($divs as $k=>$v) { $content = $v->innertext; } // 正则替换去除多余部分 $pattern = "/(
.*?<\/p>)|(
.*?<\/div>)/"; $artic['content'] = preg_replace($pattern,'',$content); return $artic; }

설명:$req->a, $req->b, $ req->c는 각각 세 개의 매개변수이며 이를 특정 장의 주소에 대한 완전한 요청으로 병합한 다음 mySpClass::getCurl을 통해 특정 장의 html 문자열을 얻습니다. 그런 다음 이 클래스의 getContent를 사용하여 이 페이지를 구문 분석합니다. 먼저 구문 분석 방법을 살펴보고 이전 기사가 포함된 장의 제목과 내용을 구문 분석하여 배열에 쓰고 중복된 텍스트 광고 부분을 제거합니다. $next는 저장된 다음 챕터의 주소로, 챕터 세부정보 페이지로 이동하는 데 사용됩니다.

ncontent.blade.php

     
   
{{$artic['title']}}
 下一章 
 {!!$artic['content']!!} 
  

Explanation: 현재 글만 있으므로 반복할 필요는 없습니다. 제목은 {{$artic['title']}} 이고, 제목에도 쓸 수 있습니다. {!!$artic['content']!!}가 작성되는 방식은 기사의 내용을 벗어날 필요가 없다는 것입니다. 그렇지 않으면
등과 같은 다른 문자가 많이 있을 것입니다. 다음 장의 버튼 주소를 직접 전달할 수 있습니다. position:fixed 는 위치 지정 버튼을 수정하고 언제든지 다음 장으로 이동할 수 있습니다.

Run:

요약:이 글의 가장 중요한 부분은 타사 클래스를 소개하고 이를 적용할 수 있다는 점, 그리고 laravel의 기본 사항을 컨트롤러 사용에 더 익숙하게 만든 것입니다. 모델과 함께 조회수를 확인하세요.

이것은 소설에 충분합니다. 물론 이를 확장하여 전체 사이트의 소설 목록을 작성할 수 있습니다. 계속해서 적절한 매개변수를 전달하면 더욱 완벽해질 것입니다.

위 내용은 simple_html_dom 크롤링을 사용하여 전체 소설을 laravel로 표시합니다.의 상세 내용입니다. 자세한 내용은 PHP 중국어 웹사이트의 기타 관련 기사를 참조하세요!