php Webサイトクローリングライブラリ

<?php
header("Content-Type: text/html; charset=UTF-8");
require("phpQuery.php");
$hj = QueryList::Query('http://mobile.csdn.net/',array("title"=>array('.unit h1','text')));
//dump($hj->data);
$data = QueryList::Query('http://cms.querylist.cc/bizhi/453.html',array(
    'image' => array('img','src')
    ))->data;
//
$data = QueryList::Query('http://cms.querylist.cc/google/list_1.html',array(
    'link' => array('a','href')
    ))->data;
$page = 'http://cms.querylist.cc/news/566.html';
$reg = array(
    'title' => array('h1','text'),
    'date' => array('.pt_info','text','-span -a',function($content){
        $arr = explode(' ',$content);
        return $arr[0];
    }),
    'content' => array('.post_content','html','a -.content_copyright -script',function($content){
     
            $doc = phpQuery::newDocumentHTML($content);
            $imgs = pq($doc)->find('img');
            foreach ($imgs as $img) {
                $src = 'http://cms.querylist.cc'.pq($img)->attr('src');
                $localSrc = 'w/'.md5($src).'.jpg';
                $stream = file_get_contents($src);
                file_put_contents($localSrc,$stream);
                pq($img)->attr('src',$localSrc);
            }
            return $doc->htmlOuter();
    })
    );
$rang = '.content';
$ql = QueryList::Query($page,$reg,$rang);
$data = $ql->getData();
dump($data);

は、Web サイトのクロールとクローリングをサポートしています。非常に強力です。これは、PHP に基づいたサーバー側のオープン ソース プロジェクトです。PHP 開発者は、ニュース Web サイトのヘッドライン情報の取得など、DOM ドキュメント コンテンツを簡単に処理できます。さらに興味深いのは、jQuery の考え方を使用していることで、jQuery を使用するのと同じようにページのコンテンツを処理して、必要なページ情報を取得することができます。

関連記事

Yii フレームワークを使用して図書館 Web サイトを作成する

21 Jun 2023

デジタル時代の到来に伴い、図書館は徐々にデジタル変革を実現し、従来の紙ベースの管理からデジタル管理に徐々に移行しています。デジタル管理の過程で、Web サイト アプリケーションを使用して図書館を管理することは、図書館が書籍、貸出記録、ユーザー アカウント、その他の情報をより適切に管理できるため、非常に一般的な方法になりました。 Yii フレームワークを使用して図書館 Web サイトを作成することは、非常に簡単かつ効果的な方法になりました。この記事では、Yii フレームワークを使用して図書館 Web サイトを作成する方法を紹介します。 Y

図書館管理システムの認証管理者に関する質問

13 Jun 2016

図書館管理システムの管理者を確認する問題について、私はPHPの初心者で、研究書にある図書館管理システムのソースコード一式をwamp5の統合環境にインストールしました。 MYSQL の DATA フォルダーとその他の設定が完了すると、login.php インターフェイスのアカウントとパスワードが正しい場合でも、チェックログ コードを投稿するのを手伝ってください。 <?phps

図書館管理システムのユースケース図 図書館管理プログラム(1)

29 Jul 2016

図書館管理システムの使用例図: 図書館管理システムの使用例図 図書館管理プログラム (1): このレベルのプログラムで使用されるデータ テーブル構造: # ------------------- --- ---------------------------------- # # データテーブル構造 'author' # CREATE TABLE author ( author_id int (6) DEFAULT '0' NOT NULL auto_increment、first_name varchar(20)

PHP と Xunsearch を使用して図書館 Web サイトに書籍検索機能を実装する方法

31 Jul 2023

PHP と Xunsearch を使用して図書館 Web サイトの書籍検索機能を実装する方法 現代社会において、図書館は知識倉庫および情報センターとして、人々が知識を獲得し学習するプロセスにおいて重要な役割を果たしています。読者のニーズに応えるためには、図書館ウェブサイトの検索機能が特に重要です。この記事では、PHP と Xunsearch を使用して図書館 Web サイトの書籍検索機能を実装する方法を紹介します。 Xunsearch のインストールと構成 まず、Xunsearch をインストールして構成する必要があります。スンス

ライブラリ内の Vue 書籍はどこで見つけることができますか

08 May 2023

フロントエンド開発者として、新しいテクノロジーを学ぶことは不可欠です。その中でも、Vue.js は現在最も人気のある JavaScript フレームワークの 1 つですが、関連する書籍は図書館にありますか?この記事では、図書館で Vue.js の書籍を検索する方法を紹介します。まず、私たちの街の公立図書館に行きます。公共図書館は、幅広い書籍や学術雑誌を提供する貴重なリソースです。図書館の Web サイトにログインし、検索エンジンを使用して Vue.js に関連する書籍を見つけることができます。第二に、学校を見つけることができます

C++ を使用してシンプルなライブラリ管理システムを実装するにはどうすればよいですか?

02 Nov 2023

C++ を使用してシンプルなライブラリ管理システムを実装するにはどうすればよいですか?図書館は知識と文化を広める重要な場所であり、効率的な図書館管理システムは図書館の運営効率を向上させ、読者が本の貸し出しや図書館リソースの管理を容易にします。この記事では、C++ プログラミング言語を使用して簡単なライブラリ管理システムを実装する方法を紹介します。まず、システムに必要な基本的なデータ構造を定義する必要があります。図書館管理システムでは、最も基本的なデータ構造は書籍とリーダーです。それらを表す 2 つのクラスを作成できます。本

See all articles