這篇文章給大家分享的內容是關於thinkphp5使用workerman定時器定時爬取某站點新聞資訊等的內容,內容很詳細,有需要的朋友可以參考一下,希望可以幫助到你們.
1、先透過composer 安裝workerman，在thinkphp5完全開發手冊的擴充-》coposer套件-》workerman有詳細說明：
#在项目根目录执行以下指令 composer require topthink/think-worker
2.在專案根目錄建立服務啟動檔案server.php:
<?php
define('APP_PATH', __DIR__ . '/application/');
define("BIND_MODULE", "server/Worker");
// 加载框架引导文件
require __DIR__ . '/thinkphp/start.php';3、在application裡建立server模組，並在server裡建立控制器Worker.php：
<?php
namespace app\server\controller;
use think\worker\Server;
class Worker extends Server
{
public function onWorkerStart($work)
{
$handle=new Collection();
$handle->add_timer();
}
}4.建立Collection.php類別
<?php
namespace app\server\controller;
use app\common\model\ArticleModel;
use think\Controller;
use Workerman\Lib\Timer;
class Collection extends Controller{
public function __construct(){
parent::__construct();
}
public function add_timer(){
Timer::add(10, array($this, 'index'), array(), true);//时间间隔过小，运行会崩溃
}
/**
* 采集数据
*/
public function index(){
$total=$this->get_jinse();
return json(['msg'=>"此次采集数据共 $total 条。",'total'=>$total]);
}
/**
* 获取金色财经资讯
*/
public function get_jinse(){
$url="https://api.jinse.com/v4/live/list?limit=20";
$data=$this->get_curl($url);
$data=json_decode($data);
$data=$data->list[0]->lives;
$validate=validate('Article');
$items=[];
foreach ($data as $k=>$v){
preg_match('/【(.+?)】(.+)/u',$v->content,$content);
if(!@$content[2]){
continue;
}
$list=array(
'source_id'=>$v->id,
'source'=>'金色财经',
'title'=>trim(preg_replace('/.*\|/','',$content[1])),
'content'=>$content[2],
);
if($validate->check($list)){
$items[]=$list;
}
}
if($items){
krsort($items);
$model=new ArticleModel();
$model->saveAll($items);
}
return count($items);
}
public function get_curl($url){
$ch=curl_init();
curl_setopt($ch, CURLOPT_SSL_VERIFYPEER, false);
curl_setopt($ch,CURLOPT_URL,$url);
curl_setopt($ch,CURLOPT_HEADER,0);
curl_setopt($ch,CURLOPT_RETURNTRANSFER,1);
$output = curl_exec($ch);
if($output === FALSE ){
echo "CURL Error:".curl_error($ch);
}
curl_close($ch);
// 4. 释放curl句柄
return $output;
}
}5、啟動服務php server.php start
相關推薦:
以上是thinkphp5使用workerman定時器定時爬取網站內容的程式碼的詳細內容。更多資訊請關注PHP中文網其他相關文章！
