基於PHPQuery的PHP通用採集類
鳥欲高飛先振翅,人求上進先讀書。以下是小編為大家搜尋整理的基於PHPQuery的PHP通用採集類,希望能給大家帶來幫助!更多精彩內容請及時關注我們應屆畢業生考試網!
一、採集類原始碼
程式碼如下:
/**
*通用列表採集類
*版本V1.3
*作者:JAE
*/
require_once '../phpQuery/phpQuery/';
class QueryList{
private $pageURL;
private $regArr = array();
public $jsonArr = array();
private $regRange;
private $html;
/************************************************
* 引數: 頁面地址 選擇器陣列 塊選擇器
* 【選擇器陣列】說明:格式array("名稱"=>array("選擇器","型別"),.......)
* 【型別】說明:值 "text" ,"html" ,"屬性"
*【塊選擇器】:指 先按照規則 選出 幾個大塊 ,然後再分別再在塊裡面 進行相關的選擇
*************************************************/
function QueryList($pageURL,$regArr=array(),$regRange='')
{
$this->pageURL = $pageURL;
//為了能獲取https://
$ch = curl_init();
curl_setopt($ch, CURLOPT_URL,$this->pageURL);
curl_setopt($ch, CURLOPT_SSL_VERIFYPEER, false);
curl_setopt($ch, CURLOPT_SSL_VERIFYHOST, false);
curl_setopt($ch,CURLOPT_RETURNTRANSFER,1);
$this->html = curl_exec($ch);
curl_close($ch);
if(!empty($regArr))
{
$this->regArr = $regArr;
$this->regRange = $regRange;
$this->getList();
}
}
function setQuery($regArr,$regRange='')
{
$this->jsonArr=array();
$this->regArr = $regArr;
$this->regRange = $regRange;
$this->getList();
}
private function getList()
{
$hobj = phpQuery::newDocumentHTML($this->html);
if(!empty($this->regRange))
{
$robj = pq($hobj)->find($this->regRange);
$i=0;
foreach($robj as $item)
{
while(list($key,$reg_value)=each($this->regArr))
{
$iobj = pq($item)->find($reg_value[0]);
switch($reg_value[1])
{
case 'text':
$this->jsonArr[$i][$key] = trim(pq($iobj)->text());
break;
case 'html':
$this->jsonArr[$i][$key] = trim(pq($iobj)->html());
break;
default:
$this->jsonArr[$i][$key] = pq($iobj)->attr($reg_value[1]);
break;
}
}
//重置陣列指標
reset($this->regArr);
$i++;
}
}
else
{
while(list($key,$reg_value)=each($this->regArr))
{
$lobj = pq($hobj)->find($reg_value[0]);
$i=0;
foreach($lobj as $item)
{
switch($reg_value[1])
{
case 'text':
$this->jsonArr[$i++][$key] = trim(pq($item)->text());
break;
case 'html':
$this->jsonArr[$i++][$key] = trim(pq($item)->html());
break;
default:
$this->jsonArr[$i++][$key] = pq($item)->attr($reg_value[1]);
break;
}
}
}
}
}
function getJSON()
{
return json_encode($this->jsonArr);
}
}
二、使用例子
程式碼如下:
require 'Query/';
//採集OSC的'程式碼分享列表,標題 連結 作者
$url = "";
$reg = array("title"=>array("_title a:eq(0)","text"),"url"=>array("_title a:eq(0)","href"),"author"=>array("img","title"));
$rang = "_list li";
$hj = new QueryList($url,$reg,$rang);
$arr = $hj->jsonArr;
print_r($arr);
//如果還想採當前頁面右邊的 TOP40活躍貢獻者 影象,得到JSON資料,可以這樣寫
$reg = array("portrait"=>array("_top img","src"));
$hj->setQuery($reg);
$json = $hj->getJSON();
echo $json . "
";
//採OSC內容頁內容
$url = "_186288_23816";
$reg = array("title"=>array("le h1","text"),"con"=>array("ent","html"));
$hj = new QueryList($url,$reg);
$arr = $hj->jsonArr;
print_r($arr);
-
提高PHP執行效率的50個技巧
PHP是一種HTML內嵌式的語言,是一種在伺服器端執行的嵌入HTML文件的指令碼語言,下面是小編為大家整理的提高PHP執行效率的50個技巧,歡迎參考~1、用單引號代替雙引號來包含字串,這樣做會更快一些。因為PHP會在雙引號包圍的字串中搜尋變數,單引號則不會,注意:只有echo...
-
ThinkPHP中自動驗證
學無止境,剛開始學習PHP會覺得簡單,但是越學會越難。下面是小編整理的關於ThinkPHP中自動驗證的知識,希望對大家有用,更多訊息請關注應屆畢業生網。ThinkPHP中自動驗證:array(‘欄位’,‘驗證規則’,‘錯誤提示’[,‘驗證條件&rsqu...
-
php計算兩個檔案相對路徑的方法
文章主要介紹了php計算兩個檔案相對路徑的方法,涉及php操作字串的`技巧,具有一定參考借鑑價值,需要的朋友可以參考下.一、問題:寫一個php函式算出兩個檔案的相對路徑。例如$a="/a/b/c/d/";$b="/a/b/12/34/",B相對於A的相對路徑是什麼?二、解決方法:?123456789101...
-
PHP 7.1中都有哪些重大更新
PHP7.1.0帶來了大量的改進和新功能:可空型別返回空型別可迭代的psuedo-type支援常量可見的類陣列解構square框架和在list()中允許指定keys多異常型別捕獲,以下是小編為大家搜尋整理的PHP7.1中都有哪些重大更新,希望能給大家帶來幫助!更多精彩內容請及時關注我們應...