使用phpQuery輕鬆採集網頁內容

phpQuery是一個基於PHP的服務端開源項目,它能夠讓PHP開發人員輕鬆處理DOM文檔內容,好比獲取某新聞網站的頭條信息。更有意思的是,它採用了jQuery的思想,你能夠像使用jQuery同樣處理頁面內容,獲取你想要的頁面信息。php

DEOM演示html

採集頭條

先看一實例,如今我要採集新浪網國內新聞的頭條,代碼以下:web

include 'phpQuery/phpQuery.php'; 
phpQuery::newDocumentFile('http://news.sina.com.cn/china'); 
echo pq(".blkTop h1:eq(0)")->html();

簡單的三行代碼,就能夠獲取頭條內容。首先在程序中包含phpQuery.php核心程序,而後調用讀取目標網頁,最後輸出對應標籤下的內容。算法

pq()是一個功能強大的方法,跟jQuery的$()一模一樣,jQuery的選擇器基本上都能使用在phpQuery上,只要把「.」變成「->」。如上例中,pq(".blkTop h1:eq(0)")抓取了頁面class屬性爲blkTop的DIV元素,並找到該DIV內部的第一個h1標籤,而後用html()方法獲取h1標籤裏的內容(帶html標籤),也就是咱們要獲取的頭條信息,若是使用text()方法,則只獲取頭條的文本內容。固然要使用好phpQuery,關鍵是要找對文檔中對應內容的節點。網站

採集文章列表

下面再來看一個例子,獲取helloweba.com網站的blog列表,請看代碼:spa

include 'phpQuery/phpQuery.php'; 
phpQuery::newDocumentFile('http://www.helloweba.com/blog.html'); 
$artlist = pq(".blog_li"); 
foreach($artlist as $li){ 
   echo pq($li)->find('h2')->html().""; 
}

經過循環列表中的DIV,找出文章標題並輸出,就是這麼簡單。.net

解析XML文檔

假設如今有一個這樣的test.xml文檔:code

<?xml version="1.0" encoding="utf-8"?> 
<root> 
  <contact> 
     <name>張三</name> 
     <age>22</age> 
  </contact> 
  <contact> 
     <name>王五</name> 
     <age>18</age> 
  </contact> 
</root>

 

如今我要獲取名字爲張三的聯繫人的年齡,代碼以下:xml

include 'phpQuery/phpQuery.php'; 
phpQuery::newDocumentFile('test.xml'); 
echo pq('contact > age:eq(0)');

結果輸出:22htm

像jQuery同樣,精準查找文檔節點,輸出節點下的內容,解析一個XML文檔就是這麼簡單。如今你沒必要爲採集網站內容而使用那些頭疼的正則算法、內容替換等繁瑣的代碼了,有了phpQuery,一切就變得輕鬆多了。

開源中國社區收錄地址

源碼下載地址

相關文章
相關標籤/搜索