當咱們須要採集網絡上的某個網頁內容時,若是目標網站上的圖片作了防盜鏈的話,咱們直接採集過來的圖片在本身網站上是不可用的。那麼咱們使用程序將目標網站上的圖片下載到咱們網站服務器上,而後就可調用圖片了。
本文將使用PHP實現採集遠程圖片功能。基本流程:
一、獲取目標網站圖片地址。
二、讀取圖片內容。
三、建立要保存圖片的路徑並命名圖片名稱。
四、寫入圖片內容。
五、完成。
咱們經過寫幾個函數來實現這一過程。
函數make_dir()創建目錄。判斷要保存的圖片文件目錄是否存在,若是不存在則建立目錄,而且將目錄設置爲可寫權限。
- function make_dir($path){
- if(!file_exists($path)){
- $mk=@mkdir($path,0777);
- @chmod($path,0777);
- }
- return true;
- }
函數read_filetext()取得圖片內容。使用fopen打開圖片文件,而後fread讀取圖片文件內容。
- function read_filetext($filepath){
- $filepath=trim($filepath);
- $htmlfp=@fopen($filepath,"r");
-
- if(strstr($filepath,"://")){
- while($data=@fread($htmlfp,500000)){
- $string.=$data;
- }
- }
-
- else{
- $string=@fread($htmlfp,@filesize($filepath));
- }
- @fclose($htmlfp);
- return $string;
- }
函數write_filetext()寫文件,將圖片內容fputs寫入文件中,即保存圖片文件。
- function write_filetext($filepath,$string){
-
- $fp=@fopen($filepath,"w");
- @fputs($fp,$string);
- @fclose($fp);
- }
函數get_filename()獲取圖片名稱,也能夠自定義要保存的文件名。
- function get_filename($filepath){
- $fr=explode("/",$filepath);
- $count=count($fr)-1;
- return $fr[$count];
- }
而後將幾個函數組合,在函數save_pic()中調用,最後返回保存後的圖片路徑。
- function save_pic($url,$savepath=''){
-
- $url=trim($url);
- $url=str_replace(" ","%20",$url);
-
- $string=read_filetext($url);
- if(emptyempty($string)){
- echo '讀取不了文件';exit;
- }
-
- $filename = get_filename($url);
-
- make_dir($savepath);
-
- $filepath = $savepath.$filename;
-
- write_filetext($filepath,$string);
- return $filepath;
- }
最後一步就是調用save_pic()函數保存圖片,咱們使用如下代碼作測試。
-
- $pic = "http://img0.pconline.com.cn/pconline/1205/06/2776119_end1_thumb.jpg";
-
- $savepath = "p_w_picpaths/";
- echo save_pic($pic,$savepath);
實際應用中,咱們可能會採集某個站點的內容,好比產品信息,包括採集防盜鏈的圖片保存到網站上服務器上。這時咱們能夠使用正則匹配頁面內容,將頁面中相匹配的圖片都找出來,而後分別下載到網站服務器上,完成圖片的採集。如下代碼僅供測試:
- function get_pic($cont,$path){
- $pattern_src = '/<[img|IMG].*?src=[\'|\"](.*?(?:[\.gif|\.jpg]))[\'|\"].*?[\/]?>/';
- $num = preg_match_all($pattern_src, $cont, $match_src);
- $pic_arr = $match_src[1];
- foreach ($pic_arr as $pic_item) {
- save_pic($pic_item,$path);
- echo "[OK]..!";
- }
- }
而後咱們經過分析頁面內容,將主體內容找出來,調用get_pic()實現圖片的保存。
//咱們採集太平洋電腦網上一篇關於手機報道內容頁的圖片
- $url = "http://gz.pconline.com.cn/321/3215791.html";
-
- $content = file_get_contents($url);
- $preg = '#<div class="art_con">(.*)<div class="ivy620 ivy620Ex"></div>#iUs';
- preg_match_all($preg, $content, $arr);
- $cont = $arr[1][0];
- get_pic($cont,'img/');
以上代碼筆者親測,能夠採集圖片,可是還有些場景沒考慮進去,好比目標網站作了302屢次跳轉的,目標網站作了多種防採集的,留給喜歡折騰的同窗去試試吧。