用HTMLParser提取URL頁面超連接的一段代碼(小試牛刀)

用HTMLParser提取URL頁面超連接的一段代碼(小試牛刀)


package htmlparser;

import java.util.HashMap;
import java.util.Map;

import org.htmlparser.Node;
import org.htmlparser.NodeFilter;
import org.htmlparser.Parser;
import org.htmlparser.tags.LinkTag;
import org.htmlparser.util.NodeList;

public class GetLinkTest
{

   public static void main(String[] args)
  {

     try
    {
       // 經過過濾器過濾出<A>標籤
      Parser parser = new Parser( "http://www.google.cn");
      NodeList nodeList = parser
          .extractAllNodesThatMatch(new NodeFilter()
          {
            // 實現該方法,用以過濾標籤
            public boolean accept(Node node)
            {
              if (node instanceof LinkTag)// 標記
                return true;
              return false;
            }

          });
      // 打印
      for (int i = 0; i < nodeList.size(); i++)
      {
        LinkTag n = (LinkTag) nodeList.elementAt(i);
        System.out.print(n.getStringText() + " ==>> ");
        System.out.println(n.extractLink());
      }
    }
    catch (Exception e)    {      e.printStackTrace();    }  }}
輸出結果: 圖片 ==>> [url]http://p_w_picpaths.google.cn/imghp?hl=zh-CN&tab=wi[/url] 地圖 ==>> [url]http://ditu.google.cn/maps?hl=zh-CN&tab=wl[/url] 資訊 ==>> [url]http://news.google.cn/nwshp?hl=zh-CN&tab=wn[/url] 視頻 ==>> [url]http://video.google.cn/?hl=zh-CN&tab=wv[/url] 財經 ==>> [url]http://www.google.cn/finance?hl=zh-CN&tab=we[/url] <u style=height:22px;vertical-align:top>更多</u> <small>&#9660;</small> ==>> [url]http://www.google.cn/intl/zh-CN/options/[/url] 博客 ==>> [url]http://blogsearch.google.cn/?hl=zh-CN&tab=wb[/url] 生活 ==>> [url]http://shenghuo.google.cn/shenghuo/?hl=zh-CN&tab=w8[/url] 熱榜 ==>> [url]http://www.google.cn/rebang/home?hl=zh-CN&tab=w9[/url] 網站導航 ==>> [url]http://daohang.google.cn/?hl=zh-CN&tab=wA[/url] 日曆 ==>> [url]http://www.google.com/calendar/render?hl=zh-CN&tab=wc[/url] 照片 ==>> [url]http://picasaweb.google.com/home?hl=zh-CN&tab=wq[/url] 文檔 ==>> [url]http://docs.google.com/?hl=zh-CN&tab=wo[/url] 協做平臺 ==>> [url]http://sites.google.com/?hl=zh-CN&tab=w3[/url] 輸入法 ==>> [url]http://tools.google.com/pinyin/?hl=zh-CN&tab=wI[/url] 工具欄 ==>> [url]http://toolbar.google.com/?hl=zh-CN&tab=wO[/url] 軟件精選 ==>> [url]http://pack.google.cn/?hl=zh-CN&tab=wP[/url] 更多 &raquo; ==>> [url]http://www.google.cn/intl/zh-CN/options/[/url] 個性化主頁 ==>> [url]http://www.google.cn/url?sa=p&pref=ig&pval=3&q=http://www.google.cn/ig/china%3Fhl%3Dzh-CN%26source%3Diglk&usg=AFQjCNGNYfgta9G_BNut0SFGzavY4Y2pjQ[/url] 登陸 ==>> [url]https://www.google.com/accounts/Login?continue=http://www.google.cn/&hl=zh-CN[/url] 高級搜索 ==>> [url]http://www.google.cn/advanced_search?hl=zh-CN[/url] 使用偏好 ==>> [url]http://www.google.cn/preferences?hl=zh-CN[/url] 語言工具 ==>> [url]http://www.google.cn/language_tools?hl=zh-CN[/url] 廣告計劃 ==>> [url]http://www.google.cn/intl/zh-CN/ads/[/url] Google 大全 ==>> [url]http://www.google.cn/intl/zh-CN/about.html[/url] Google.com in English ==>> [url]http://www.google.com/ncr[/url] 隱私權 ==>> [url]http://www.google.cn/intl/zh-CN/privacy.html[/url]
相關文章
相關標籤/搜索