（轉載）利用webkit抓取動態網頁和鏈接

做爬蟲的時候最頭疼的就是遇到一些動態加載的頁面或者是一些動態生成的鏈接。 比如我們的博客園就是個例子：   鳳凰網的評論鏈接也是一樣： 今天我們就用Webkit來解決這個問題。   預備知識可以看一下我前面幾篇文章，準備工作參照利用InjectedBundle定製自己的Webkit（二）中的客戶端程序。 一切就緒之後我們開始！   首先介紹一些重要的函數和回調 在創建一個Page之後我們可以設置一

>>阅读原文<<