爬蟲之chrome瀏覽器的使用方法

chrome瀏覽器使用方法介紹

1. 新建隱身窗口

 

1.1 爲何須要新建隱身窗口

在打開隱身窗口的時候，第一次請求某個網站是沒有攜帶cookie的，和代碼請求一個網站同樣，不攜帶cookie。這樣就可以儘量的理解代碼請求某個網站的結果；除非數據是經過js加載出來的，否則爬蟲請求到的數據和瀏覽器請求的數據大部分時候都是相同的

2. chrome中network的更多功能

 

2.1 Perserve log

默認狀況下，頁面發生跳轉以後，以前的請求url地址等信息都會消失，勾選perserve log後以前的請求都會被保留 

 

2.2 filter過濾

在url地址不少的時候，能夠在filter中輸入部分url地址，對全部的url地址起到必定的過濾效果，具體位置在上面第二幅圖中的2的位置

2.3 觀察特定種類的請求

在上面第二幅圖中的3的位置，有不少選項，默認是選擇的all，即會觀察到全部種類的請求

不少時候處於本身的目的能夠選擇all右邊的其餘選項，好比常見的選項：

• XHR:大部分狀況表示ajax請求
• JS:js請求
• CSS:css請求

可是不少時候咱們並不能保證咱們須要的請求是什麼類型，特別是咱們不清楚一個請求是否爲ajax請求的時候，直接選擇all,從前日後觀察便可，其中js，css，圖片等不去觀察便可

不要被瀏覽器中的一堆請求嚇到了，這些請求中除了js，css，圖片的請求外，其餘的請求並無多少個

2.4 其餘方法

1.search all file

2.肯定js的位置

3.js中添加斷點