我的常規爬蟲流程分享

首先,爬蟲不是我的本職工作,我爬蟲一般是爲了一些有意思的東西,獲取一些信息,或者是實現一些可以自動化完成的任務,比如簽到。 一般我的爬蟲流程是這樣的: 1、瀏覽器訪問待爬網頁,並提前打開開發者工具(F12),選中 Nework 選項卡,這樣就可以看到網絡交互信息; 或者,右鍵查看網頁源代碼,查找目標信息。 2、在網絡交互信息流中篩選出自己需要的,然後在 postman 中模擬請求,看是否仍然可以獲
相關文章
相關標籤/搜索