爬蟲基礎——————(requests,cookie,session)

1.爬蟲的分類:即網絡爬蟲,模擬客戶端發送網絡請求,接收請求響應,按照一定規則,自動的抓取互聯網信息的程序。        (1)通用爬蟲:通常指搜索引擎的 爬蟲,如百度搜索。通過搜索引擎搜索的侷限性,其搜索的內容90%是無用的,且音頻,視頻,圖片的內容搜索引擎無能爲力(只能通過圖片,視頻,音頻的名字進行搜索),且不同用戶搜索的目的不一樣,但是返回的內容相同。        (2)聚焦爬蟲:針對特
相關文章
相關標籤/搜索