利用wget命令實現爬蟲的簡單抓取

wget命令相信很多人並不陌生,但是絕大多數僅僅是利用它下載文件使用。其實它還有個作用,就是爬取數據。 它雖然不如Python,Java手寫代碼那麼靈活,但是對於需求簡單的,用這個足夠了。 話不多說,首先上抓取命令(以抓取博客園爲例): wget -o /tmp/wget.log -P /root/data --no-parent --no-verbose -m -D www.cnblogs.c
相關文章
相關標籤/搜索