一、 安裝wgetcurl
網址:http://gnuwin32.sourceforge.net/packages/wget.htm工具
下載http://downloads.sourceforge.net/gnuwin32/wget-1.11.4-1-setup.exe網站
雙擊安裝url
二、系統環境變量,新建spa
GNU_HOME=C:\Program Files\GnuWin32.net
三、path添加htm
==========分割線==============遞歸
;%GNU_HOME%\bin圖片
==========分割線==============文檔
四、下載整站:
用wget下載東西,的確很方便,它會自動重連並斷點續傳。讓人很放心。
常常要下載一個網站或網站的某個目錄。
www.2cto.com
下載一個目錄,例以下載網站www.example.com/目錄mydir下的全部內容
命令以下:
wget -r -p -k -np -nc -e robots=off http://www.example.com/mydir/
若是要想下載整個網站,最好去除-np參數。
wget -r -p -k -nc -e robots=off http://www.example.com/mydir/
-r 遞歸;對於HTTP主機,wget首先下載URL指定的文件,而後(若是該文件是一個HTML文檔的話)遞歸下載該文件所引用(超級鏈接)的全部文件(遞 歸深度由參數-l指定)。對FTP主機,該參數意味着要下載URL指定的目錄中的全部文件,遞歸方法與HTTP主機相似。
-c 指定斷點續傳功能。實際上,wget默認具備斷點續傳功能,只有當你使用別的ftp工具下載了某一文件的一部分,並但願wget接着完成此工做的時候,才 須要指定此參數。
-nc 不下載已經存在的文件
-np 表示不追溯至父目錄,不跟隨連接,只下載指定目錄及子目錄裏的東西;
-p 下載頁面顯示所需的全部文件。好比頁面中包含了圖片,可是圖片並不在/yourdir目錄中,而在/images目錄下,有此參數,圖片依然會被正常下 載。
-k 修復下載文件中的絕對鏈接爲相對鏈接,這樣方便本地閱讀。
-o down.log 記錄日記到down.log
-e robots=off 忽略robots.txt
問題解決:若是使用過程當中遇到:
Curl和Wget訪問HTTPS鏈接出現Unable to establish SSl connection錯誤 問題
可按照以下方式解決
wget 使用 –no-check-certificate 參數
curl 使用 -k或者--insecure 參數