爬蟲入門到精通-環境的搭建

環境的安裝

本文章屬於爬蟲入門到精通系統教程第二講html

IDE的安裝

IDE我用的是VS code,也用過pycharm(可是電腦配置不行,比較卡)python

VScode安裝教程在這,寫的蠻清楚的linux

而後安裝一個python的插件就行
見以下截圖chrome

  • 點擊數字1的地方ubuntu

  • 在數字2的地方輸入pythonsegmentfault

  • 點擊python 0.5.8 右邊的安裝按鈕windows

包的安裝

配置pip源,不配置的話下載速度很慢

windows:在當前用戶根目錄下,建立pip這個文件夾,而後在裏面新建一個文件pip.in 裏面的內容爲瀏覽器

[global]
index-url = http://mirrors.aliyun.com/pypi/simple/
[install]
trusted-host=mirrors.aliyun.com

截圖以下(我當前用戶名爲kimga
網站

linux:在~/.pip/pip.conf文件中添加或修改(內容同上)ui

包的安裝

直接pip install 包的名字
pip install requests

依次安裝以下4個包

  1. requests

  2. lxml

  3. ipython

  4. jupyter

若是發現報錯的話,

  • ubuntu用apt-get install python-包名

    • apt-get install python-lxml

  • windows 在[Unofficial Windows Binaries for Python Extension Packages
    ](http://www.lfd.uci.edu/~gohlk...這個網站上手動下載而後安裝(這個網站有各類python windows擴展包,pip install 報錯的話,就能夠到這個網站上下載安裝

windows下pip install lxml 不多能安裝成功。。。

那咱們怎麼作呢?

  1. 打開Unofficial Windows Binaries for Python Extension Packages這個網址

  2. ctrl+ F,而後在搜索框內輸入lxml

  3. 找到與你係統版本相同的包,下載

    • 個人python版本是2.7,系統是64位的,因此我選擇lxml‑3.7.3‑cp27‑cp27m‑win_amd64.whl

  4. 下載完成後在你下載的目錄下打開cmd命令行

    • 這邊有個小技巧是,找到你下載的目錄後,按住shift不放,而後空白處右鍵,會多出來一個在此處打開命令窗口,不用再慢慢的cd過來

  5. 而後pip install 你剛下載的文件,發現就安裝成功了

Google瀏覽器的安裝

百度軟件中心下載

記得點普通下載(要否則有可能會收穫百度全家桶一份)

下載完正常安裝就行

安裝能夠更換瀏覽器頭的插件

  1. 打開 google插件下載這個網頁

  2. 在輸入框內輸入 extension ID ffhkkpnppgnfaobgihpdblnhmmbodake

  3. 點擊下載

    ![](http://ww1.sinaimg.cn/large/cfc08357gy1fcvui06zb0j20qw0k80x4)
  4. 下載完成後,打開Google瀏覽器,在地址欄輸入chrome://extensions/

  5. 把剛剛下載的文件拖進去進行

最終效果就下圖

總結

看完本篇文章後,你應該要

  • 有一個本身熟悉的python IDE

  • Python配置國內源

  • 能安裝python包

  • 有安裝Google瀏覽器

  • 有能夠更換瀏覽器頭的插件

最後,由於後續實戰我基本上都是用Jupyter notebook來寫調試的,因此請閱讀如下兩篇文章,能大概瞭解Jupyter notebook

Jupyter Notebook快速入門(上)

Jupyter Notebook快速入門(下)


最後的最後,收藏的大哥們,能幫忙點個贊麼~

相關文章
相關標籤/搜索