scrapyd+gerapy的項目部署

scrapyd+gerapy的項目部署：

簡單學習，後續跟進完善

聲明：

　　　1）僅做爲我的學習，若有冒犯，告知速刪！

　　　2）不想誤導，若有錯誤，不吝指教！

環境配置：

scrapyd下載：

　　pip install scrapyd -i https://pypi.com/simple

scrapyd部署：

　　scrapyd-deploy -p 項目名

注意：須要切換到項目的根目錄下運行

 

scrapyd遇到的問題：

1. 'scrapyd-deploy' 不是內部或外部命令，也不是可運行的程序,

2. 解決方法：

   1. 找到scrapyd-deploy文件（Scripts文件夾下），這裏每一個人配置的pip安裝路徑不一樣 ；

   2. 而後在這個文件夾內建立兩個文件，scrapy.bat 和 scrapyd-deploy.bat （新建 txt 文本文檔，而後更改後綴名爲 .bat）

   3. 編輯scrapyd-deloy.bat：

       @echo off
       #python.exe路徑 scrapyd-deploy路徑
       C:\Users\Administrator\AppData\Local\Programs\Python\Python37\python.exe    C:\Users\Administrator\AppData\Local\Programs\Python\Python37\Scripts\scrapyd-deploy %*
       ​

   4. scrapy.bat編輯：

       @echo off
       #python.exe路徑 scrapyd路徑
       C:\Users\Administrator\AppData\Local\Programs\Python\Python37\python.exe C:\Users\Administrator\AppData\Local\Programs\Python\Python37\Scripts\scrapyd %*

      注意：上面路徑沒有分行，兩個路徑之間有空格!

   5. 保存，新起cmd，運行scrapyd-deploy -h,出現如下信息即成功：

       1  Usage: scrapyd-deploy [options] [ [target] | -l | -L <target> ]  2  ​  3  Deploy Scrapy project to Scrapyd server  4  ​  5  Options:  6    -h, --help show this help message and exit  7    -p PROJECT, --project=PROJECT  8                          the project name in the target  9    -v VERSION, --version=VERSION 10  the version to deploy. Defaults to current timestamp 11    -l, --list-targets list available targets 12    -a, --deploy-all-targets 13  deploy all targets 14    -d, --debug           debug mode (do not remove build dir) 15    -L TARGET, --list-projects=TARGET 16  list available projects on TARGET 17    --egg=FILE use the given egg, instead of building it 18    --build-egg=FILE      only build the egg, don't deploy it

       

3. 運行部署命令後報錯：

   1  C:\Users\Administrator\PycharmProjects\code\xbhog>scrapyd-deploy -p xbhog 2  Packing version 1595062659
   3  Deploying to project "xbhog" in http://localhost:6800/addversion.json 4  Deploy failed: <urlopen error [WinError 10061] 因爲目標計算機積極拒絕，沒法鏈接。>
   5  C:\Users\Administrator\AppData\Local\Programs\Python\Python37\python.exe: can't open file 'C:\Users\Administrator\AppData\Local\Programs\Python\Python37\Scripts\scrapyd': [Errno 2] No such file or directory

    

4. 解決方法：

   1. 先在一個cmd窗口執行scrapyd

   2. 而後再用另外一個cmd窗口部署項目

 

gerapy安裝以及使用：

　　pip install gerapy -i https://pypi.com/simple

使用：

• 1.在本地建立空文件夾

• 2.進入文件夾，創建項目（gerapy init）

• 3.進入生成的gerapy文件中

• 4.對數據庫進行初始化（gerapy migrate）

• 5.建立超級管理員（gerapy initadmin）---帳號密碼：admin

• 6.運行：gerapy runserver

 

scrapyd+gerapy搭配使用的效果圖:

 

本文同步分享在 博客"初學者"（CNBlog）。
若有侵權，請聯繫 support@oschina.cn 刪除。
本文參與「OSC源創計劃」，歡迎正在閱讀的你也加入，一塊兒分享。