跟繁瑣的命令行說拜拜！Gerapy分佈式爬蟲管理框架來襲！

跟繁瑣的命令行說拜拜！Gerapy分佈式爬蟲管理框架來襲！ 背景 用 Python 做過爬蟲的小夥伴可能接觸過 Scrapy，GitHub：https://github.com/scrapy/scrapy。Scrapy 的確是一個非常強大的爬蟲框架，爬取效率高，擴展性好，基本上是使用 Python 開發爬蟲的必備利器。如果使用 Scrapy 做爬蟲，那麼在爬取時，我們當然完全可以使用自己的主機來完

>>阅读原文<<