從零實現基於Scrapy-redis和ElasticSearch的搜索引擎(附代碼及構建過程)

Project Introduction 項目整體分爲scrapy-redis分佈式爬蟲爬取數據、基於ElasticSearch數據檢索和前端界面展示三大模塊。做此項目是爲了熟悉scrapy-redis的基本流程,以及其背後的原理,同時熟悉ElasticSearch的使用。本項目可以作爲一個基於ES存儲的簡單但是相對全面的全棧開發的Demo。項目中所採用的組件均在win10本地環境搭建(僞分佈),
相關文章
相關標籤/搜索