【個人項目】基於scrapy-redis的股票分佈式爬蟲實現及其股票預測算法研究

前言 都說做計算機的,項目實踐是最能帶給人成長的。之前學習了很多的大數據和AI的知識,但是從來沒有自己做過一個既包含大數據又包含AI的項目。後來就決定做了個大數據+AI的分佈式爬蟲系統。下面筆者會講述整個項目的架構,以及所用到技術點的些許介紹。 項目介紹 這個項目是筆者的個人項目,是基於scrapy-redis框架的股票分佈式爬蟲框架實現。scrapy是個爬蟲框架,但只允許單機的,scrapy-r
相關文章
相關標籤/搜索