Atitit 烈火計劃進展報告 r61

Atitit 烈火計劃進展報告 r61

 

1. 烈火計劃主要包括幾個東西 1

1.1. 2014.12 郵箱編碼讀取 1

1.2. 2017.1  垂直領域圖片下載器  草料圖片下載器 1

1.3. qc30 基於WebmagicUtil的爬蟲  url reader 1

1.4. 社會組織抓取js版 1

1.5. R61  使用js node 重寫url reader 2

1.6. 後級規劃：：Node js版，框架化。。參照python java的爬蟲框架 2

 

1. 烈火計劃主要包括幾個東西

圖片下載器

Url reader

 

 

1.1. 2014.12 郵箱編碼讀取

C:\d\AtiPlatf_se\src_atibrow\com\attilax\lbs

 

1.2. 2017.1  垂直領域圖片下載器  草料圖片下載器

TsaolyoPicSpider

 

1.3. qc30 基於WebmagicUtil的爬蟲  url reader

 

C:\0workspace\atiplat_spider\atireaderUrls\tech.txt

Atitit atiplat_reader 基於url閱讀器的新特性v2 qc30.docx

Atitit atiplat_reader 基於url閱讀器的新特性

 

 

1.4. 社會組織抓取js版

 

1.5. R61  使用js node 重寫url reader

Node 好像沒有爬蟲框架

 

1.6. 後級規劃：：Node js版，框架化。。參照python java的爬蟲框架

 

Spider.create(pageProcessor)

// 從"https://github.com/code4craft"開始抓

.addUrl(crawler.super_SpiderFrmwkPubPart.seedUrl)

// 開啓5個線程抓取

.thread(10)

// 啓動爬蟲

.run();

 

 

做者:: 綽號:老哇的爪子claw of Eagle 偶像破壞者Iconoclast image-smasher

捕鳥王"Bird Catcher  kok  虔誠者Pious 宗教信仰捍衛者 Defender Of the Faith. 卡拉卡拉紅斗篷 Caracalla red cloak 萬獸之王

簡稱：： Emir Attilax Akbar 埃米爾 阿提拉克斯 阿克巴

全名：：Emir Attilax Akbar bin Mahmud bin  attila bin Solomon bin adam Al Rapanui 埃米爾 阿提拉克斯 阿克巴 本 馬哈茂德 本 阿提拉 本 所羅門 本亞當  阿爾 拉帕努伊

經常使用名：艾提拉（艾龍），  EMAIL:1466519819@qq.com

 

 

頭銜：uke總部o2o負責人，全球網格化項目創始人，

uke交友協會會長  uke捕獵協會會長 Emir Uke部落首席大酋長，

 

uke宗教與文化融合事務部部長， uke宗教改革委員會副主席

uke制度與重大會議委員會委員長，uke保安部首席大隊長,uke制度檢查委員會副會長，

 

uke 首席cto   軟件部門總監 技術部副總監  研發部門總監主管  產品部副經理 項目部副經理   uke科技研究院院長 uke軟件培訓大師

 

uke波利尼西亞區大區連鎖負責人 湯加王國區域負責人 uke克爾格倫羣島區連鎖負責人，萊恩羣島區連鎖負責人，uke布維島和南喬治亞和南桑威奇羣島大區連鎖負責人

 Uke軟件標準化協會理事長理事長 Uke 數據庫與存儲標準化協會副會長

 

uke終身教育學校副校長   Uke醫院 與醫學院方面的創始人

 uec學院校長， uecip圖像處理機器視覺專業系主任   uke文檔檢索專業系主任

Uke圖像處理與機器視覺學院首席院長

Uke 戶外運動協會理事長  度假村首席大村長   uke出版社編輯總編

 

轉載請註明來源：attilax的專欄  http://blog.csdn.net/attilax

http://www.cnblogs.com/attilax/

Microblog

http://weibo.com/u/5941179815   (common)

http://weibo.com/u/5487832265

http://weibo.com/u/5487832265 (tech)

 

 

--Atiend  v10