提煉hadoop ipc模塊,歡迎使用

Hadoop聞名遐邇,其內部通信工具IPC更是被多個apache項目重複使用,因此網絡上不難發現分析IPC模塊的文章。某天在作分佈式爬蟲時,須要用到RPC功能,改造IPC(去掉認證,IPC的無關類)就出現了。 主要的Feature: ``` * 去掉Writable等接口引用; * 去掉Socket認證功能; * 去掉全部配置; * 對外提供相似傳統的XML-RPC面向接口的服務; * 保留原來的Ping功能; * 簡單易用。 ``` 常見問題: ``` Q:IPC模塊穩定嗎? A:很穩定,除了廢棄掉一些模塊外,基本沒有修改其核心功能。 Q:多併發性能怎麼樣? A:抱歉,沒有測試過,本身只是在虛擬機中測試,實際狀況有待你們驗證。 …… ``` 缺點:與LVS負載均衡失敗,期待你們的幫忙,本身測試時總是提示鏈接被重置。 更多,請參見WIKI其餘文章,如http://git.oschina.net/jiangdx/hadoop-ipc/wikis/quick-start
相關文章
相關標籤/搜索