Hadoop：Hadoop簡介及環境配置

http://blog.csdn.net/pipisorry/article/details/51243805

Hadoop簡介

下次寫上。。。

皮皮blog

配置hadoop環境可能出現的問題

每次format以前最好刪除掉保存的日誌等文件，省得namenode和datanode的id不一致而出現問題。
搭建完成後運行時候遇到過卡到map階段不會動狀況，而後配置了一下yarn內存能夠用了。
每次format以前最好刪除掉保存的日誌等文件，省得namenode和datanode的id不一致而出現問題。

Eclipse中使用hadoop編程

下載安裝eclipse

root用戶打開eclipse：

root@ubuntu-BDMS:~# /opt/eclipse/eclipse &

下載配置hadoop的eclipse插件

下載hadoop-eclipse-plugin-2.6.0.jar到eclipse安裝目錄/plugins目錄下[hadoop2x-eclipse-plugin]

guest@ubuntu-BDMS:~$ sudo wget -P /opt/eclipse/plugins/ https://github.com/winghc/hadoop2x-eclipse-plugin/blob/master/release/hadoop-eclipse-plugin-2.6.0.jar

[Eclipse下搭建Hadoop2.4.0開發環境]

[基於Eclipse的Hadoop應用開發環境配置]

[hadoop2.6.0的eclipse插件編譯和設置]

from: http://blog.csdn.net/pipisorry/article/details/51243805

ref: Hadoop文檔

[脫離JVM? Hadoop生態圈的掙扎與演化]