hadoop深刻了解（二）

1、hadoop安裝

1.設置靜態ip，在windows下查看虛擬機ip，同事更改centos的網絡連接爲host-only模式，更改Addresscip ,netmask.gateway.

執行#service network restart

驗證#ipconfig

2.用工具pietty，簡歷遠程登陸，修改主機名，#hostname 主機名。而後#vi /etc/sysconfig/network永久更改主機名

#vi etc/hosts 更改主機名和ip綁定。

3.關閉防火牆，#service iptables stop

關閉自啓功能 #chkconfig iptables off

或者用setup關閉服務、

4.查看服務列表#chkconfig --list |grep iptables

5.ssh服務,免密碼登錄。像其餘的服務，例如FTP,POP,telnet同樣都是c/s模型，可是更安全。

進入。ssh目錄下

產生公鑰和私鑰 #ssh-keygen -t rsa 

複製公鑰到# cp gongyao authorized_keys

驗證 #ssh localhost

6.文件傳輸工具winscp。把jdk和hadoop上傳至usr/local下

ls -l查看權限，不夠增長權限#chkconfig u+x 文件名。

7./解壓jdk文件，是指環境變量# vi /etc/profile

#service /etc/profile當即生效

java_version查看 

tar -zxvf hadoop

vi /etc/profile

修改四個配置文件

格式化hadoop namenode -format

jps查看進程50070和50030

HDFS命令

一、hadoop fs -ls  hadoop fs -lsr

二、hadoop  fs -pu t       -get    -rm  -rmr   text cat 

本質hadoop fs 至關於hdfs://hadoop0:90001

3.在core_defaual.xml中設置block大小，默認64MB

dfs.data.dir中是datanode中的數據位置