HDFS客戶端搭建與Java API操作HDFS

HDFS客戶端搭建 爲什麼不建議使用集羣內操作？ 如果每一次上傳文件都是選擇某一臺DN作爲客戶端，就會導致這個節點上的磁盤以及網絡I0負載超過其他的節點，久而久之這個節點的磁盤以及網卡性能遠遠低於其他節點，從而會導致數據的傾斜問題。 配置集羣客戶端的步驟： 1、找一臺新的服務器，這臺服務器必須能夠與集羣通信 2、將配置好的安裝包原封不動的拷貝到新的服務器 3、配置環境變量方便操作HDFS集羣 Ja

>>阅读原文<<