HDFS學習筆記3 -- 周邊工具等

1. Edit Viewer
用於將EditLog轉換成各類可讀文件的工具。服務器

2. Image Viewer
用於將FsImage轉換成各類可讀文件的工具。工具

3. Quotas
分NameQuotas和SpaceQuotas兩種。前者用於限制文件名及路徑名的長度,後者用於限制某文件夾所能容納的文件的大小。ui

4. HFTP
經過HTTP只讀方式讀取遠程HDFS集羣的數據。一般用於不一樣版本的HDFS集羣間的數據轉移。它的擴展形式是HSFTP,利用HTTPS對傳輸數據進行加密。加密

5. HTTP REST API
完整支持HDFS的FileSystem/FileContext接口。接口

6. HttpFs Gateway
提供REST HTTP gateway的支持全部HDFS文件操做的服務器。可用於不一樣版本的HDFS集羣間的數據轉移等。it

7. Short-Circuit Local Reads
通常狀況下,客戶端要讀取數據要向DataNode發送請求,DataNode讀取硬盤數據文件後經過Tcp Socket返回給客戶端。而Short-Circuit則支持當客戶端和數據位於同一臺機器上時,容許客戶端直接讀取硬盤數據文件。集羣

8. NFS Gateway
支持NFSv3,容許HDFS掛載到一個客戶端,做爲其本地文件系統的一部分。擴展

相關文章
相關標籤/搜索