上傳本地文件到hdfs

前提是安裝配置好hadoop環境

1，命令上傳

hdfs dfs -put /home/minst_svmlight.txt  /home/minst_svmlight.txt

                      本地文件                             hdfs上的路徑

上傳後的文件名並不必定和原先的同樣。能夠從新命名。

2，java代碼上傳實現

public static void fileUp() throws IOException {
		String target = "hdfs://master:9000/dataanalysis.jar";
		String local = "D:/Java/data-analysis.jar";
		FileInputStream in = new FileInputStream(new File(local));
		Configuration conf = new Configuration();
		FileSystem fs = FileSystem.get(URI.create(target), conf);
		OutputStream out = fs.create(new Path(target));
		IOUtils.copyBytes(in, out, 4096, true);
		log.info("上傳完成。。。。。。。");
	}