大數據學習系列----WIN環境搭建Spark開發環境

下載Spark

進入下載鏈接，選擇Spark2.1：

在Path配置Spark環境變量：D:\Spark\bin

下載Hadoop

進入下載鏈接

配置Hadoop環境變量：

HADOOP_HOME D:\hadoop Path %HADOOP_HOME%\bin

下載winutils.exe放入到Hadoop的bin目錄下，注意若是是64位，能夠自行查找64位進行下載。

經過D:\hadoop\bin\winutils.exe chmod 777 /tmp/hive 修改權限。

出現以下界面即爲成功：

測試

本地新建一個1.txt文件：

Hello
World
Hello
Spark

執行結果：