eclipse或idea中開發spark程序本地運行以及提交集羣運行

Windows開發hadoop/spark配置 1、將hadoop壓縮文件解壓到相應目錄。像配置jdk環境變量一樣配置HADOOP_HOME到hadoop目錄。把%HADOOP_HOME%\bin加入path。 2、Windows下開發需要將共享的bin目錄覆蓋hadoop原有bin目錄。如果還不行，將共享bin目錄下的hadoop.dll複製到c:\windows\system32目錄下，可能需

>>阅读原文<<