IDEA上直接運行分佈式運算測試報錯及 IDEA使用教程

前言：當你寫Spark代碼是，想要在IDEA上運行測試代碼，你會發現有關以下報錯：（注意：這裏讀取的是本地文件） 注意：報這個錯誤的意思是，當前這個IDEA不適合運行跟hadoop相關的分佈式程序，解決方法： 在本地安裝單機版的hadoop軟件，從集羣上下載hadoop軟件到本地，然後解壓， 解壓以下文件 1）解壓 2）解壓後的文件/bin目錄下hadoop.dll和winutils.exe文件

>>阅读原文<<