一臺服務器同時起多個hive跑local mr很大機率會報 FileAlreadyExistsException

原因:當你起一個hive,跑local mode時(數據量不多),hive調起的任務處理過程不是分佈式的MR,而是本地MR,而本地MR就需要一個文件去放數據啊 ,而本地文件系統只有一個命令空間,那衝突就隨時會發生了。 解決: set hive.exec.mode.local.auto=false; 參考https://my.oschina.net/u/186712/blog/827949
相關文章
相關標籤/搜索