spark-on-yarn做業提交緩慢優化

 spark on yanr方式運行計算做業,發現做業提交緩慢html 根據日誌,提交緩慢主要在兩個過程: 1、uploading file太慢java 17/05/09 10:13:28 INFO yarn.Client: Uploading resource file:/opt/cloudera/parcels/spark-1.6.3-bin-hadoop2.6/lib/spark-ass
相關文章
相關標籤/搜索