Hive on spark日誌打印問題總結(任務執行進度的透明化)

一:問題spa hive on spark中,當切到spark計算引擎的時候發現打印的日誌不全,默認的日誌只到下圖就結束了日誌   對比以前mapreduce的日誌server 咱們能夠很容易的發現MR日誌有很詳細的進度,用戶能夠經過查看這個map和reduce的進度來查看任務的執行狀況,可是spark咱們怎麼辦呢?blog 二:分析源碼 經過在hiveserver端查看MR這些日誌打印的行,都是
相關文章
相關標籤/搜索