hadoop錯誤org.apache.hadoop.mapred.TaskAttemptListenerImpl Progress of TaskAttempt

錯誤：

    org.apache.hadoop.mapred.TaskAttemptListenerImpl: Progress of TaskAttempt

緣由：

    錯誤很明顯，磁盤空間不足，但鬱悶的是，進各節點查看，磁盤空間使用不到40%，還有不少空間。

    鬱悶很長時間才發現，原來有個map任務運行時輸出比較多，運行出錯前，硬盤空間一路飆升，直到100%不夠時報錯。隨後任務執行失敗，釋放空間，把任務分配給其它節點。正由於空間被釋放，所以雖然報空間不足的錯誤，但查看當時磁盤還有不少剩餘空間。

    這個問題告訴咱們，運行過程當中的監控很重要。

 

若是，您認爲閱讀這篇博客讓您有些收穫，不妨點擊一下右下角的【推薦】。
若是，您但願更容易地發現個人新博客，不妨點擊一下左下角的【關注我】。
若是，您對個人博客所講述的內容有興趣，請繼續關注個人後續博客，我是【劉超★ljc】。

本文版權歸做者和博客園共有，歡迎轉載，但未經做者贊成必須保留此段聲明，且在文章頁面明顯位置給出原文鏈接，不然保留追究法律責任的權利。