local-dirs usable space is below configured utilization percentage/no more

最近新搭建了spark2.3 on yarn的集羣,遇到這麼一個問題,剛開始沒有仔細看,最後才發現是由於datanode節點的磁盤空間不足,造成的,查看了一下機器的磁盤使用,發現確實是沒有空間了,已經使用了98%,清理了一下磁盤的空間,或者給磁盤擴容就可以解決這個問題,如下圖所示. 箭頭所指地方,有一個Unhealthy Nodes,這一塊會有一個提示,點擊進去就有詳細的信息.當然我這個現在是改好

>>阅读原文<<