datanode報錯:java.io.IOException:Premature EOF from inputStream

HDSF datanode報錯如下:   原因:文件操作超租期,實際上就是data stream操作過程中文件被刪除了,通常是因爲Mapred多個task操作同一個文件,一個task完成後刪掉文件導致。這個錯誤跟dfs.datanode.max.transfer.threads參數到達上限有關。這個是datanode同時處理請求的任務上限,總默認值是4096,該參數取值範圍[1to8192]  
相關文章
相關標籤/搜索