Datanode佔用磁盤IO高問題

hadoop集羣版本:hadoop-2.7.2 問題現象: iotop排查有大量的du -sk 操作佔用IO比較高,且執行很長時間; iostat -x 5: 磁盤IOutil 一直處於比較高的使用率,且iowait值比較大,io有一定的等待延遲; 問題原因: Datanode進程啓動時,啓動DU線程定期執行du –sk命令統計各blockpool目錄的佔用情況,隨着心跳彙報給namenode。
相關文章
相關標籤/搜索