HDFS緩存助力hadoop、implala計算加速

HDFS緩存配置和使用 一、 概述 HDSF緩存是hadoop自帶的一個數據緩存機制，可以將常用的數據緩存到內存中，這樣查詢數據不必從磁盤中獲取數據，減少了IO傳輸時間，對查詢性能有一定的提升，在實際測試中，impala空閒情況下，加緩存的查詢速度是不加緩存查詢速度的兩倍左右，在IO繁忙的情況下，效果應該更好。 HDFS集中化緩存管理具有許多重大優勢： 1.明確的鎖定可以阻止頻繁使用的數據被從內存

>>阅读原文<<