轉 Tachyon:Spark生態系統中的分佈式內存文件系統

Tachyon是Spark生態系統內快速崛起的一個新項目。 本質上, Tachyon是個分佈式的內存文件系統, 它在減輕Spark內存壓力的同時,也賦予了Spark內存快速大量數據讀寫的能力。Tachyon把內存存儲的功能從Spark中分離出來, 使Spark可以更專注計算的本身, 以求通過更細的分工達到更高的執行效率。 本文將先向讀者介紹Tachyon在Spark生態系統中的使用, 也將分享百度
相關文章
相關標籤/搜索