當小內存遇上大量數據，你該怎麼解決這個問題？

當你寫了一個處理數據的軟件，它可能在小樣本文件上運行地很好，但一旦加載大量真實數據後，這個軟件就會崩潰。 問題在於你沒有足夠的內存——如果你有 16GB 的 RAM ，你就無法一次載入 100GB 大小的文件。載入這麼大的文件時，操作系統在某個時刻就會耗盡內存，不能分配存儲單元，你的程序也就會崩潰。 所以，你該怎樣防止這類情況發生？你可以啓動一個大數據集羣——你所需要做的是： 搞到一個計算機集羣。

>>阅读原文<<