海量數據處理方案

什麼是海量數據？ 正如《逍遙遊》中的一句話：北冥有魚，其名爲鯤，鯤之大，一鍋燉不下，化而爲鳥，其名爲鵬，鵬之大，需要兩個燒烤架；簡單的可以把這裏的海量數據理解爲這裏的鯤鵬 ，數據大到一個服務器存不下，就需要兩個甚至多個服務器來存儲。而接下來我們需要做的就是用一臺服務器來處理海量數據。 以下是一些海量數據處理的例子： 1. 給定一個大小超過 100G 的文件, 其中存在 IP 地址, 找到其中出現次

>>阅读原文<<