hadoop學習摘要

 

 

 

 

 

 

 

參考連接：https://www.zhihu.com/question/333417513

https://www.oschina.net/p/hbase

hadoop環境搭建：https://blog.csdn.net/hliq5399/article/details/78193113/

 

google的核心競爭技術是它的計算平臺。Google的大牛們用了下面5篇文章，介紹了它們的計算設施。 

• GoogleCluster：http://research.google.com/archive/googlecluster.html
• Chubby：http://labs.google.com/papers/chubby.html
• GFS：http://labs.google.com/papers/gfs.html
• BigTable：http://labs.google.com/papers/bigtable.html
• MapReduce：http://labs.google.com/papers/mapreduce.html

google發佈後，apache推出了相似的解決方案，那就是大名鼎鼎的Apache Hadoop項目，對應的結構分別是：

• Chubby–>ZooKeeper （用於分佈式集羣）
• GFS–>HDFS （用於分佈式文件系統）
• BigTable–>HBase （有別於傳統數據庫的數據存儲）
• MapReduce–>Hadoop（數據的邏輯處理）