大數據處理之hadoop,spark

hadoop包括大數據的存儲和查詢,用SQL查詢 spark是一種新型的計算大數據的框架。用spark可以替代hadoop的一部分查詢功能。 spark主要用於大數據的計算,hadoop主要用於大數據的存儲。 hadoop hdfs:hadoop分佈式文件系統。 map/reduce:計算框架,基於它寫出來的應用程序能夠運行在大型集羣上 zookeeper:高可用和可靠的分佈式協同系統。 hive
相關文章
相關標籤/搜索