Spark Hadoop集羣部署與Spark操作HDFS運行詳解---Spark學習筆記10

目前spark的Run on的hadoop版本大多是hadoop2以上,但是實際上各個公司的生產環境不盡相同,用到2.0以上的公司還是少數。 大多數公司還是停留在1代hadoop上,所以我就拿spark0.91 +  hadoop0.20.2-cdh3u5來部署一個小集羣,以供測試學習使用。 一、環境概況 Spark集羣3臺: web01: slave web02: master db01: sl
相關文章
相關標籤/搜索