Spark Hadoop集羣部署與Spark操作HDFS運行詳解---Spark學習筆記10

目前spark的Run on的hadoop版本大多是hadoop2以上，但是實際上各個公司的生產環境不盡相同，用到2.0以上的公司還是少數。 大多數公司還是停留在1代hadoop上，所以我就拿spark0.91 +  hadoop0.20.2-cdh3u5來部署一個小集羣，以供測試學習使用。 一、環境概況 Spark集羣3臺： web01: slave web02: master db01: sl

>>阅读原文<<