十四.Spark SQL總結之spark日誌文件數據格式的轉換

第一步.數據源 找到spark的日誌數據源,在/root/spark/spark-2.0.2-bin-hadoop2.7/logs目錄下: 通過對文件的讀取,統計其中數據的條數: val masterLog = sc.textFile("file:///root/spark/spark-2.0.2-bin-hadoop2.7/logs/spark-root-org.apache.spark.dep

>>阅读原文<<