pyspark讀寫hdfs，parquet文件

#-*- coding:utf-8 -*- import json from pyspark.sql import SparkSession #連接集羣 spark = SparkSession.builder.master("yarn-client").appName("test").getOrCreate() #讀取數據，數據位置‘hdfs://bd01:8020/user/root/par

>>阅读原文<<