PySpark ---- Sparkcontext編程入口

SparkContext是PySpark的編程入口,做業的提交,任務的分發,應用的註冊都會在SparkContext中進行。一個SparkContext實例表明着和Spark的一個鏈接,只有創建了鏈接才能夠把做業提交到集羣中去。實例化了SparkContext以後才能建立RDD和Broadcast廣播變量。node 1.建立方式 1.1 經過SparkSession獲取SparkContext對象
相關文章
相關標籤/搜索