spark學習

spark上下文對象,是spark程序的主入口點,負責連接到spark cluster。     一旦有了上下文,就可以創建RDD,子集羣上創建累加器和廣播變量 每個jvm只能激活一個sparkcontext,創建新的時候必須停止前一個 sparkcontext需要傳入sparkconf   ,用來設置spark參數,參數是kv對 RDD:是不可變的,可分區的元素集合,可進行並行操作。該類包含了用
相關文章
相關標籤/搜索