spark踩坑之sc這個東東的特殊性

最近在搞spark,在封裝scala和python的sdk時,發現一些很玄妙的事情: 以下是所需封裝的python模塊文件basejob.py,直接定義全局變量sc,在被import到別的程序中會無法使用這個全局變量sc,經驗證需要在函數裏定義並把它傳遞過去纔可以。
相關文章
相關標籤/搜索