在oozie的sharelib公共庫中爲同一組件(不只限spark)配置不一樣版本的運行環境

最近在公司開發遇到一個問題,oozie中spark的默認環境使用的是es2.0的版本。由於其餘程序都使用2.0版本,因此將2.0的jar包放在了spark的環境中,而我運行spark的任務須要用到es7.2版本,這就致使因jar包版本衝突而沒法運行。shell 通過百度網上有好多oozie整合spark2的文章博客,受此啓發,我可使用現有的spark默認環境從新搭配一套爲es7的spark運行環境
相關文章
相關標籤/搜索