Spark實戰(6)_spark-sql -e -f -i命令的整合和spark-sql平常做業開發流程總結

背景介紹 在平常工做中,咱們能夠在一個shell腳本里面利用spark-sql -e執行sql腳本,並且能夠傳參數,可是存在一個問題,shell腳本對格式要求嚴格,並且shell腳本和spark-sql的腳本混在一塊兒,內容龐大凌亂,很差管理。而spark-sql -f能夠執行一個hql文件,可是不能傳參數進去,這就引出了一個問題,有沒有一種方法,既能夠把shell和hql腳本分開,shell負責
相關文章
相關標籤/搜索