sparksql代碼執行過於緩慢

最近服務器狀態不佳,oracle有時性能較差,運行sparksql向oracle中存數據時運行超級緩慢,開始還特地排查代碼找錯,最終換了一個oracle數據庫作實驗發現整個流程在幾秒內很是順利的完成了,可見oracle性能對sparksql執行速度影響巨大,特此記錄這次事件。sql 如下是運行時部分日誌,能夠看到每執行1/200的進度要30000ms,整個預計要200*30=6000秒才能完畢。。
相關文章
相關標籤/搜索