SparkThiftServer 資源動態分配

背景 在做的項目BI 使用的是sparkJDBC來去查詢和處理數據。依賴的SparkThiftServer這一塊東西還是挺多的,今天來講一下資源動態分配。有了資源動態分配的功能,使其在處理大數據量或者小數據量的時候,都可以處理,而且相對來說不用一直佔用較多資源。 本文大部分參考官方文檔,小部分是自己實際測試得出的結論。 官方文檔地址:https://spark.apache.org/docs/la
相關文章
相關標籤/搜索