Spark學習筆記(16)Spark Streaming源碼解讀之數據清理內幕

這一課講數據清理的內容。 Spark Streaming應用是持續不斷地運行着的。如果不對內存資源進行有效管理,內存就有可能很快就耗盡。 Spark Streaming應用一定有自己的對象、數據、元數據的清理機制。 如果把Spark Streaming研究透徹了,那也就能駕馭Spark的各種應用程序。 本課主要內容: 1 Spark Streaming數據清理原因和現象 2 Spark Strea
相關文章
相關標籤/搜索