Dataframe優化內存（轉）

Pandas】Pandas處理大數據集的方法（內存優化，減少內存使用量90%） 將內存使用量減少高達90％的方法 當使用具有小數據（小於100兆字節）的pandas時，性能很少成爲問題。當我們遷移到更大的數據（100兆字節到幾千兆字節）時，性能問題會使運行時間更長，並導致代碼因內存不足而完全失敗。 雖然像Spark這樣的工具可以處理大型數據集（100千兆字節到多兆兆字節），但充分利用它們的功能通常

>>阅读原文<<