JAVA讀取40G左右的TXT文件

問題描述:現有一個txt文件pnrTest,大小爲40G左右,並且知道A中每一行都是一個xml文件標準格式的內容,現在要把A中的每一行讀取出來然後放到隊列中去分析。 解決方案分析1:     方案1設置50m的緩存去讀,還是不行,最後發現這種方法只能讀取2G以下的文件。 方案2:用NIO方式把大文件分成固定大小的小文件(小於2G,自己綜合分析設置多大,每個文件太大容易浪費空間,太小浪費時間),然後
相關文章
相關標籤/搜索