JAVA读取40G左右的TXT文件

问题描述:现有一个txt文件pnrTest,大小为40G左右,并且知道A中每一行都是一个xml文件标准格式的内容,现在要把A中的每一行读取出来然后放到队列中去分析。 解决方案分析1:     方案1设置50m的缓存去读,还是不行,最后发现这种方法只能读取2G以下的文件。 方案2:用NIO方式把大文件分成固定大小的小文件(小于2G,自己综合分析设置多大,每个文件太大容易浪费空间,太小浪费时间),然后
相关文章
相关标签/搜索