java 对大数据的处理

最近作了一个项目，数据量每次处理在两百万左右，这里记录一下最近开发时处理大量数据的思路，主要思路是将大数据化小，屡次处理，不足之处还请指出。服务器 文件读取：首先是一个文件上传，数据入库，10-200万条不等，这里主要考虑到一次性读取，JVM分配出来的栈内存不必定会够（我的对内存这一块仍是处于只知其一;不知其二的状态，因此比较谨慎，若诸位大神有好的认知，但愿评论留下地址分享一下），是依行读取数据，

>>阅读原文<<