在这里内存就像一条管道，逐行读是把1G文件在内存里过一遍而已，10M表示管道的粗细。
所以，逐行读是把1G文件加载进去过内存。

try (BufferedReader in = new BufferedReader(new FileReader(file))) { String line; while ((line = in.readLine()) != null) { // parse line } }

file再大，只要每一行的长度有限，整个文件读完会需要不少的时间，但不会占用太大的内存。

分块读，每读一个块一个结果集，最后对结果集聚合
处理文本的话，知道行数会更好

linux上面有个指令叫做split可以并发快速把大文本分割成小的文件,然后处理就方便了呀,这种算法叫做外排序

内存就好比草稿纸，写满一篇就翻篇。 用过、没用的数据就扔掉了。

简单举例，创建一个变量 buff,设定好它的大小，打开文件流往里填，填满以后查你要的内容，查到就统计到另外一个变量里计数。 然后清空buff,继续之前读取的位置再次装载内容…… 直到读取完毕，统计也就完成了。

针对不同的系统，都会提供一个API来操作大于内存的文件，也就是将文件当做内存来处理：

内存映射

• mmap

• CreateFileMapping