更快的方式来逐行读取文件？

Question

在PHP中，我使用fopen(),fgets()和fclose()来逐行读取文件。它运作良好。但是我有一个脚本（从CLI运行）必须处理三百个5GB文本文件。这大约是30亿fgets()。所以它工作得很好，但在这个规模下，微小的速度节省将会非常快速地加起来。所以我想知道是否有任何技巧来加速这个过程？

我想到的唯一可能的事情是让fgets()一次读取多行。它看起来并不像它支持的那样，但我在理论上可以让连续说出20个$line[] = fgets($file);然后处理该数组。这与在一个命令中读取多行不完全相同，因此可能没有任何影响。但是我知道排队你的mysql插入并将它们作为一个巨大的插入（我将在经过更多测试和基准测试后在此脚本中实现的另一个技巧）将会节省大量时间。

Answer 1

可能更快的一种可能的方法是用fread()读取文件的大块，用换行符分割它，然后处理这些行。你必须考虑到这些块可能会割断线路，你必须检测这些并将它们粘合在一起。

一般而言，您可以一次读取的块越大，您的过程应该变得越快。在可用内存的范围内。

fread() docs来自：

注意FREAD（）从文件指针的当前位置的读取。使用ftell（）来查找指针的当前位置，并使用rewind（）来倒回指针位置。