如何在.net c＃中读取非常大的文本文件（以gb为单位）并拆分为小文件

Question

我负责阅读大型文本文件（不是XML），其大小可能为GB。我需要通过检查标题将文件分成更小的块。建议我采取一些方法来实现这一点。示例文本结构将

示例大文件
header_start
BLAW
BLAW
blawasasdasda
header_start
BLAW
blawasdasda
BLAW

需要分割成

1.TXT header_start
BLAW
BLAW
blawasasdasda

2.txt
header_start
BLAW
blawasdasda
BLAW

请帮助我实现这个.net 4.0用较少的时间

感谢 维韦克

Answer 1

为大文件创建一个StreamReader和循环调用ReadLine()。
维护当前输出文件的StreamWriter。
对于每一行，检查它是否为标题，如果是，则在StreamWriter中打开一个新的目标文件。如果不是，请将该行写入当前的StreamWriter。