[C#] 快速逐行读取文本文件的方法

快速逐行读取文本文件的方法

在处理大量数据时，快速且高效地读取文本文件是至关重要的。本文将介绍几种在C#中逐行读取文本文件的常用方法，并对比它们的性能差异。通过这些示例，你可以选择最适合你应用场景的方法。

使用 StreamReader

StreamReader 是 .NET 中用于读取字符流的一个类，它提供了多种读取方法，包括逐行读取。下面是一个简单的例子：

using System;
using System.IO;

class Program
{
    static void Main()
    {
        string filePath = "example.txt";

        using (StreamReader reader = new StreamReader(filePath))
        {
            string line;
            while ((line = reader.ReadLine()) != null)
            {
                Console.WriteLine(line);
            }
        }
    }
}

复制

优点

• 简单易用，适用于大多数场景。
• 比较低的内存占用，因为它逐行读取文件内容。

使用 File.ReadLines

File.ReadLines 方法会延迟加载文本文件的内容，只在需要时才读取下一行。这使得它非常适合处理大文件，因为它不会将整个文件加载到内存中。

using System;
using System.IO;

class Program
{
    static void Main()
    {
        string filePath = "example.txt";

        foreach (string line in File.ReadLines(filePath))
        {
            Console.WriteLine(line);
        }
    }
}

复制

优点

• 内存占用低，适用于大文件。
• 实现简单，代码更简洁。

使用 File.ReadAllLines

File.ReadAllLines 方法会一次性读取整个文件并将其存储在一个字符串数组中。虽然这种方法方便，但对于大文件来说可能会导致内存不足的问题。

using System;
using System.IO;

class Program
{
    static void Main()
    {
        string filePath = "example.txt";
        string[] lines = File.ReadAllLines(filePath);

        foreach (string line in lines)
        {
            Console.WriteLine(line);
        }
    }
}

复制

缺点

• 对于大文件，可能会导致内存不足。
• 读取整个文件到内存中会增加开销。

性能对比

为了更好地理解这些方法的性能差异，我们可以进行一些基准测试。这里使用 Stopwatch 类来测量每种方法读取相同文件所花费的时间。

using System;
using System.Diagnostics;
using System.IO;

class Program
{
    static void Main()
    {
        string filePath = "example.txt";

        // 测试 StreamReader
        Stopwatch stopwatch = new Stopwatch();
        stopwatch.Start();

        using (StreamReader reader = new StreamReader(filePath))
        {
            while (reader.ReadLine() != null) { }
        }

        stopwatch.Stop();
        Console.WriteLine($"StreamReader: {stopwatch.ElapsedMilliseconds} ms");

        // 测试 File.ReadLines
        stopwatch.Restart();
        foreach (string line in File.ReadLines(filePath)) { }

        stopwatch.Stop();
        Console.WriteLine($"File.ReadLines: {stopwatch.ElapsedMilliseconds} ms");

        // 测试 File.ReadAllLines
        stopwatch.Restart();
        string[] lines = File.ReadAllLines(filePath);

        stopwatch.Stop();
        Console.WriteLine($"File.ReadAllLines: {stopwatch.ElapsedMilliseconds} ms");
    }
}

复制

结果分析

• StreamReader 和 File.ReadLines 的性能差异不大，但在处理大文件时，File.ReadLines 更具优势。
• File.ReadAllLines 在处理小文件时速度较快，但对于大文件，可能会导致内存溢出。

结论

选择哪种方法取决于你的具体需求。如果需要处理大文件或希望减少内存占用，推荐使用 StreamReader 或 File.ReadLines。对于较小的文件且需要简单快速地读取所有行，可以考虑使用 File.ReadAllLines。

通过这些示例和性能分析，你可以更好地理解在 C# 中逐行读取文本文件的不同方法，并根据自己的需求做出最优选择。