C# 利用simd比较两个文件是否相等（高性能）

游子吟i

已于 2024-09-26 22:42:02 修改

阅读量334

点赞数 1

文章标签： c# 开发语言

于 2024-09-26 22:00:16 首次发布

本文链接：https://blog.youkuaiyun.com/ftfmatlab/article/details/142578712

版权

主要用到两个指令集，CompareEqual指令与MoveMask指令，因为电脑cpu原因，我们采用Avx2。

Avx2.CompareEqual，比较两个Vector256<byte>向量，如果元素相同返回255，否则返回0。

Avx2.MoveMask如果Vector256<byte>向量全为为非0且所有元素相等，返回-1，全为0返回0，其它返回其它整数。

代码如下：

但是如果文件太大，一次性加载的数据太多了也慢，而且占用内存，我们可以分批次加载，如下：

static unsafe bool CompareFileContent2(string file1, string file2)
        {
            const int size = 10;
            int vsize = Vector256<byte>.Count;
            int count = vsize << size;
            using FileStream fs1 = File.Open(file1, FileMode.Open);
            using FileStream fs2 = File.Open(file2, FileMode.Open);
            byte* one = stackalloc byte[count];
            byte* two = stackalloc