.Net 4.0 Parallel 编程(七)Task中的数据共享(上)

本文探讨了多线程编程中的数据共享问题,并通过具体示例介绍了如何利用Task并结合ThreadLocal来解决这类问题。

在前几篇文章中我们看过Parallel Loop以及Task 部分内容,而在多线程的编程中我们较为痛疼的就是多线程中的数据共享问题以及数据同步的问题。本篇Post以及后面的几篇Post中会探讨下TPL中数据共享的常见问题以及其常规的解决办法。

引例

首先我们来看下面的一段代码:

static void Main(string[] args)
{
    int Sum = 0;
    Task[] tasks = new Task[10];
    for (int i = 0; i < 10; i++)
    {
        tasks[i] = new Task(() =>
        {
            for (int j = 0; j < 1000; j++)
            {
                Sum = Sum + 1;
            }
        });
        tasks[i].Start();
    }
    Task.WaitAll(tasks);
    Console.WriteLine("Expected value {0}, Parallel value: {1}",
    10000, Sum);
    Console.ReadLine();
}

上面的代码我们期望是得到10个线程对Sum数据进行轮询累加,按照我们期望的情况,算出的结果应该是:10000,可是我们看看运行后的结果:

image

这是为什么呢?其实我们想想就会明白,主要是我们多个线程并行的进行了Sum的操作,我们可以通过一个时序图来看表示小两个线程同时操作Sum会出现的状况(下图中的表述可能不正确,请谅解):

 

image

在Task1获取到sum值为0,Task2也获取到0,而两个Task都执行了0+1的操作之后并记录入Sum中,而不是我们预期的线程之间各自计算后的信息也进行累加。在我们在并行编程时,像这类数据共享问题是非常常见的。在上面的问题中,我们可以通过顺序执行的来解决这个问题,但是这不是我们希望的,毕竟我们还是希望以并行的方式去处理。在TPL中提供了分离执行的方法来解决这个问题。

分离执行

我们可以通过Task中传递的state参数来进行隔离执行:

static void Main(string[] args)
{
    int Sum = 0;
    Task<int>[] tasks = new Task<int>[10];
    for (int i = 0; i < 10; i++)
    {
        tasks[i] = new Task<int>((obj) =>
        {
            var start = (int)obj;
            for (int j = 0; j < 1000; j++)
            {
                start = start + 1;
            }
            return start;
        }, Sum);
        tasks[i].Start();
    }
    Task.WaitAll(tasks);
    for (var i = 0; i < 10; i++)
    {
        Sum += tasks[i].Result;
    }
    Console.WriteLine("Expected value {0}, Parallel value: {1}",
    10000, Sum);
    Console.ReadLine();
}

上面的程序里面我们在每个Task执行时就不存在数据共享了,每个Task中计算自己值,最后我们汇总每个Task的Result。似乎我们的问题已经解决了,但是我们要知道在.Net 运行时里面并没有支持分离。也就是说,每次我们操作Task时,都要保证Task之间是没有数据共享的,确实是件麻烦的事。在.Net中提供了System.Threading.ThreadLocal来创建分离。

ThreadLocal

ThreadLocal是一种提供线程本地存储的类型,它可以给每个线程一个分离的实例,来提供每个线程单独的数据结果。上面的程序我们可以使用TreadLocal:

static void Main(string[] args)
{
    int Sum = 0;
    Task<int>[] tasks = new Task<int>[10];
    var tl = new ThreadLocal<int>();
    for (int i = 0; i < 10; i++)
    {
        tasks[i] = new Task<int>((obj) =>
        {
            tl.Value = (int)obj;
            for (int j = 0; j < 1000; j++)
            {
                tl.Value++;
            }
            return tl.Value;
        }, Sum);
        tasks[i].Start();
    }
    Task.WaitAll(tasks);
    for (var i = 0; i < 10; i++)
    {
        Sum += tasks[i].Result;
    }
    Console.WriteLine("Expected value {0}, Parallel value: {1}",
    10000, Sum);
    Console.ReadLine();
}

但是我们要注意的一点TreadLocal是针对每个线程的,不是针对每个Task的。在TreadLocal构造函数中提供了一个重载的方法,以让我们来设置每个线程Result初始值。我们通过下面的例子来看看:

static void Main(string[] args)
{
    int Sum = 0;
    Task<int>[] tasks = new Task<int>[10];
    var tl = new ThreadLocal<int>(() => {
        Console.WriteLine(Sum);
        return Sum;
    });
    for (int i = 0; i < 10; i++)
    {
        tasks[i] = new Task<int>(() =>
        {
            for (int j = 0; j < 1000; j++)
            {
                tl.Value++;
            }
            return tl.Value;
        });
        tasks[i].Start();
    }
    Task.WaitAll(tasks);
    for (var i = 0; i < 10; i++)
    {
        Sum += tasks[i].Result;
    }
    Console.WriteLine("Expected value {0}, Parallel value: {1}",
    10000, Sum);
    Console.ReadLine();
}

我们来看看执行的结果:

image

大家可能有疑问,我们是创建了10个Task,可是ThreadLocal只进行了4次初始化。我们要记住一点Task不是Thread,一个Tread中可能有多个Task。我Demo的机器是四核的,这里开启了四个线程去执行10个Task。之所以我们看到的结果会不对,是因为,在一个线程里面会有多个Task,每个Task之间计算时,第一Task计算出来的结果会传递给下一个Task,从而进行了一次累加,所以会出现计算出来的值不准确。所以ThreadLocal是魔鬼也是天使,我们在使用时也要额外注意。

总结

在本文中通过引例我们看到了多线程中数据共享的问题,以及了解了分离执行的办法,同时也了解了TreadLocal的原理,希望对您有用。下篇文章会就TPL中的数据共享问题进行继续地探讨。

alt
作者:Henry Cui
出处: http://henllyee.cnblogs.com/
本文版权归作者和博客园共有,欢迎转载,但未经作者同意必须保留此段声明。

转载于:https://www.cnblogs.com/Henllyee/archive/2011/04/07/ParallelProgarmming_Seven_SharingData.html

一、数据采集层:多源人脸数据获取 该层负责从不同设备 / 渠道采集人脸原始数据,为后续模型训练与识别提供基础样本,核心功能包括: 1. 多设备适配采集 实时摄像头采集: 调用计算机内置摄像头(或外接 USB 摄像头),通过OpenCV的VideoCapture接口实时捕获视频流,支持手动触发 “拍照”(按指定快捷键如Space)或自动定时采集(如每 2 秒采集 1 张),采集时自动框选人脸区域(通过Haar级联分类器初步定位),确保样本聚焦人脸。 支持采集参数配置:可设置采集分辨率(如 640×480、1280×720)、图像格式(JPG/PNG)、单用户采集数量(如默认采集 20 张,确保样本多样性),采集过程中实时显示 “已采集数量 / 目标数量”,避免样本不足。 本地图像 / 视频导入: 支持批量导入本地人脸图像文件(支持 JPG、PNG、BMP 格式),自动过滤非图像文件;导入视频文件(MP4、AVI 格式)时,可按 “固定帧间隔”(如每 10 帧提取 1 张图像)或 “手动选择帧” 提取人脸样本,适用于无实时摄像头场景。 数据集对接: 支持接入公开人脸数据集(如 LFW、ORL),通过预设脚本自动读取数据集目录结构(按 “用户 ID - 样本图像” 分类),快速构建训练样本库,无需手动采集,降低系统开发与测试成本。 2. 采集过程辅助功能 人脸有效性校验:采集时通过OpenCV的Haar级联分类器(或MTCNN轻量级模型)实时检测图像中是否包含人脸,若未检测到人脸(如遮挡、侧脸角度过大),则弹窗提示 “未识别到人脸,请调整姿态”,避免无效样本存入。 样本标签管理:采集时需为每个样本绑定 “用户标签”(如姓名、ID 号),支持手动输入标签或从 Excel 名单批量导入标签(按 “标签 - 采集数量” 对应),采集完成后自动按 “标签 - 序号” 命名文件(如 “张三
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值