当前位置: 移动技术网 > IT编程>开发语言>c# > 深入多线程之:深入生产者、消费者队列分析

深入多线程之:深入生产者、消费者队列分析

2019年07月18日  | 移动技术网IT编程  | 我要评论
上次我们使用autoresetevent实现了一个生产/消费者队列。这一次我们要使用wait和pulse方法来实现一个更强大的版本,它允许多个消费者,每一个消费者都在自己的

上次我们使用autoresetevent实现了一个生产/消费者队列。这一次我们要使用wait和pulse方法来实现一个更强大的版本,它允许多个消费者,每一个消费者都在自己的线程中运行。

我们使用数组来跟踪线程。

thread[] _workers;

通过跟踪线程可以让我们在所有的线程都结束后再结束我们的队列任务。

每一个消费者线程都执行一个叫做consume的方法,在一个for循环中,我们可以创建和启动线程。例如:

复制代码 代码如下:

       public pcqueue(int workercount)
        {
            _workers = new thread[workercount];
            for (int i = 0; i < workercount; i++)
                (_workers[i] = new thread(consume)).start();
        }

上次我们使用的是一个字符串来代表任务,这次我们使用action委托,它的定义如下:

public delegate void action();

为了表示一系列的任务,我们使用queue<t> 集合,例如:

queue<action> _itemq = new queue<action>();

在我们调用生产(enqueueitem)和消费(consume)方法前,还是完整的看一看代码吧:

复制代码 代码如下:

class pcqueue
    {
        readonly object _locker = new object();
        thread[] _workers;
        queue<action> _itemq = new queue<action>(); //保存任务的队列
        public pcqueue(int workercount)
        {
            _workers = new thread[workercount];
            for (int i = 0; i < workercount; i++)
                (_workers[i] = new thread(consume)).start();
        }

        public void shutdown(bool waitforworkers)
        {
           //为每一个线程插入一个null item,可以是每一个worker 退出
            foreach (thread worker in _workers)
                enqueueitem(null);

           //等待所有的线程退出。
            if (waitforworkers)
                foreach (thread worker in _workers)
                    worker.join();
        }

        public void enqueueitem(action item)
        {
            lock (_locker)
            {
                _itemq.enqueue(item);
                monitor.pulse(_locker); //通知等待队列中的线程
            }
        }

        void consume()
        {
            while (true)
            {
                action item;
                lock (_locker)
                {
                    while (_itemq.count == 0)
                    {
                        monitor.wait(_locker); //释放锁,并阻止当前线程,直到其他线程发送pulse信号。                    }
                    item = _itemq.dequeue();
                }

                if (item == null) return; //退出的信号
                item();
            }
        }
    }


我们可以有一个退出策略,插入一个null item作为consumer退出的信号。如果我们想要快速的退出,可以使用一个独立的”cancel” 标记,因为我们支持多个consumers,所以我们必须为每一个consumer插入一个null item。

下面是main方法。使用两个consumer线程,然后让这两个consumers执行10个委托

复制代码 代码如下:

public static void main()
        {
            pcqueue q = new pcqueue(2);
            console.writeline("enqueuing 10 items...");

            for (int i = 0; i < 10; i++)
            {
                int itemnumber = i;
                q.enqueueitem(() =>
                    {
                        thread.sleep(1000); //模拟耗时的工作
                        console.writeline(" task " + itemnumber);
                    });
            }

            q.shutdown(true); //等待关闭
            console.writeline();
            console.writeline("workers complete!");
        }

下面让我们细致的看一看enqueueitem方法:

复制代码 代码如下:

public void enqueueitem(action item)
        {
            lock (_locker)
            {
                _itemq.enqueue(item);
                monitor.pulse(_locker); //通知等待队列中的线程
            }
        }

因为我们的队列_itemq被多线程环境使用,因此在对_itemq进行读取的时候需要加锁lock.

因为我们插入了一个新的任务,我们必须修改阻塞条件,也就是调用pulse方法,来唤醒调用了wait方法的线程。


出于对效率的考虑,当插入一个item的时候使用pulse来代替pulseall方法,因为大部分时候每一个item只需要一个consumer来执行。如果你有一个冰淇淋,你不可能叫30个睡眠的孩子都起来吃它,同样,对于一个item,同时唤醒30个consumers一点好处都没有。


让我们再看看consumer方法。

我们希望当没什么事情做的时候,线程阻塞就可以了,换句话说,队列中没有item的时候,线程就应该阻塞。因此我们的阻塞条件是_itemq.count ==0;

复制代码 代码如下:

action item;
                lock (_locker)
                {
                    while (_itemq.count == 0)
                    {
                        monitor.wait(_locker); //释放锁,并阻止当前线程,直到其他线程发送pulse信号。                    }
                    item = _itemq.dequeue();
                }

                if (item == null) return; //退出的信号
                item();


while循环退出的时候也意味着_itemq 至少有一个item。我们必须在释放锁之前调用你哦个dequeue方法来获取item,考虑下下面的代码:
复制代码 代码如下:

lock (_locker)
                {
                    while (_itemq.count == 0)
                    {
                        monitor.wait(_locker); //释放锁,并阻止当前线程,直到其他线程发送pulse信号。                    }
                }
                //现在在这里可能被抢占,_itemq可能被修改
                lock (_locker)
                {
                    item = _itemq.dequeue();
                }

在item被dequeued后,我们就应该立即释放锁了,如果我们在执行task的时候,一直持有锁,则会没有必要的阻塞其他线程来获取任务。


wait timeouts

在调用wait方法的时候可以传递一个毫秒或timespan的时间来设置超时。如果wait超时了,那么wait方法就会返回false。

带有超时功能的wait方法的主要步骤:

    释放锁。
    阻塞 直到 pulsed 或者超时。
    重新获取锁。

超时就好像clr 在超时到了的时候自动的调用了 pulse方法一样。

下面是使用超时的wait的主要代码:

         lock(_locker)

         while(<阻塞条件>)

                   monitor.wait(_locker,<超时时间>);


monitor.wait 方法返回一个bool值来代表是调用了pulse还是已经超时了。

如果是true: 代表调用了pulse。

如果是false:代表超时了。

这对记录日志很有用。

如您对本文有疑问或者有任何想说的,请点击进行留言回复,万千网友为您解惑!

相关文章:

  • c# 面试必备线程基础知识点

    c# 面试必备线程基础知识点

    线程的知识太多,知识点有深有浅,往深的研究会涉及操作系统、cpu、内存,往浅了说就是一些语法。没有一定的知识积累,很难把线程的知识写得全面,当然我也没有这个能力... [阅读全文]
  • C#使用System.Net邮件发送功能踩过的坑

    C#使用System.Net邮件发送功能踩过的坑

    1.eazyemail邮件发送类库net 类库自带了邮件发送功能。笔者对该类库,从使用的角度进行了二次封装,nuget上可搜索eazyemail,注入容器时通过... [阅读全文]
  • C#基于Modbus三种CRC16校验方法的性能对比

    C#基于Modbus三种CRC16校验方法的性能对比

    1.背景介绍主要应用场景在物联网中,底端设备注册报文的上报,需要对报文的有效载荷(data)进行crc16的复验,验证与设备端的crc校验是否相等,如果相等,报... [阅读全文]
  • 深入谈谈C#9新特性的实际运用

    前言你一定会好奇:“老周,你去哪开飞机了?这么久没写博客了。”老周:“我买不起飞机,开了个铁矿,挖了一年半的石头。谁知铁矿垮了,压死了几条蜈蚣,什么也没挖着。”... [阅读全文]
  • C# 泛型集合的自定义类型排序的实现

    C# 泛型集合的自定义类型排序的实现

    一、泛型集合list<t>排序经sort方法之后,采用了升序的方式进行排列的。二、对自定义类型进行排序定义一个普通类:接下来,将定义的person实... [阅读全文]
  • C#开发中常用的加密解密方法汇总

    相信很多人在开发过程中经常会遇到需要对一些重要的信息进行加密处理,今天给大家分享我个人总结的一些加密算法:常见的加密方式分为可逆和不可逆两种方式可逆:rsa,a... [阅读全文]
  • C# 如何添加错误日志信息

    系统日志系统日志包含了由windows系统组件记录的事件。例如,在启动期间装入驱动程序或其他系统组件失败被记录到系统日志。要查看系统日志: 打开命令提示符。 ... [阅读全文]
  • 关于C#委托三种调用的分享使用

    关于C#委托三种调用的分享使用

    一、同步调用1、同步调用会按照代码顺序来执行2、同步调用会阻塞线程,如果是要调用一项繁重的工作(如大量io操作),可能会让程序停顿很长时间,造成糟糕的用户体验,... [阅读全文]
  • 用c# 自动更新程序

    作者:冰封一夏出处:hzhcontrols官网:首先看获取和更新的接口更新程序program.cs更新程序界面定义服务端接口,你可以用任意接口都行,我这里用we... [阅读全文]
  • c# 生成二维码的示例

    二维码是越来越流行了,很多地方都有可能是使用到。如果是静态的二维码还是比较好处理的,通过在线工具就可以直接生成一张二维码图片,比如:草料二维码。但有的时候是需要... [阅读全文]
验证码:
移动技术网