线程池

  • 初始化阶段创建一堆线程(有最大数量限制),和一个线程安全的任务队列。
  • 若有任务需要处理,则将任务抛入线程池中,线程池中的线程就去处理这个任务。
  • 应用场景:有大量的数据处理请求,需要多执行流并发/并行处理。
  • 优点:1、避免峰值压力下,线程创建过多,资源耗尽,程序奔溃;2、节省线程创建/销毁所带来的时间成本。

     封装实现一个线程池

  • 大量线程(每个线程中都进行循环的任务处理) + 任务缓冲队列。

    线程的入口函数都是在创建的时候固定传入,导致线程池中的线程进行任务处理的方式过于单一。因为线程的入口函数都是一样的,处理流程也就都是一样的,只能处理单一方式的请求----->灵活性太差。

    若任务队列中的任务节点不仅仅是数据,而且包含任务处理方法,那么线程池中的线程只需要使用传入的方法,处理传入的数据即可-----> 提高线程池的灵活性。

    封装任务类

typedef void(*_handler)(int data);
class Task
{
public:
	//用户自己传入要处理的数据和方法
	//组织出一个任务节点
	SetTask(int data, handler_t handler);
	Run()
	{
		return _handler(_data);
	}
private:
	int _data;//要处理的数据
	handler_t _handler;//处理数据的方法
};
  • 线程池中的线程获取到一个任务,只需要调用成员函数Run就可以实现,使用用户传入的函数处理用户传入的数据,而线程池就不用关心用什么方法处理数据了。降低了耦合度-->不管任务的处理有什么改变,都跟线程池没有关系,不需要修改线程池的代码。

    封装线程池

class ThreadPool
{
private:
	//定义线程池中线程的最大数量,初始化时创建相应数量的线程
	int _max_thr;
	std::queue<Task> _queue;	
	//实现_queue操作的安全性
	pthread_mutex_t _mutex;
	//实现线程池中消费者线程的同步
	pthread_cond_t _cond;
	//线程入口函数,不断获取任务调用Run
	void* thr_start(void* arg);
};
  • 代码如下, 使用条件变量来同步线程, 互斥锁来保证任务队列的安全。
#include <cstdio>
#include <queue>
#include <stdlib.h>
#include <unistd.h>
#include <pthread.h>

typedef void(*task_handler_t)(int);
class ThreadTask
{
public:
    ThreadTask(int data, task_handler_t handler):
        _data(data), _handler(handler){
    }
    void Run() {
        return _handler(_data);//用传入的方法处理传入的数据
    }
private:
    int _data;//这是用户传入的要处理的数据
    task_handler_t _handler;//这是用户传入的数据的处理方法
};

#define MAX_THREAD 5
class ThreadPool
{
public:
    ThreadPool(int max_thread = MAX_THREAD):_thr_count(max_thread){
        pthread_mutex_init(&_mutex, NULL);
        pthread_cond_init(&_cond, NULL);
        //sem_init(&sem, 0, 0);
        for (int i = 0; i < _thr_count; i++) {
            pthread_t tid;
            int ret = pthread_create(&tid, NULL, thr_start, (void*)this);
            if (ret != 0) {
                printf("create thread error\n");
                exit(0);
            }
            //若对线程的返回值并不关心,并且希望线程退出后能够自动释放资源
            pthread_detach(tid); // 分离这个线程
        }
    }
    ~ThreadPool(){
        pthread_mutex_destroy(&_mutex);
        pthread_cond_destroy(&_cond);
        //sem_destroy(&sem);
    }
    bool PushTask(const ThreadTask &task){
        //像线程池外部提供的任务入队操作
        //能够入队的其实都是生产者,因为没有做队列的最大节点限制,因此生产者不需要阻塞
        //只需要保护task_queue的操作就可以
        pthread_mutex_lock(&_mutex);
        _task_queue.push(task);
        pthread_mutex_unlock(&_mutex);
        pthread_cond_signal(&_cond);//唤醒线程池中的线程处理任务
        //sem_post(&sem)
        return true;
    }
private:
    //这是线程池中线程的入口函数
    static void *thr_start(void *arg) {
        //获取一个任务,然后调用任务对象的Run接口
        //线程池中的线程并不会处理一个任务之后就退出,因此是一个死循环
        ThreadPool *pool = (ThreadPool*)arg;
        while(1) {
            //判断队列是否位为NULL,则线程需要阻塞等待
            pthread_mutex_lock(&pool->_mutex);
            while (pool->_task_queue.empty()) {
                pthread_cond_wait(&pool->_cond, &pool->_mutex);
            }
            //sem_wait()
            //pthread_mutex_lock()
            ThreadTask task = pool->_task_queue.front();//获取队首节点
            pool->_task_queue.pop();//队首节点出队操作
            pthread_mutex_unlock(&pool->_mutex);

            // 解锁之后再进行任务处理,否则,会造成当前线程加锁获取任务进行处理期间
            // 其它线程无法获取锁,导致无法处理任务---演变成为任务的串行化处理
            // 并且加锁是为了保护task_queue的操作,而不是为了保护任务处理过程的
            task.Run();// 使用任务中用户传入的处理函数处理传入的数据
        }
        return NULL;
    }
private:
    int _thr_count;//线程池中线程的数量
    std::queue<ThreadTask> _task_queue;
    pthread_mutex_t _mutex;//互斥保护_task_queue的操作
    pthread_cond_t _cond;//线程池中线程等待的队列
};


void test(int data)//用户自己定义的数据处理函数
{
    srand(time(NULL));
    int sec = rand() % 5;
    printf("thread:%p  get data:%d  sleep %d sec\n", pthread_self(), data, sec);
    sleep(sec);
    return;
}
int main()
{
    ThreadPool pool;

    for (int i = 0; i < 10; i++) {
        ThreadTask task(i, test);
        pool.PushTask(task);
    }
    while(1) {
        sleep(1);
    }
    return 0;
}

 

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值