1. 信号量函数
信号量用在多线程多任务同步,一个线程完成了某一个动作就通过信号量告诉别的线程,别的线程再进行某些动作。 信号量不一定是锁定某一个资源,而是流程上的概念,比如:有A,B两个线程,B线程要等A线程完成某一任务以后再进行自己下面的步骤,这个任务并不一定是锁定某一资源,还可以是进行一些计算或者数据处理之类。
信号量(信号灯)
与互斥锁和条件变量的主要不同在于”灯”的概念,灯亮资源可用,灯灭则不可用。信号量主要阻塞线程, 不能完全保证线程安全,如要保证线程安全, 需要信号量互斥锁一起使用。
信号量和条件变量一样用于处理生产者和消费者模型,用于阻塞生产者线程或者消费者线程的运行。信号的类型为sem_t
对应的头文件为<semaphore.h>
#include <semaphore.h> sem_t sem;
#include <semaphore.h> // 初始化信号量/信号灯 int sem_init(sem_t *sem, int pshared, unsigned int value); // 资源释放, 线程销毁之后调用这个函数即可 // 参数 sem 就是 sem_init() 的第一个参数 int sem_destroy(sem_t *sem);
- 参数:
- sem:信号量变量地址
- pshared:
- 0:线程同步
- 非0:进程同步
- value:初始化当前信号量拥有的资源数(>=0),如果资源数为0,线程就会被阻塞了。
// 函数被调用sem中的资源就会被消耗1个, 资源数-1 int sem_wait(sem_t *sem);
sem中的资源数>0,线程不会阻塞,线程会占用sem中的一个资源,因此资源数-1, sem中的资源数减为0时,资源被耗尽,因此线程也就被阻塞了。
// 函数被调用sem中的资源就会被消耗1个, 资源数-1 int sem_trywait(sem_t *sem);
sem中的资源数>0,线程不会阻塞,线程会占用sem中的一个资源,因此资源数-1 sem中的资源数减为0时,资源被耗尽,但是线程不会被阻塞,直接返回错误号,因此可以在程序中添加判断分支,用于处理获取资源失败之后的情况。
// 表示的时间是从1970.1.1到某个时间点的时间, 总长度使用秒/纳秒表示 struct timespec { time_t tv_sec; /* Seconds */ long tv_nsec; /* Nanoseconds [0 .. 999999999] */ }; // 调用该函数线程获取sem中的一个资源,当资源数为0时,线程阻塞 // 在阻塞abs_timeout对应的时长之后,解除阻塞。 // abs_timeout: 阻塞的时间长度, 单位是s, 是从1970.1.1开始计算的 int sem_timedwait(sem_t *sem, const struct timespec *abs_timeout);
该函数的参数abs_timeout
和pthread_cond_timedwait
的最后一个参数是一样的
sem中的资源数>0,线程不会阻塞,线程会占用sem中的一个资源,因此资源数-1
sem中的资源数减为0时,资源被耗尽,线程被阻塞,当阻塞指定的时长之后,线程解除阻塞。
// 调用该函数给sem中的资源数+1 int sem_post(sem_t *sem);
调用该函数会将sem中的资源数+1
如果有线程在调用sem_wait
、sem_trywait
、sem_timedwait
时因sem中的资源数为0被阻塞
这时这些线程会解除阻塞,获取到资源之后继续向下运行。
// 查看信号量 sem 中的整形数的当前值, 这个值会被写入到sval指针对应的内存中 // sval是一个传出参数 int sem_getvalue(sem_t *sem, int *sval);
查看sem中现在拥有的资源个数,通过第二个参数sval将数据传出 也就是说第二个参数的作用和返回值是一样的。
2. 生产者消费者
由于生产者和消费者是两类线程,并且在还没有生成之前是不能进行消费的 在使用信号量处理这类问题的时候可以定义两个信号量,分别用于记录生产者和消费者线程拥有的总资源数。
// 生产者线程 sem_t psem; // 消费者线程 sem_t csem; // 信号量初始化 sem_init(&psem, 0, 5); // 5个生产者可以同时生产 sem_init(&csem, 0, 0); // 消费者线程没有资源, 因此不能消费 // 生产者线程 // 在生产之前, 从信号量中取出一个资源 sem_wait(&psem); // 生产者商品代码, 有商品了, 放到任务队列 ...... ...... ...... // 通知消费者消费,给消费者信号量添加资源,让消费者解除阻塞 sem_post(&csem); //////////////////////////////////////////////////////// //////////////////////////////////////////////////////// // 消费者线程 // 消费者需要等待生产, 默认启动之后应该阻塞 sem_wait(&csem); // 开始消费 ...... ...... ...... // 消费完成, 通过生产者生产,给生产者信号量添加资源 sem_post(&psem);
初始化信号量的时候没有消费者分配资源,消费者线程由于没有资源自然就被阻塞了,等生产者生产出产品之后,再给消费者分配资源,这样二者就可以配合着完成生产和消费流程了。
3. 信号量使用
使用信号量实现生产者和消费者模型 生产者5个,往链表头部添加节点,消费者5个,删除链表头部的节点。
3.1 总资源数为1
如果生产者和消费者线程使用的信号量对应的总资源数为1 那么不管线程有多少个,可以工作的线程只有一个,其余线程由于拿不到资源,都被迫阻塞了。
#include <stdio.h> #include <stdlib.h> #include <unistd.h> #include <string.h> #include <semaphore.h> #include <pthread.h> // 链表的节点 struct Node { int number; struct Node* next; }; // 生产者线程信号量 sem_t psem; // 消费者线程信号量 sem_t csem; // 互斥锁变量 pthread_mutex_t mutex; // 指向头结点的指针 struct Node * head = NULL; // 生产者的回调函数 void* producer(void* arg) { // 一直生产 while(1) { // 生产者拿一个信号灯 sem_wait(&psem); // 创建一个链表的新节点 struct Node* pnew = (struct Node*)malloc(sizeof(struct Node)); // 节点初始化 pnew->number = rand() % 1000; // 节点的连接, 添加到链表的头部, 新节点就新的头结点 pnew->next = head; // head指针前移 head = pnew; printf("+++producer, number = %d, tid = %ld\n",pnew>number, pthread_self()); // 通知消费者消费, 给消费者加信号灯 sem_post(&csem); // 生产慢一点 sleep(rand() % 3); } return NULL; } // 消费者的回调函数 void* consumer(void* arg) { while(1) { sem_wait(&csem); // 取出链表的头结点, 将其删除 struct Node* pnode = head; printf("--consumer: number: %d, tid = %ld\n", pnode>number, pthread_self()); head = pnode->next; free(pnode); // 通知生产者生成, 给生产者加信号灯 sem_post(&psem); sleep(rand() % 3); } return NULL; } int main() { // 初始化信号量 // 生产者和消费者拥有的信号灯的总和为1 sem_init(&psem, 0, 1); // 生成者线程一共有1个信号灯 sem_init(&csem, 0, 0); // 消费者线程一共有0个信号灯 // 创建5个生产者, 5个消费者 pthread_t ptid[5]; pthread_t ctid[5]; for(int i=0; i<5; ++i) { pthread_create(&ptid[i], NULL, producer, NULL); } for(int i=0; i<5; ++i) { pthread_create(&ctid[i], NULL, consumer, NULL); } // 释放资源 for(int i=0; i<5; ++i) { pthread_join(ptid[i], NULL); } for(int i=0; i<5; ++i) { pthread_join(ctid[i], NULL); } sem_destroy(&psem); sem_destroy(&csem); return 0; }
结论:如果生产者和消费者使用的信号量总资源数为1,那么不会出现生产者线程和消费者线程同时访问共享资源的情况,不管生产者和消费者线程有多少个,它们都是顺序执行的。
3.2 总资源数大于1
如果生产者和消费者线程使用的信号量对应的总资源数为大于1,这种场景下出现的情况就多了:
- 多个生产者线程同时生产
- 多个消费者同时消费
- 生产者线程和消费者线程同时生产和消费
以上不管哪一种情况都可能会出现多个线程访问共享资源的情况 如果想防止共享资源出现数据混乱,那么就需要使用互斥锁进行线程同步,处理代码如下:
#include <stdio.h> #include <stdlib.h> #include <unistd.h> #include <string.h> #include <semaphore.h> #include <pthread.h> // 链表的节点 struct Node { int number; struct Node* next; }; // 生产者线程信号量 sem_t psem; // 消费者线程信号量 sem_t csem; // 互斥锁变量 pthread_mutex_t mutex; // 指向头结点的指针 struct Node * head = NULL; // 生产者的回调函数 void* producer(void* arg) { // 一直生产 while(1) { // 生产者拿一个信号灯 sem_wait(&psem); // 加锁, 这句代码放到 sem_wait()上边, 有可能会造成死锁 pthread_mutex_lock(&mutex); // 创建一个链表的新节点 struct Node* pnew = (struct Node*)malloc(sizeof(struct Node)); // 节点初始化 pnew->number = rand() % 1000; // 节点的连接, 添加到链表的头部, 新节点就新的头结点 pnew->next = head; // head指针前移 head = pnew; printf("+++producer, number = %d, tid = %ld\n",pnew>number, pthread_self()); pthread_mutex_unlock(&mutex); // 通知消费者消费 sem_post(&csem); // 生产慢一点 sleep(rand() % 3); } return NULL; } // 消费者的回调函数 void* consumer(void* arg) { while(1) { sem_wait(&csem); pthread_mutex_lock(&mutex); struct Node* pnode = head; printf("--consumer: number: %d, tid = %ld\n", pnode>number, pthread_self()); head = pnode->next; // 取出链表的头结点, 将其删除 free(pnode); pthread_mutex_unlock(&mutex); // 通知生产者生成, 给生产者加信号灯 sem_post(&psem); sleep(rand() % 3); } return NULL; } int main() { // 初始化信号量 sem_init(&psem, 0, 5); // 生成者线程一共有5个信号灯 sem_init(&csem, 0, 0); // 消费者线程一共有0个信号灯 // 初始化互斥锁 pthread_mutex_init(&mutex, NULL); // 创建5个生产者, 5个消费者 pthread_t ptid[5]; pthread_t ctid[5]; for(int i=0; i<5; ++i) { pthread_create(&ptid[i], NULL, producer, NULL); } for(int i=0; i<5; ++i) { pthread_create(&ctid[i], NULL, consumer, NULL); } // 释放资源 for(int i=0; i<5; ++i) { pthread_join(ptid[i], NULL); } for(int i=0; i<5; ++i) { pthread_join(ctid[i], NULL); } sem_destroy(&psem); sem_destroy(&csem); pthread_mutex_destroy(&mutex); return 0; }
在写上述代码时有一个需要注意是事项 不管是消费者线程的处理函数还是生产者线程的处理函数内部有这么两行代码:
// 消费者 sem_wait(&csem); pthread_mutex_lock(&mutex); // 生产者 sem_wait(&csem); pthread_mutex_lock(&mutex);
这两行代码的调用顺序是不能颠倒的,否则就有可能会造成死锁,下面来分析一种死锁的场景:
void* producer(void* arg) { // 一直生产 while(1) { pthread_mutex_lock(&mutex); // 生产者拿一个信号灯 sem_wait(&psem); ...... ...... // 通知消费者消费 sem_post(&csem); pthread_mutex_unlock(&mutex); // 生产慢一点 sleep(rand() % 3); } return NULL; } // 消费者的回调函数 void* consumer(void* arg) { while(1) { pthread_mutex_lock(&mutex); sem_wait(&csem); ...... ...... // 通知生产者生成, 给生产者加信号灯 sem_post(&psem); pthread_mutex_unlock(&mutex); sleep(rand() % 3); } return NULL; } int main() { // 初始化信号量 sem_init(&psem, 0, 5); // 生成者线程一共有5个信号灯 sem_init(&csem, 0, 0); // 消费者线程一共有0个信号灯 ...... ...... return 0; }
初始化状态下消费者线程没有任务信号量资源
假设某一个消费者线程先运行,调用pthread_mutex_lock(&mutex);
对互斥锁加锁成功
然后调用sem_wait(&csem);
由于没有资源,因此被阻塞了。
其余的消费者线程由于没有抢到互斥锁,因此被阻塞在互斥锁上。
对应生产者线程第一步操作也是调用pthread_mutex_lock(&mutex);
但是这时候互斥锁已经被消费者线程锁上了,所有生产者都被阻塞
到此为止,多余的线程都被阻塞了,程序产生了死锁。