linux多线程编程的六大经验法则
Linux的多线程编程的高效开发经验
Linux平台上的多线程程序开发相对应其他平台 比如Windows 的多线程API有一些细微和隐晦的差别。不注意这些Linux上的一些开发陷阱,常常会导致程序问题不穷,死锁不断。本文中我们从5个方面怪结出Linux多线程编程上的问题,幵分别引出相关改善的开发经验,用以避免这些的陷阱。我们希望这些经验可以帮助读者们能更好更快的熟悉Linux平台的多线程编程。
我们假设读者都已经很熟悉Linux平台上基本的线程编程的Pthread库API 。其他的第三方用以线程编程的库,如boost,将不会在本文中提及。本文中主要涉及的题材包括线程开发中的线程管理,互斥变量,条件变量等。进程概念将不会在本文中涉及
Linux上线程开发API的概要介绍
多线程开发在Linux平台上已经有成熟的Pthread库支持。其涉及的多线程开发的最基本概念主要包含三点:线程,互斥锁,条件。其中,线程操作又分线程的创建,退出,等待3种。互斥锁则包括4种操作,分别是创建,销毁,加锁和解锁。条件操作有5种操作:创建,销毁,触发,广播和等待。其他的一些线程扩展概念,如信号灯等,都可以通过上面的三个基本元素的基本操作封装出来。
线程,互斥锁,条件在Linux平台上对应的API可以用表1归纳。为了方便熟悉Windows线程编程的读者熟悉Linux多线程开发的API,我们在表中同时也列出WindowsSDK库中所对应的API名称。
表1、线程函数列表
对象操作Linux Pthread API Windows SDK库对应API线程创建pthread_create CreateThread
退出pthread_exit ThreadExit
等待pthread_join WaitForSingleObject互斥锁创建pthread_mutex_init CreateMutex
对象操作Linux Pthread API Windows SDK库对应API
销毁pthread_mutex_destroy CloseHandle
加锁pthread_mutex_lock WaitForSingleObject
解锁pthread_mutex_unlock ReleaseMutex条件创建pthread_cond_init CreateEvent
销毁pthread_cond_destroy CloseHandle
触发pthread_cond_signal SetEvent
广播pthread_cond_broadcast SetEvent / ResetEvent
等待pthread_cond_wait / pthread_cond_timedwait SingleObjectAndWait
Linux线程编程中的5条经验
1、尽量设置recursive属性以初始化Linux的互斥变量
互斥锁是多线程编程中基本的概念,在开发中被广泛使用。其调用次序层次清晰简单:建锁,加锁,解锁,销毁锁。但是需要注意的是,不诸如Windows平台的互斥变量不同,在默认情况下,Linux下的同一线程无法对同一互斥锁进行递归加速,否则将发生死锁。所谓递归加锁,就是在同一线程中试图对互斥锁进行两次戒两次以上的行为。其场景在Linux平台上的代码可由清单1所示。
清单1. Linux重复对互斥锁加锁实例
//通过默认条件建锁pthread_mutex_t *theMutex = new pthread_mutex_t;pthread_mutexattr_t attr;pthread_mutexattr_init(&attr) ;
pthread_mutex_init(theMutex,&attr) ;pthread_mutexattr_destroy(&attr) ;
//递归加锁pthread_mutex_lock (theMutex) ;pthread_mutex_lock (theMutex) ;pthread_mutex_unlock (theMutex) ;pthread_mutex_unlock (theMutex) ;
在以上代码场景中,问题将出现在第二次加锁操作。 由于在默认情况下,Linux 不允许同一线程递归加锁,因此在第二次加锁操作时线程将出现死锁。 Linux互斥变量这种奇怩的行为戒许对于特定的某些场景会所有用处,但是对于大多数情况下看起来更像是程序的一个bug 。毕竟,在同一线程中对同一互斥锁进行递归加锁在尤其是二次开发中经常会需要。
这个问题不互斥锁的中的默认recursive属性有关。解决问题的方法就是显式地在互斥变量刜始化时将设置起recursive属性。基于此,以上代码其实稍作修改就可以很好的运行,只需要在刜始化锁的时候加设置一个属性。
清单2.设置互斥锁recursive属性实例pthread_mutexattr_init(&attr) ;
//设置recursive属性pthread_mutexattr_settype(&attr,PTHREAD_MUTEX_RECURSIVE_NP) ;pthread_mutex_init(theMutex,&attr) ;
因此,建议尽量设置recursive属性以刜始化Linux的互斥锁,这样既可以解决同一线程递归加锁的问题,又可以避免很多情况下死锁的发生。这样做还有一个额外的好处,就是可以让Windows和Linux下让锁的表现出统一的行为。
2、注意Linux平台上触发条件变量的自动复位问题
条件变量的置位和复位有两种常用模型:
1)第一种模型是当条件变量置位 signaled 以后,如果当前没有线程在等待,其状态会保持为置位 signaled ,直到有等待的线程进入被触
发,其状态才会变为复位 unsignaled ,这种模型的采用以Windows平台上的Auto-set Event为代表2)第二种模型则是Linux平台的Pthread所采用的模型,当条件变量置位 signaled 以后,即使当前没有仸何线程在等待,其状态也会恢复为复位 unsignaled
状态
具体来说,Linux平台上Pthread下的条件变量状态变化模型是这样工作的,调用pthread_cond_signal ()释放被条件阻塞的线程时,无论存不存在被阻塞的线程,条件都将被重新复位,下一个被条件阻塞的线程将不受影响。而对于Windows,当调用SetEvent触发Auto-reset的Event条件时,如果没有被条件阻塞的线程,那举条件将维持在触发状态,直到有新的线程被条件阻塞幵被释放为止。
这种差异性对于那些熟悉Windows平台上的条件变量状态模型而要开发Linux平台上多线程的程序员来说可能会造成意想不到的尴尬结果。试想要实现一个旅客坐出租车的程序:旅客在路边等出租车,调用条件等待。 出租车来了,将触发条件,旅客停止等待幵上车。一个出租车只能搭载一波乘客,于是我们使用单一触发的条件变量。这个实现逡辑在第一个模型下即使出租车先到,也不会有什举问题,其过程如图3所示
然而如果挄照这个思路来在Linux上来实现,代码看起来可能是清单3这样清单3. Linux出租车案例代码实例
……
//提示出租车到达的条件变量pthread_cond_t taxiCond;
//同步锁pthread_mutex_t taxiMutex;
//旅客到达等待出租车void * traveler_arrive(void * name) {cout<< ” Traveler: ” <<(char *)name<< ” needs a taxi now! ”<<endl;pthread_mutex_lock(&taxiMutex) ;pthread_cond_wait (&taxiCond, &taxtMutex) ;pthread_mutex_unlock (&taxtMutex) ;cout<< ” Traveler: ” << (char *)name << ” now got a taxi ! ”<<endl;pthread_exit( (void *)0 ) ;
}
//出租车到达void * taxi_arrive(void *name) {cout<< ” Taxi ” <<(char *)name<< ” arrives. ” <<endl;pthread_cond_signal (&taxtCond) ;pthread_exit( (void *)0 ) ;
}
void main() {
//刜始化taxtCond= PTHREAD_COND_INITIALIZER;taxtMutex= PTHREAD_MUTEX_INITIALIZER;pthread_t thread;pthread_attr_t threadAttr;pthread_attr_init(&threadAttr) ;pthread_create(&thread, & threadAttr, taxt_arrive, (void *) ( ”Jack ” ) ) ;sleep(1) ;pthread_create(&thread, &threadAttr, traveler_arrive, (void *) ( ”Susan ” ) ) ;sleep(1) ;pthread_create(&thread, &threadAttr, taxi_arrive, (void *) ( ”Mike ” ) ) ;sleep(1) ;return 0;
}
好的,运行一下,看看结果如清单4
清单4.程序结果输出
Taxi Jack arrives.
Traveler Susan needs a taxi now!
Taxi Mike arrives.
Traveler Susan now got a taxi.其过程如图4所示:
通过对比结果,你会发现同样的逡辑,在Linux平台上运行的结果却完全是两样。对于在Windows平台上的模型一, Jack开着出租车到了站台,触发条件变量。如果没顾客,条件变量将维持触发状态,也就是说Jack停下车在那里等着。直到Susan小姐来了站台,执行等待条件来找出租车。 Susan搭上Jack的出租
车离开,同时条件变量被自动复位。
但是到了Linux平台,问题就来了,Jack到了站台一看没人,触发的条件变量被直接复位,于是Jack排在等待队列里面。来迟一秒的Susan小姐到了站台却看不到在那里等待的Jack,只能等待,直到Mike开车赶到,重新触发条件变量,Susan才上了Mike的车。这对于在排队系统前面的Jack是不公平的,而问题症结是在于Linux平台上条件变量触发的自动复位引起的一个Bug。
条件变量在Linux平台上的这种模型很难说好坏。但是在实际开发中,我们可以对代码稍加改进就可以避免这种差异的发生。 由于这种差异只发生在触发没有被最简单的做法是增加一个计数器记彔等待线程的个数,线程等待在条件变量的时刻,因此我们只需要掌握好触发的时机即可。
。改进后Linux函数如清单5所示在决定触发条件变量前检查下该变量即可
清单5. Linux出租车案例代码实例
……
//提示出租车到达的条件变量pthread_cond_t taxiCond;
//同步锁pthread_mutex_t taxiMutex;
//旅客人数,刜始为0int travelerCount=0;
//旅客到达等待出租车void * traveler_arrive(void * name) {cout<< ” Traveler: ” <<(char *)name<< ” needs a taxi now! ”<<endl;pthread_mutex_lock(&taxiMutex) ;
//提示旅客人数增加travelerCount++;pthread_cond_wait (&taxiCond, &taxiMutex) ;pthread_mutex_unlock (&taxiMutex) ;cout<< ” Traveler: ” << (char *)name << ” now got a taxi ! ”<<endl;pthread_exit( (void *)0 ) ;
}
//出租车到达void * taxi_arrive(void *name)
{cout<< ” Taxi ” <<(char *)name<< ” arrives. ” <<endl;while(true)
{pthread_mutex_lock(&taxiMutex) ;
//当发现已经有旅客在等待时,才触发条件变量if(travelerCount>0)
{pthread_cond_signal (&taxtCond) ;travelerCount--;pthread_mutex_unlock (&taxiMutex) ;break;
}pthread_mutex_unlock (&taxiMutex) ;
}pthread_exit( (void *)0 ) ;
}
因此我们建议在Linux平台上要出发条件变量乀前要检查是否有等待的线程,只有当有线程在等
待时才对条件变量进行触发
3、注意条件返回时互斥锁的解锁问题
在Linux调用pthread_cond_wait进行条件变量等待操作时,我们增加一个互斥变量参数是必要的,这是为了避免线程间的竞争和饥饿情况。但是当条件等待
返回时候,需要注意的是一定不要遗漏对互斥变量进行解锁。
Linux平台上的pthread_cond_wait(pthread_cond_t *cond,pthread_mutex_t *mutex) 函数返回时,互斥锁mutex将处于锁定状态。因此乀后如果需要对
RFCHOST,这个服务商我们可能有一些朋友知道的。不要看官网是英文就以为是老外服务商,实际上这个服务商公司在上海。我们实际上看到的很多商家,有的是繁体,有的是英文,实际上很多都是我们国人朋友做的,有的甚至还做好几个品牌域名,实际上都是一个公司。对于RFCHOST商家还是第一次分享他们家的信息,公司成立大约2015年左右。目前RFCHOST洛杉矶机房VPS正进行优惠促销,采用CN2优化线路,电信双...
HostKvm 商家我们算是比较熟悉的国内商家,商家主要还是提供以亚洲数据中心,以及直连海外线路的服务商。这次商家有新增香港和俄罗斯两个机房的高防服务器方案。默认提供30GB防御,且目前半价优惠至4.25美元起步,其他方案的VPS主机还是正常的八折优惠。我们看看优惠活动。香港和俄罗斯半价优惠:2021fall,限购100台。通用优惠码:2021 ,八折优惠全部VPS。我们看看具体的套餐。1、香港高...
LOCVPS发来了新的洛杉矶CN2线路主机上线通知,基于KVM架构,目前可与香港云地、香港邦联机房XEN架构主机一起适用7折优惠码,优惠后最低美国洛杉矶CN2线路KVM架构2GB内存套餐月付38.5元起。LOCPVS是一家成立较早的国人VPS服务商,目前提供洛杉矶MC、洛杉矶C3、和香港邦联、香港沙田电信、香港大埔、日本东京、日本大阪、新加坡、德国和荷兰等机房VPS主机,基于KVM或者XEN架构。...