[python] 线程
来源:田飞雨
链接:http://www.jianshu.com/p/12cd213a93bf
虽然python中由于GIL的机制致使多线程不能利用机器多核的特性,但是多线程对于我们理解并发模型以及底层操作非常有用。
线程的有两种使用方法,一种是在函数使用,一种是放在类中使用。
1,在函数中使用多线程
语法如下:
thread.start_new_thread(function, args[, kwargs] )
参数说明:
function - 线程函数。
args - 传递给线程函数的参数,必须是个tuple类型。
kwargs - 可选参数。
下面是一个例子:
def run(num):
print 'hi , i am a thread.', num
def main():
threads = []
for i in range(5):
t = threading.Thread(target=run, args=(i,))
threads.append(t)
t.start()
for t in threads:
t.join()
if __name__ == '__main__':
print 'start -->'
main()
print 'go here -->'
运行结果:
start -->
hi , i am a thread. 0
hi , i am a thread. 1
hi , i am a thread. 2
hi , i am a thread. 3
hi , i am a thread. 4
go here -->
2,在类中多使用线程
下面是在类中使用线程的示例:
class MyThread(threading.Thread):
def __init__(self,num):
self.num = num
super(MyThread, self).__init__()
def run(self):
print 'i am a thread,',self.num
time.sleep(1)
def main():
threads = []
for i in range(5):
t = MyThread(i)
threads.append(t)
t.start()
for t in threads:
t.join()
if __name__ == '__main__':
print 'start -->'
main()
print 'go here -->
run(),需要重写,编写代码实现所需要的功能。
getName(),获得线程对象名称
setName(),设置线程对象名称
start(),启动线程
join([timeout]),等待另一线程结束后再运行。
setDaemon(bool),设置子线程是否随主线程一起结束,必须在start() 之前调用,默认为False。
isDaemon(),判断线程是否随主线程一起结束。
isAlive(),检查线程是否在运行中。
join方法的作用是阻塞主进程(无法执行join以后的语句),主线程等待这个线程结束后,才可以执行下一条指令。多线程多join的情况下,依次执行各线程的join方法,前头一个结束了才能执行后面一个。无参数,则等待到该线程结束,才开始执行下一个线程的join。设置参数后,则等待该线程这么长时间就不管它了(而该线程并没有结束)。不管的意思就是可以执行后面的主进程了。
3,线程同步与互斥锁
线程之所以比进程轻量,其中一个原因就是他们共享内存。也就是各个线程可以平等的访问内存的数据,如果在短时间“同时并行”读取修改内存的数据,很可能造成数据不同步。例如下面的例子:
var = 0
class IncreThread(Thread):
def run(self):
global var
print 'before,var is ',var
var += 1
print 'after,var is ',var
def use_incre_thread():
threads = []
for i in range(50):
t = IncreThread()
threads.append(t)
t.start()
for t in threads:
t.join()
print 'After 10 times,var is ',var
if __name__ == '__main__':
use_incre_thread()
有一个全局变量var,五十个线程,每个线程对var变量进行加 1 运算,但是当你多运行几次后,发现并不是每次的运行结果都是 50,为什么呢?
在var是 10 的时候,线程t1读取了var,这个时刻cpu将控制权给了另一个线程t2。t2线程读到的var也是 10,t1和t2都把var加到 11,当时我们期望的是t1 t2两个线程使var + 2 变成 12。在这里就有了资源竞争,相同的情况也可能发生在其它的线程间,所以出现了最后的结果小于 50 的情况。
为了避免线程不同步造成数据不同步,可以对资源进行加锁。也就是访问资源的线程需要获得锁,才能访问。threading 模块提供了一个 Lock 功能,修改代码如下:
var = 0
lock = Lock() #创建锁
class IncreThread(Thread):
def run(self):
global var
lock.acquire() #获取锁
print 'before,var is ',var
var += 1
print 'after,var is ',var
lock.release() #释放锁
def use_incre_thread():
threads = []
for i in range(50):
t = IncreThread()
threads.append(t)
t.start()
for t in threads:
t.join()
print 'After 10 times,var is ',var
if __name__ == '__main__':
use_incre_thread()
虽然线程可以共享内存,但是一个线程不能影响其他线程内的变量(非全局变量)。
4,死锁
在线程间共享多个资源的时候,如果两个线程分别占有一部分资源并且同时等待对方的资源,就会造成死锁。尽管死锁很少发生,但一旦发生就会造成应用的停止响应。下面是一个死锁的例子:
mutex_a = Lock()
mutex_b = Lock()
class MyThread(Thread):
def task_b(self):
if mutex_a.acquire():
print 'thread get a mutex_a',self.name
time.sleep(1)
if mutex_b.acquire():
print 'get a mutex_b',self.name
mutex_b.release()
mutex_a.release()
def task_a(self):
if mutex_b.acquire():
print 'thread get a mutex_b',self.name
time.sleep(1)
if mutex_a.acquire():
print 'get a mutex_a',self.name
mutex_a.release()
mutex_b.release()
def run(self):
self.task_a()
self.task_b()
if __name__ == '__main__':
threads = [MyThread() for i in range(2)]
print threads
for t in threads:
t.start()
线程需要执行两个任务,两个任务都需要获取锁,当两个任务得到锁后,就需要等另外锁释放。
5,可重入锁
为了支持在同一线程中多次请求同一资源,python 提供了可重入锁(RLock)。RLock内部维护着一个Lock和一个counter变量,counter记录了acquire的次数,从而使得资源可以被多次require。直到一个线程所有的acquire都被release,其他的线程才能获得资源。
mutex = threading.RLock()
class MyThread(threading.Thread):
def run(self):
if mutex.acquire(1):
print 'threading gte mutex:',self.name
time.sleep(1)
mutex.acquire()
mutex.release()
mutex.release()
def main():
print 'start main threading:'
threads = [MyThread() for i in range(2)]
for t in threads:
t.start()
for t in threads:
t.join()
print 'end main threading.'
if __name__ == '__main__':
main()
6,后台线程
使用多线程默认情况下,当主线程退出之后,即使子线程没有 join,子线程也依然会继续执行。如果希望主线程退出后,其子线程也退出而不再执行,则需要设置子线程为后台线程。python提供了setDaemon方法,将子线程与主线程进行绑定,当主线程退出时子线程的生命也随之结束。
class MyThread(threading.Thread):
def run(self):
wait_time = random.randrange(1, 10)
print 'thread %s will wait %s s' %(self.name, wait_time)
time.sleep(wait_time)
time.sleep(30)
print 'thread %s finished.' % self.name
def main():
print 'start thread:'
for i in range(3):
t = MyThread()
t.setDaemon(1)
t.start()
print 'end thread.'
if __name__ == '__main__':
main()
运行结果:
start thread:
thread Thread-1 will wait 9 s
thread Thread-2 will wait 1 s
thread Thread-3 will wait 7 s
end thread.
本来子线程需要等待几秒才能结束,但是主线程提前结束了,所以子线程也随主线程结束了。
[python] 线程的更多相关文章
- python——线程与多线程进阶
之前我们已经学会如何在代码块中创建新的线程去执行我们要同步执行的多个任务,但是线程的世界远不止如此.接下来,我们要介绍的是整个threading模块.threading基于Java的线程模型设计.锁( ...
- python——线程与多线程基础
我们之前已经初步了解了进程.线程与协程的概念,现在就来看看python的线程.下面说的都是一个进程里的故事了,暂时忘记进程和协程,先来看一个进程中的线程和多线程.这篇博客将要讲一些单线程与多线程的基础 ...
- [python] 线程简介
参考:http://www.cnblogs.com/aylin/p/5601969.html 我是搬运工,特别感谢张岩林老师! python 线程与进程简介 进程与线程的历史 我们都知道计算机是由硬件 ...
- PYTHON线程知识再研习A
前段时间看完LINUX的线程,同步,信息号之类的知识之后,再在理解PYTHON线程感觉又不一样了. 作一些测试吧. thread:模块提供了基本的线程和锁的支持 threading:提供了更高级别,功 ...
- Python 线程(threading) 进程(multiprocessing)
*:first-child { margin-top: 0 !important; } body>*:last-child { margin-bottom: 0 !important; } /* ...
- Python线程:线程的调度-守护线程
Python线程:线程的调度-守护线程 守护线程与普通线程写法上基本么啥区别,调用线程对象的方法setDaemon(true),则可以将其设置为守护线程.在python中建议使用的是thread. ...
- python 线程(一)理论部分
Python线程 进程有很多优点,它提供了多道编程,可以提高计算机CPU的利用率.既然进程这么优秀,为什么还要线程呢?其实,仔细观察就会发现进程还是有很多缺陷的. 主要体现在一下几个方面: 进程只能在 ...
- python线程同步原语--源码阅读
前面两篇文章,写了python线程同步原语的基本应用.下面这篇文章主要是通过阅读源码来了解这几个类的内部原理和是怎么协同一起工作来实现python多线程的. 相关文章链接:python同步原语--线程 ...
- Python学习——Python线程
一.线程创建 #方法一:将要执行的方法作为参数传给Thread的构造方法 import threading import time def show(arg): time.sleep(2) print ...
- Python 线程和进程和协程总结
Python 线程和进程和协程总结 线程和进程和协程 进程 进程是程序执行时的一个实例,是担当分配系统资源(CPU时间.内存等)的基本单位: 进程有独立的地址空间,一个进程崩溃后,在保护模式下不会对其 ...
随机推荐
- 关于block的一些理解
之前一直都是用这别人或者是系统系统封装好的block,用这都挺好,可以访问那些定义了block变量的函数变量在block中使用. 首先总结一个block的用法:1.block有些类似于函数的指针 拥有 ...
- 用C#开发了四天的UWP应用有感
第一个就是异步方法,async-await,所谓async关键字,并没有什么实际上的语法意义,只是写在函数签名的位置让编译器方便进行查找以及静态检查,并且提醒程序员这是一个异步方法而已.至于await ...
- phonegap文件,目录操作以及网络上传,下载文件(含demo)
正在做一个跨平台的应用,需要使用phonegap进行文件的一些基本操作. 需求如下:可以选择本地图片,或者从相机选择图片,并进行显示在本地,然后上传到服务器,以及可以从服务器下载图片显示出来,如果本地 ...
- ucenter 整合外部网站,实现登录等操作
最近公司网站要出手机版,由于与论坛要有互通,实现会员的共享,由于对discuz不熟悉,起先考虑的是直接读取discuz的用户表,然后进行判断等操作,发现过于复杂,而且安全也不好. 前一段时间进行过论坛 ...
- Android Gradle 技巧之一: Build Variant 相关
Build Variant android gradle 插件,允许对最终的包以多个维度进行组合. BuildVariant = ProductFlavor x BuildType 两个维度 最常见的 ...
- 全面了解 Linux 服务器 - 3. 查看 Linux 服务器的硬盘使用情况
1)查看硬盘及分区信息 liuqian@ubuntu:~# fdisk -l ...... ...... Disk /dev/sda: 100 GiB, 107374182400 bytes, 209 ...
- 第三周psp
12号 类别c 内容c 开始时间s 结束e 中断I 净时间T 结对项目 查资料 8:40 11:22 25m 137m 结对项目 修改代码 12:10 12:40 0m 30m 结对项目 修改代码 1 ...
- JQ怎么获取margin-left的值
var margin =$("#Modules .list").css('marginLeft');
- nodejs将PDF文件转换成txt文本,并利用python处理转换后的文本文件
目前公司Web服务端的开发是用Nodejs,所以开发功能的话首先使用Nodejs,这也是为什么不直接用python转换的原因. 由于node对文本的处理(提取所需信息)的能力不强,类似于npm上的包: ...
- C# 特性详解
特性(attribute)是被指定给某一声明的一则附加的声明性信息. 在C#中,有一个小的预定义特性集合. using System; public class AnyClass { [Obsolet ...