python3.6

多进程

多进程

Table of Contents

• 1. 多进程
  • 1.1. linux/unix/win 启动方式对比
    • 1.1.1. spawn win的默认方法,支持unix/win
    • 1.1.2. fork unix的默认方法,仅支持unix
    • 1.1.3. forkserver 当平台支持unix的管道文件时该方法可用
    • 1.1.4. 启动子进程
    • 1.1.5. 选择启动的方法
    • 1.1.6. 其他内容
  • 1.2. 进程通信
    • 1.2.1. 队列 Queue
    • 1.2.2. TODO 管道 Pipes
    • 1.2.3. 实例
  • 1.3. 进程同步
    • 1.3.1. 锁Lock
    • 1.3.2. 实例
  • 1.4. 进程池 Pool
    • 1.4.1. 创建Pool([processes[,initalizer[,initargs[,maxtasksperchild[,context]]]])
    • 1.4.2. AsyncResult apply_async,map_{async与starmapasync的返回对象}
    • 1.4.3. 实例
  • 1.5. 资源共享
    • 1.5.1. 使用Array,Value作为存储空间来保存需要共享的资源
    • 1.5.2. 实例
    • 1.5.3. 使用服务进程server process

1 多进程

 

1.1 linux/unix/win 启动方式对比

在不同平台上系统使用的多进程机制是不一样的,所以在python实现中有三种不同的开启多进程的方式

1.1.1 spawn win的默认方法,支持unix/win

父进程开启一个新的python解释程序 子进程只获得足够运行run()方法的资源 父进程的文件描述符和句柄不被继承 此方式的速度在三种方式中最慢

1. run() 该方法是target的参数,参数是一个可调用对象即可
   

   经测试,当run调用的是function时,资源仍无法保留,只有调用一个可调用对象且初始化方法(init)除self外有其他参数才行

   def hello():
       pass
   class Hello():
       def __init__(self,name):
   	print(name)
   hello.__init__()  # 不需要传参,所以资源无法保留
   hello_cla = Hello('name')
   hello_cla.__init__('name')  # 有传参,资源才能保留
   

   实例:

   from mu