第十五章、python中的进程操作-开启多进程

一、multprocess模块

multiprocess不是一个模块而是python中一个操作、管理进程的包。 在这个包中几乎包含了和进程有关的所有子模块，将这部分大致分为四个部分：创建进程部分，进程同步部分，进程池部分，进程之间数据共享。

二、multprocess.process模块

Process类中的参数有如下

          
            group=None, target=None, name=None, args=(), kwargs={}
----------------------------------------------------------
eg：p = Process(target=foo)#实例化出p子进程对象
          
        

强调：

1. 需要使用关键字的方式来指定参数
2. args指定的为传给target函数的位置参数，是一个元组形式，必须有逗号

参数介绍：

• group参数未使用，值始终为None
• target表示调用对象，即子进程要执行的任务
• args表示调用对象的位置参数元组， args=(1,2,'egon',)
• kwargs表示调用对象的字典， kwargs={'name':'egon','age':18}
• name为子进程的名称

三、Process()对象方法介绍

• p.start() ：启动进程，并调用该子进程中的p.run()

• p.run() ：进程启动时运行的方法，正是它去调用target指定的函数，我们自定义类的类中一定要实现该方法

• p.terminate() ：强制终止进程p，不会进行任何清理操作，如果p创建了子进程，该子进程就成了僵尸进程，使用该方法需要特别小心这种情况。如果p还保存了一个锁那么也将不会被释放，进而导致死锁

• p.is_alive() ：如果p仍然运行，返回True

                
                  from  multiprocessing import Process,current_process
  import time
  def foo():
      print('进程 start')
      time.sleep(2)
      print('进程 end')
  if __name__ == '__main__':
      p = Process(target=foo)
      p.start()
      print(p.is_alive()) # True#打印与子进程同时进行
      time.sleep(5)#在五秒内的第三秒进程就已经结束了
      print(p.is_alive()) # 代码运行完了就算死了 False
      print('主')
                
              

• p.join([timeout]) ：主线程等待p终止（强调：是主线程处于等的状态，而p是处于运行的状态）。timeout是可选的超时时间，需要强调的是，p.join只能join住start开启的进程，而不能join住run开启的进程

                
                  from multiprocessing import Process
  import time
  def foo():
      print('进程  start ')
      time.sleep(2.3)
      print('进程  end ')
  
  if __name__ == '__main__':
      p = Process(target=foo)
      p.start() #
      # 核心需求就是
      # time.sleep(5)
      p.join() # 阻塞住主进程再等待子进程结束，然后再往下执行，（了解的是：内部会待用wait（））
      print('主')
                
              

四、Process()对象属性介绍

• p.daemon ：默认值为False，如果设为True，代表p为后台运行的守护进程，当p的父进程终止时，p也随之终止，并且设定为True后，p不能创建自己的新进程，必须在 p.start() 之前设置
• p.name ：进程的名称
• p.pid ：进程的pid

五、使用process模块创建进程

          
            import time
from multiprocessing import Process

def f(name):
    print('hello', name)
    print('我是子进程')

if __name__ == '__main__':
    p = Process(target=f, args=('bob',))
    p.start()
    time.sleep(1)
    print('执行主进程的内容了'
          
        

六、进程之间的数据隔离问题

          
            from multiprocessing import Process
import time

x = 0
def task():
    global x
    x = 100
    print('子进程的x修改为了{}'.format(x))

if __name__ == '__main__':
    p = Process(target=task)
    p.start()
    time.sleep(5)
    print(x) 

          
        

七、守护进程

守护进程会随着主进程的结束而结束。

由主进程创建守护进程

　　其一：守护进程会在主进程代码执行结束后就终止

　　其二：守护进程内无法再开启子进程,否则抛出异常： AssertionError: daemonic processes are not allowed to have children

          
            from multiprocessing import Process
import time
def foo():
    print('守护进程 start')
    time.sleep(5)
    print('守护进程 end')
    p = Process(target=foo)#第三秒的时候主进程结束了没执行到这一步，不报错
    p.start()

if __name__ == '__main__':
    p = Process(target=foo)
    p.daemon =True  # 把这个子进程定义为了守护进程,
    p.start()
    time.sleep(2)#子进程还没有结束，主进程结束了强制子进程提前结束
    print('主')
          
        

          
            from multiprocessing import Process
import time
def foo():
    print('守护进程 start')
    time.sleep(2)
    print('守护进程 end')
    p = Process(target=foo)
    p.start()



if __name__ == '__main__':
    p = Process(target=foo)
    p.daemon =True  # 把这个子进程定义为了守护进程
    p.start()
    time.sleep(3)
    print('主')
------------------------------------------------------
#报错：AssertionError: daemonic processes are not allowed to have children
          
        

八、terminate方法

          
            from  multiprocessing import Process,current_process
import time
def foo():
    print('进程 start')
    # print('---------------------    ',current_process().name)
    time.sleep(50)
    print('进程 end')


if __name__ == '__main__':
    p = Process(target=foo)
    p.start()
    time.sleep(0.45)#start比terminate慢大约0.45秒
    p.terminate() # 给操作系统发了一个立即终止请求
    print(p.is_alive()) # True
    p.join()
    print(p.is_alive()) # False
    print('主')
-------------------------------------------------
进程 start
True
False
主
          
        

九、pid和name属性

          
            
class Myprocess(Process):
    def __init__(self,person):
        self.name=person   # name属性是Process中的属性，标示进程的名字
        super().__init__()  # 执行父类的初始化方法会覆盖name属性
        # self.name = person  # 在这里设置就可以修改进程名字了
        # self.person = person  # 如果不想覆盖进程名，就修改属性名称就可以了
    def run(self):
        print('%s正在和网红脸聊天' %self.name)
        # print('%s正在和网红脸聊天' %self.person)
        time.sleep(random.randrange(1,5))
        print('%s正在和网红脸聊天' %self.name)
        # print('%s正在和网红脸聊天' %self.person)


p1=Myprocess('哪吒')
p1.start()
print(p1.pid)    #可以查看子进程的进程id