Python数据处理

312

｜

第

14

章

➐

通过传递关键参数创建一个进程对象：目标（即，我应该执行哪个函数）和参数（即，使

用什么参数）。这行代码追加所有的进程到一个列表，这样我们可以在一个地方管理它们。

➑

初始化

Manager

对象，这帮助我们管理共享的对象和进程间的日志。

➒

创建一个共享列表对象，跟踪每个站点的状态。每一个进程都能改变这个列表。

➓

创建一个共享的锁对象，如果一个站点中不存在“

is up

”，停止并且宣布它。如果这些

是我们管理的所有站点，我们可能有了一块重要的业务逻辑来处理紧急情况，也因此有

了“停止所有程序”的理由。

分别开始由函数

get_proc

返回的每一个进程。一旦它们开始执行，

join

方法会让

Manager

对象和所有的子进程通信，直到最后一个进程完成。

使用多重处理的时候，你通常会有一个管理者进程和一堆子进程。你可以传递参数给子进

程，可以使用共享内存和共享变量。这使你能够确定如何利用和架构

multiprocessing

。根

据脚本的需要，你或许想要让管理器运行脚本中一系列的逻辑，同时使用子进程运行高延

迟或长时间运行的部分代码。

共享锁对象（

https://docs.python.org/2/library/threading.html#lock-objects

）

提供了同步执行多个进程的能力，同时能保护内部逻辑的特定区域。有效

使用它们的一个方式是直接放置锁逻辑到

with

（

https://docs.python.org/2/

library/threading.html#using-locks-conditions-and-semaphores-in-the-with- ...