Skip to main content
 首页 » 编程设计

python多处理/线程代码提前退出

2025年04月02日15langtianya

我正在尝试创建多个进程,每个进程调用多个线程。 我正在使用 python3.5 运行以下代码

问题的简化示例如下所示:

import multiprocessing 
import time 
import threading     
 
class dumb(threading.Thread): 
    def __init__(self): 
        super(dumb, self).__init__() 
    def run(self): 
        while True: 
            print("hi") 
            time.sleep(1)     
 
def test(): 
    for i in range(2): 
        bar = dumb() 
        bar.start() 
def main(): 
    p = [] 
    for i in range(2): 
        p.append(multiprocessing.Process(target=test)) 
    for i in p: 
        i.start() 
    for i in p: 
        i.join() 
if __name__ == '__main__': 
    main() 

我希望这段代码永远打印“hi”,但它只为每个进程中的每个线程打印一次(总共 4 次)。

当我删除多处理时,多线程工作。

当我删除多线程时,多处理工作。

阅读多处理文档后,我认为是问题的部分: join 的文档指出:“阻止调用线程,直到其 join() 方法被调用的进程终止或直到发生可选的超时。”

如果它像我预期的那样工作,main 将在尝试加入时永远等待。

我在 while 循环周围放置了 try/except block ,但没有发现任何错误。

我已经尝试将“哑”类传递给队列并传递异常,但队列保持为空。

任何关于如何调试它的提示将不胜感激。我最好的猜测是

  • 线程提前退出(尽管从未命中 while 循环后的打印语句)

  • 主进程退出,进程被杀死

  • Join 工作正常,但不是我期望的那样?

有什么想法吗?

请您参考如下方法:

解决方案:新错误已作为 http://bugs.python.org/issue18966 的副本关闭

唉,没有简单、令人满意的解释“为什么”。原因是 multiprocessing 通过调用 os._exit() 而不是正常的 sys.exit() 安排工作进程离开 Python。 os._exit() 跳过所有“正常”关闭处理。跳过的部分内容是 .join()-ing 非守护线程,因此进程会消失,线程仍在运行。

至少(根据我的观点)应该记录下来,或者最好更改一下。

与此同时,您已经知道,解决方法是显式地 .join() 您自己的线程。

另一种方式

在 Python 3.4 或更高版本下,您还可以使用 multiprocessing 的 spawn 启动方法:

https://docs.python.org/3/library/multiprocessing.html?highlight=spawn#contexts-and-start-methods

这会导致工作进程通过 sys.exit(exitcode) 完成,它会执行所有正常的关闭处理(包括 .join()-ing 非守护线程).

spawn 是 Windows 上唯一可用的启动方法,这解释了为什么我可以毫无问题地运行您的原始示例。