Warning: file_get_contents(/data/phpspider/zhask/data//catemap/2/python/360.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181
Python subprocess.wait()未等待Popen进程完成(使用线程时)?_Python_Multithreading_Subprocess_Popen - Fatal编程技术网

Python subprocess.wait()未等待Popen进程完成(使用线程时)?

Python subprocess.wait()未等待Popen进程完成(使用线程时)?,python,multithreading,subprocess,popen,Python,Multithreading,Subprocess,Popen,我在使用subprocess.Popen()从python脚本生成同一应用程序的多个实例时遇到了一些问题,这些实例使用线程同时运行。在每个线程中,我使用popen()调用运行应用程序,然后通过调用wait()等待它完成。问题似乎是wait()-调用实际上并没有等待进程完成。我尝试只使用一个线程,并在进程开始和结束时打印文本消息。所以线程函数看起来像这样: def worker(): while True: job = q.get() # q is a global Que

我在使用
subprocess.Popen()
从python脚本生成同一应用程序的多个实例时遇到了一些问题,这些实例使用线程同时运行。在每个线程中,我使用
popen()
调用运行应用程序,然后通过调用
wait()
等待它完成。问题似乎是
wait()
-调用实际上并没有等待进程完成。我尝试只使用一个线程,并在进程开始和结束时打印文本消息。所以线程函数看起来像这样:

def worker():
    while True:
        job = q.get() # q is a global Queue of jobs
        print('Starting process %d' % job['id'])
        proc = subprocess.Popen(job['cmd'], shell=True)
        proc.wait()
        print('Finished process %d' % job['id'])
        job.task_done()
for i in range(1):
    t = Thread(target=worker)
    t.daemon = True
    t.start()
q.join() # Wait for the queue to empty
但即使我只使用一个线程,它也会在出现任何“已完成进程…”消息之前打印出几个“正在启动进程…”消息。是否存在
wait()
实际上不等待的情况?我有几个不同的外部应用程序(C++控制台应用程序),这些应用程序将同时运行多个实例,对于其中一些应用程序,我的代码可以正常工作,但对于其他应用程序,它不能正常工作。外部应用程序是否存在某种影响调用
wait()
的问题? 创建线程的代码如下所示:

def worker():
    while True:
        job = q.get() # q is a global Queue of jobs
        print('Starting process %d' % job['id'])
        proc = subprocess.Popen(job['cmd'], shell=True)
        proc.wait()
        print('Finished process %d' % job['id'])
        job.task_done()
for i in range(1):
    t = Thread(target=worker)
    t.daemon = True
    t.start()
q.join() # Wait for the queue to empty
更新1: 我还应该补充一点,对于一些外部应用程序,我有时会得到-1073471801的返回码(
proc.returncode
)。例如,其中一个外部应用程序将在调用前两次
Popen
时给出返回代码,但在调用后两次时(当我有四个作业时)不会给出返回代码

更新2: 为了澄清问题,现在我在队列中有四个作业,它们是四个不同的测试用例。当我运行代码时,对于其中一个外部应用程序,前两个
Popen
-调用生成返回代码-1073471801。但是,如果我打印
Popen
调用的确切命令,并在命令窗口中运行它,那么它将毫无问题地执行

解决了
我设法解决了我遇到的问题。我认为问题在于我缺乏线程编程的经验。我忽略了这样一个事实:当我创建第一个工作线程时,它们将一直存在,直到python脚本退出。由于错误,每次将新项目放入队列时,我都会创建更多的工作线程(我会为每个要运行的外部程序成批创建)。因此,当我进入第四个外部应用程序时,我有四个线程同时运行,尽管我认为我只有一个线程

确保正在调用的所有应用程序在完成时都有有效的系统返回代码

遗憾的是,使用
shell=True
运行子进程时,只会等待
sh
子进程完成,而不会等待命令
cmd

我将建议您是否可以不使用
shell=True
,如果不可能,您可以创建这样的流程组,并使用等待流程组,而不仅仅是shell流程


希望这对您有所帮助:)

您也可以使用代替Popen。等待命令完成,即使是在
shell=True
时,然后返回作业的退出代码。

我也遇到了问题,但受到了您的启发

我的看起来像这样,而且效果很好:

    startupinfo = subprocess.STARTUPINFO()
    startupinfo.dwFlags = subprocess.STARTF_USESHOWWINDOW
    startupinfo.wShowWindow = subprocess.SW_HIDE
    proc = subprocess.Popen(command, startupinfo=startupinfo)
    proc.communicate()
    proc.wait()

请注意,这个窗口也隐藏了窗口。

尝试
print proc.wait()
并检查返回代码。就我自己而言,我从未发现
shell=True
是必要的或有用的。它允许您懒惰,如果您从其他地方获取字符串,则不会将其拆分,但不需要引用参数(在不同平台上进行不同的解析)是非常宝贵的-我更喜欢传递一个iterable,而不是一个带引号的字符串,在拆分时你必须小心。@Chris:甚至doc建议不要使用
shell=True
,特别是当要执行的数据来自不可信的源时,以避免shell注入。在某些情况下,你会得到
OSError:[Errno 2]没有这样的文件或目录
,如果没有,如果不使用
shell=True
,则在
stdin=ps.stdout
时,Popen似乎也不会等待。