Linux上的多处理进程终止失败

时间:2012-05-10 07:40:36

标签: python linux python-3.x multiprocessing

我刚刚注意到Linux上进程终止(来自multiprocessing库)方法的问题。我有应用程序使用multiprocessing库但是...当我在Windows上调用terminate函数时,一切都很好,另一方面,Linux失败了这个解决方案。作为流程杀戮的替代,我被迫使用

os.system('kill -9 {}'.format(pid))

我知道这不太聪明,但它确实有效。所以我只是想知道为什么这个代码在Windows上运行,但在Linux上运行失败。

示例:

from multiprocessing import Process
import os

process=Process(target=foo,args=('bar',))
pid=process.pid
process.terminate() # works on Windows only

...

os.sytem('kill -9 {}'.format(pid)) # my replacements on Linux

我的配置:python 3.2.0 build 88445;的Linux-2.6.32-Debian的6.0.4

这是我的代码中的示例。我希望这就足够了。

def start_test(timestamp,current_test_suite,user_ip):
    global_test_table[timestamp] = current_test_suite
    setattr(global_test_table[timestamp], "user_ip", user_ip)
    test_cases = global_test_table[timestamp].test_cases_table

    test_cases = test_cases*int(global_test_table[timestamp].count + 1)
    global_test_table[timestamp].test_cases_table = test_cases
    print(test_cases)
    print(global_test_table[timestamp].test_cases_table)

    case_num = len(test_cases)
    Report.basecounter = Report.casecounter = case_num

    setattr(global_test_table[timestamp], "case_num", case_num)
    setattr(global_test_table[timestamp], "user_current_test", 0)

    try:
        dbobj=MySQLdb.connect(*dbconnector)
        dbcursor=dbobj.cursor()

        dbcursor.execute(sqlquery_insert_progress.format(progress_timestamp = str(timestamp), user_current_test = global_test_table[timestamp].user_current_tes$
    except :...

    for i in range(case_num):
        user_row = global_test_table[timestamp]
        current_test_from_tests_table = user_row.test_cases_table[i]
        unittest.TextTestRunner(verbosity=2).run(suite(CommonGUI.get_address(CommonGUI,current_test_from_tests_table[1], current_test_from_tests_table[2], user$
        global_test_table[timestamp].user_current_test = i + 1
        try:
            dbobj=MySQLdb.connect(*dbconnector)
            dbcursor=dbobj.cursor()

            dbcursor.execute(sqlquery_update_progress.format(progress_timestamp = str(timestamp), user_current_test = global_test_table[timestamp].user_current$
        except :...

@cherrypy.expose()
def start_test_page(self, **test_suite):
    timestamp = str(time.time())
    user_ip = cherrypy.request.remote.ip
    if on_server():
        sys.stdout=sys.stderr=open("/var/log/cherrypy/test_gui/{file}.log".format(file=timestamp),"a")
    current_test_suite = self.parse_result(**test_suite)
    #global_test_table[timestamp] = current_test_suite
    #setattr(global_test_table[timestamp], "user_ip", user_ip)
    user_test_process = Process(target=start_test, args=(timestamp,current_test_suite,user_ip))
    users_process_table[timestamp] = user_test_process
    user_test_process.start()
    return '''{"testsuite_id" : "''' + str(timestamp) + '''"}'''

@cherrypy.expose()
def stop_test(self, timestamp):
    if timestamp in users_process_table:
        if on_server():
            user_process_pid = users_process_table[timestamp].pid
            os.system("kill -9 " + str(user_process_pid))
        else:
            users_process_table[timestamp].terminate()
        del users_process_table[timestamp]
    else:
        return "No process exists"

2 个答案:

答案 0 :(得分:5)

来自docs

  

终止()

     

终止流程。在Unix上,这是使用   SIGTERM信号;在Windows上使用TerminateProcess()。请注意退出   处理程序和最后的条款等将不会被执行。

     

请注意,该进程的后代进程不会被终止 -   他们只会成为孤儿。

所以看起来你必须确保你的进程正确处理SIGTERM信号。

使用signal.signal设置信号处理程序。

要设置一个只存在该过程的SIGTERM信号处理程序,请使用:

import signal
import sys
signal.signal(signal.SIGTERM, lambda signum, stack_frame: sys.exit(1))

修改

Python进程通常在SIGTERM上终止,我不知道为什么你的多处理进程不会在SIGTERM上终止。

答案 1 :(得分:0)

不完全是对您的问题的直接回答,但由于您正在处理线程,这对调试这些线程也很有帮助: https://stackoverflow.com/a/10165776/1019572 我最近使用此代码发现了一个关于cherrypy的错误。