Как обрабатывать сигнал SIGTERM изящно?

Предположим, что у нас есть такой тривиальный демон, написанный в python:

def mainloop():
    while True:
        # 1. do
        # 2. some
        # 3. important
        # 4. job
        # 5. sleep

mainloop()

и мы демоннируем его с помощью start-stop-daemon, который по умолчанию отправляет SIGTERM (TERM) сигнал на --stop.

Предположим, что текущий шаг выполнен #2. И в этот самый момент мы отправляем сигнал TERM.

Случается, что выполнение немедленно прекращается.

Я обнаружил, что могу обработать событие сигнала, используя signal.signal(signal.SIGTERM, handler), но дело в том, что оно все еще прерывает текущее выполнение и передает элемент управления handler.

Итак, мой вопрос: возможно ли прерывать текущее выполнение, но обрабатывать сигнал TERM в отдельном потоке (?), чтобы я смог установить shutdown_flag = True, чтобы mainloop() имел шанс прекратить изящество?

Ответ 1

Чистое в использовании решение на основе классов:

import signal
import time

class GracefulKiller:
  kill_now = False
  def __init__(self):
    signal.signal(signal.SIGINT, self.exit_gracefully)
    signal.signal(signal.SIGTERM, self.exit_gracefully)

  def exit_gracefully(self,signum, frame):
    self.kill_now = True

if __name__ == '__main__':
  killer = GracefulKiller()
  while not killer.kill_now:
    time.sleep(1)
    print("doing something in a loop ...")

  print "End of the program. I was killed gracefully :)"

Ответ 2

Во-первых, я не уверен, что вам нужен второй поток, чтобы установить shutdown_flag. Почему бы не установить его непосредственно в обработчике SIGTERM?

Альтернативой является создание исключения из обработчика SIGTERM, который будет распространяться по стеку. Предполагая, что у вас есть правильная обработка исключений (например, с блоками with/contextmanager и try: ... finally:), это должно быть довольно изящное завершение работы, аналогично тому, как если бы вы были Ctrl-C вашей программой.

Пример программы signals-test.py:

#!/usr/bin/python

from time import sleep
import signal
import sys


def sigterm_handler(_signo, _stack_frame):
    # Raises SystemExit(0):
    sys.exit(0)

if sys.argv[1] == "handle_signal":
    signal.signal(signal.SIGTERM, sigterm_handler)

try:
    print "Hello"
    i = 0
    while True:
        i += 1
        print "Iteration #%i" % i
        sleep(1)
finally:
    print "Goodbye"

Теперь см. поведение Ctrl-C:

$ ./signals-test.py default
Hello
Iteration #1
Iteration #2
Iteration #3
Iteration #4
^CGoodbye
Traceback (most recent call last):
  File "./signals-test.py", line 21, in <module>
    sleep(1)
KeyboardInterrupt
$ echo $?
1

На этот раз я отправлю его SIGTERM после 4 итераций с помощью kill $(ps aux | grep signals-test | awk '/python/ {print $2}'):

$ ./signals-test.py default
Hello
Iteration #1
Iteration #2
Iteration #3
Iteration #4
Terminated
$ echo $?
143

На этот раз я включу свой пользовательский обработчик SIGTERM и отправлю его SIGTERM:

$ ./signals-test.py handle_signal
Hello
Iteration #1
Iteration #2
Iteration #3
Iteration #4
Goodbye
$ echo $?
0

Ответ 3

Я думаю, что вы близки к возможному решению.

Выполнить mainloop в отдельном потоке и расширить его с помощью свойства shutdown_flag. Сигнал можно поймать с помощью signal.signal(signal.SIGTERM, handler) в основном потоке (не в отдельном потоке). Обработчик сигнала должен установить shutdown_flag в значение True и дождаться окончания потока с помощью thread.join()

Ответ 4

Вот простой пример без потоков или классов.

import signal

run = True

def handler_stop_signals(signum, frame):
    global run
    run = False

signal.signal(signal.SIGINT, handler_stop_signals)
signal.signal(signal.SIGTERM, handler_stop_signals)

while run:
    pass # do stuff including other IO stuff

Ответ 5

Основываясь на предыдущих ответах, я создал менеджер контекста, который защищает от sigint и sigterm.

import logging
import signal
import sys


class TerminateProtected:
    """ Protect a piece of code from being killed by SIGINT or SIGTERM.
    It can still be killed by a force kill.

    Example:
        with TerminateProtected():
            run_func_1()
            run_func_2()

    Both functions will be executed even if a sigterm or sigkill has been received.
    """
    killed = False

    def _handler(self, signum, frame):
        logging.error("Received SIGINT or SIGTERM! Finishing this block, then exiting.")
        self.killed = True

    def __enter__(self):
        self.old_sigint = signal.signal(signal.SIGINT, self._handler)
        self.old_sigterm = signal.signal(signal.SIGTERM, self._handler)

    def __exit__(self, type, value, traceback):
        if self.killed:
            sys.exit(0)
        signal.signal(signal.SIGINT, self.old_sigint)
        signal.signal(signal.SIGTERM, self.old_sigterm)


if __name__ == '__main__':
    print("Try pressing ctrl+c while the sleep is running!")
    from time import sleep
    with TerminateProtected():
        sleep(10)
        print("Finished anyway!")
    print("This only prints if there was no sigint or sigterm")

Ответ 6

Нашел самый простой способ для меня. Вот пример с вилкой для ясности, что этот способ полезен для управления потоком.

import signal
import time
import sys
import os

def handle_exit(sig, frame):
    raise(SystemExit)

def main():
    time.sleep(120)

signal.signal(signal.SIGTERM, handle_exit)

p = os.fork()
if p == 0:
    main()
    os._exit()

try:
    os.waitpid(p, 0)
except (KeyboardInterrupt, SystemExit):
    print('exit handled')
    os.kill(p, 15)
    os.waitpid(p, 0)