celery.worker

Реализация рабочего процесса.

classcelery.worker.WorkController(app=None, hostname=None, **kwargs)

Неуправляемый экземпляр рабочего процесса.

classBlueprint(steps=None, name=None, on_start=None, on_close=None, on_stopped=None)

Схема этапов запуска рабочего процесса.

default_steps={'celery.worker.autoscale:WorkerComponent', 'celery.worker.components:Beat', 'celery.worker.components:Consumer', 'celery.worker.components:Hub', 'celery.worker.components:Pool', 'celery.worker.components:StateDB', 'celery.worker.components:Timer'}

name='Worker'

app=None

blueprint=None

exitcode=None

содержит код завершения, если обрабатывается событие SystemExit.

info()

on_after_init(**kwargs)

on_before_init(**kwargs)

on_close()

on_consumer_ready(consumer)

on_init_blueprint()

on_start()

on_stopped()

pidlock=None

pool=None

prepare_args(**kwargs)

register_with_event_loop(hub)

reload(modules=None, reload=False, reloader=None)

rusage()

semaphore=None

setup_defaults(concurrency=None, loglevel='WARN', logfile=None, task_events=None, pool=None, consumer_cls=None, timer_cls=None, timer_precision=None, autoscaler_cls=None, pool_putlocks=None, pool_restarts=None, optimization=None, O=None, statedb=None, time_limit=None, soft_time_limit=None, scheduler=None, pool_cls=None, state_db=None, task_time_limit=None, task_soft_time_limit=None, scheduler_cls=None, schedule_filename=None, max_tasks_per_child=None, prefetch_multiplier=None, disable_rate_limits=None, worker_lost_wait=None, max_memory_per_child=None, **_kw)

setup_includes(includes)

setup_instance(queues=None, ready_callback=None, pidfile=None, include=None, use_eventloop=None, exclude_queues=None, **kwargs)

setup_queues(include, exclude=None)

should_use_eventloop()

signal_consumer_close()

start()

propertystate

stats()

stop(in_sighandler=False, exitcode=None)

Корректное завершение работы сервера рабочих процессов (мягкое завершение).

terminate(in_sighandler=False)

Не столь корректное завершение работы сервера рабочих процессов (жёсткое завершение).

wait_for_soft_shutdown()

Ожидает worker_soft_shutdown_timeout, если включено мягкое завершение работы.

Чтобы включить мягкое завершение работы, задайте в конфигурации параметр worker_soft_shutdown_timeout. Мягкое завершение работы позволяет рабочему процессу обработать ещё несколько задач перед началом жёсткого завершения. Этот механизм позволяет рабочему процессу завершить обработку коротких задач, которые уже выполняются, и повторно поставить в очередь длительные задачи, чтобы их мог обработать другой рабочий процесс.

Предупреждение

Если у рабочего процесса нет задач, он не будет ждать окончания тайм-аута мягкого завершения, даже если тайм-аут задан: ожидание не имеет смысла, когда задач для обработки нет.