Запуск в режиме демона

Пример конфигурации для проекта Python.

/etc/default/celeryd:

# Names of nodes to start
#   most people will only start one node:
CELERYD_NODES="worker1"
#   but you can also start multiple and configure settings
#   for each in CELERYD_OPTS
#CELERYD_NODES="worker1 worker2 worker3"
#   alternatively, you can specify the number of nodes to start:
#CELERYD_NODES=10

# Absolute or relative path to the 'celery' command:
CELERY_BIN="/usr/local/bin/celery"
#CELERY_BIN="/virtualenvs/def/bin/celery"

# App instance to use
# comment out this line if you don't use an app
CELERY_APP="proj"
# or fully qualified:
#CELERY_APP="proj.tasks:app"

# Where to chdir at start.
CELERYD_CHDIR="/opt/Myproject/"

# Extra command-line arguments to the worker
CELERYD_OPTS="--time-limit=300 --concurrency=8"
# Configure node-specific settings by appending node name to arguments:
#CELERYD_OPTS="--time-limit=300 -c 8 -c:worker2 4 -c:worker3 2 -Ofair:worker1"

# Set logging level to DEBUG
#CELERYD_LOG_LEVEL="DEBUG"

# %n will be replaced with the first part of the nodename.
CELERYD_LOG_FILE="/var/log/celery/%n%I.log"
CELERYD_PID_FILE="/var/run/celery/%n.pid"

# Workers should run as an unprivileged user.
#   You need to create this user manually (or you can choose
#   a user/group combination that already exists (e.g., nobody).
CELERYD_USER="celery"
CELERYD_GROUP="celery"

# If enabled pid and log directories will be created if missing,
# and owned by the userid/group configured.
CELERY_CREATE_DIRS=1

Можно унаследовать окружение CELERYD_USER, используя оболочку входа:

CELERYD_SU_ARGS="-l"

Обратите внимание: этот вариант не рекомендуется и его следует использовать только при крайней необходимости.

Пользователи Django теперь используют тот же шаблон, что и выше, но убедитесь, что модуль, в котором объявлен экземпляр приложения Celery, также задаёт значение по умолчанию для DJANGO_SETTINGS_MODULE, как показано в примере проекта Django в разделе Первые шаги с Django.

• CELERY_APP

  Используемый экземпляр приложения (значение для аргумента --app).

• CELERY_BIN

  Абсолютный или относительный путь к программе celery. Примеры:

  • celery

  • /usr/local/bin/celery

  • /virtualenvs/proj/bin/celery

  • /virtualenvs/proj/bin/python -m celery

• CELERYD_NODES

  Список имён узлов для запуска (разделённых пробелами).

• CELERYD_OPTS

  Дополнительные аргументы командной строки для worker. Список аргументов см. в celery worker –help. Также поддерживается расширенный синтаксис, используемый multi для настройки отдельных узлов. Примеры настройки нескольких узлов см. в celery multi –help.

• CELERYD_CHDIR

  Каталог, в который нужно перейти при запуске. По умолчанию используется текущий каталог.

• CELERYD_PID_FILE

  Полный путь к файлу PID. По умолчанию используется /var/run/celery/%n.pid

• CELERYD_LOG_FILE

  Полный путь к файлу журнала worker. По умолчанию используется /var/log/celery/%n%I.log Примечание: При использовании пула prefork важно применять %I, поскольку несколько процессов, записывающих данные в один файл журнала, могут вызвать состояние гонки.

• CELERYD_LOG_LEVEL

  Уровень журналирования worker. По умолчанию — INFO.

• CELERYD_USER

  Пользователь, от имени которого запускается worker. По умолчанию — текущий пользователь.

• CELERYD_GROUP

  Группа, от имени которой запускается worker. По умолчанию — текущий пользователь.

• CELERY_CREATE_DIRS

  Всегда создавать каталоги (для журнала и файла PID). По умолчанию каталоги создаются только в том случае, если не заданы пользовательские пути к файлу журнала или файлу PID.

• CELERY_CREATE_RUNDIR

  Всегда создавать каталог для файла PID. По умолчанию этот параметр включён только в том случае, если не задан пользовательский путь к файлу PID.

• CELERY_CREATE_LOGDIR

  Всегда создавать каталог для файла журнала. По умолчанию этот параметр включён только в том случае, если не задан пользовательский путь к файлу журнала.

Пример конфигурации для проекта Python:

/etc/default/celerybeat:

# Absolute or relative path to the 'celery' command:
CELERY_BIN="/usr/local/bin/celery"
#CELERY_BIN="/virtualenvs/def/bin/celery"

# App instance to use
# comment out this line if you don't use an app
CELERY_APP="proj"
# or fully qualified:
#CELERY_APP="proj.tasks:app"

# Where to chdir at start.
CELERYBEAT_CHDIR="/opt/Myproject/"

# Extra arguments to celerybeat
CELERYBEAT_OPTS="--schedule=/var/run/celery/celerybeat-schedule"

Используйте тот же шаблон, что и выше, но убедитесь, что переменная DJANGO_SETTINGS_MODULE задана (и экспортирована), а CELERYD_CHDIR указывает на каталог проекта:

exportDJANGO_SETTINGS_MODULE="settings"

CELERYD_CHDIR="/opt/MyProject"

• CELERY_APP

  Используемый экземпляр приложения (значение для аргумента --app).

• CELERYBEAT_OPTS

  Дополнительные аргументы для celery beat. Список доступных параметров см. в celery beat --help.

• CELERYBEAT_PID_FILE

  Полный путь к файлу PID. По умолчанию используется /var/run/celeryd.pid.

• CELERYBEAT_LOG_FILE

  Полный путь к файлу журнала. По умолчанию используется /var/log/celeryd.log.

• CELERYBEAT_LOG_LEVEL

  Используемый уровень журналирования. По умолчанию — INFO.

• CELERYBEAT_USER

  Пользователь, от имени которого запускается beat. По умолчанию — текущий пользователь.

• CELERYBEAT_GROUP

  Группа, от имени которой запускается beat. По умолчанию — текущий пользователь.

• CELERY_CREATE_DIRS

  Всегда создавать каталоги (для журнала и файла PID). По умолчанию каталоги создаются только в том случае, если не заданы пользовательские пути к файлу журнала или файлу PID.

• CELERY_CREATE_RUNDIR

  Всегда создавать каталог для файла PID. По умолчанию этот параметр включён только в том случае, если не задан пользовательский путь к файлу PID.

• CELERY_CREATE_LOGDIR

  Всегда создавать каталог для файла журнала. По умолчанию этот параметр включён только в том случае, если не задан пользовательский путь к файлу журнала.

Пример конфигурации для проекта Python:

/etc/conf.d/celery:

# Name of nodes to start
# here we have a single node
CELERYD_NODES="w1"
# or we could have three nodes:
#CELERYD_NODES="w1 w2 w3"

# Absolute or relative path to the 'celery' command:
CELERY_BIN="/usr/local/bin/celery"
#CELERY_BIN="/virtualenvs/def/bin/celery"

# App instance to use
# comment out this line if you don't use an app
CELERY_APP="proj"
# or fully qualified:
#CELERY_APP="proj.tasks:app"

# How to call manage.py
CELERYD_MULTI="multi"

# Extra command-line arguments to the worker
CELERYD_OPTS="--time-limit=300 --concurrency=8"

# - %n will be replaced with the first part of the nodename.
# - %I will be replaced with the current child process index
#   and is important when using the prefork pool to avoid race conditions.
CELERYD_PID_FILE="/var/run/celery/%n.pid"
CELERYD_LOG_FILE="/var/log/celery/%n%I.log"
CELERYD_LOG_LEVEL="INFO"

# you may wish to add these options for Celery Beat
CELERYBEAT_PID_FILE="/var/run/celery/beat.pid"
CELERYBEAT_LOG_FILE="/var/log/celery/beat.log"