Развёртывание с Fabric

Fabric — это инструмент для Python, подобный Makefiles, но с возможностью выполнения команд на удалённом сервере. В сочетании с правильно настроенным пакетом Python (Приложения большего размера) и хорошей концепцией конфигурации (Обработка конфигурации) очень легко развертывать приложения Flask на внешних серверах.

Прежде чем начать, вот быстрый список того, что нужно гарантировать:

Fabric 1.0 должен быть установлен локально. Этот учебник предполагает использование последней версии Fabric.
Приложение должно быть уже пакетом и требовать работоспособный файл setup.py (Развёртывание с Setuptools).
В следующем примере мы используем mod_wsgi для удалённых серверов. Конечно, вы можете использовать свой собственный любимый сервер, но для этого примера мы выбрали Apache + mod_wsgi, потому что его очень легко настроить, и он имеет простой способ перезагрузки приложений без прав root.

Создание первого Fabfile

Fabfile — это то, что контролирует выполнение Fabric. Он называется fabfile.py и выполняется командой fab. Все функции, определённые в этом файле, будут отображаться в качестве fab подкоманд. Они выполняются на одном или нескольких хостах. Эти хосты могут быть определены либо в fabfile, либо в командной строке. В этом случае мы добавим их в fabfile.

Это базовый пример, позволяющий загрузить текущий исходный код на сервер и установить его в существующую виртуальную среду:

from fabric.api import *

# the user to use for the remote commands
env.user = 'appuser'
# the servers where the commands are executed
env.hosts = ['server1.example.com', 'server2.example.com']

def pack():
    # build the package
    local('python setup.py sdist --formats=gztar', capture=False)

def deploy():
    # figure out the package name and version
    dist = local('python setup.py --fullname', capture=True).strip()
    filename = '%s.tar.gz' % dist

    # upload the package to the temporary folder on the server
    put('dist/%s' % filename, '/tmp/%s' % filename)

    # install the package in the application's virtualenv with pip
    run('/var/www/yourapplication/env/bin/pip install /tmp/%s' % filename)

    # remove the uploaded package
    run('rm -r /tmp/%s' % filename)

    # touch the .wsgi file to trigger a reload in mod_wsgi
    run('touch /var/www/yourapplication.wsgi')

Запуск Fabfile

Как же запустить этот fabfile? Используйте команду fab. Чтобы развернуть текущую версию кода на удалённом сервере, используйте эту команду:

$ fab pack deploy

Однако для этого требуется, чтобы на сервере уже была создана папка /var/www/yourapplication и /var/www/yourapplication/env была виртуальной средой. Кроме того, мы не создаём конфигурационный файл или файл .wsgi на сервере. Итак, как нам запустить новый сервер в нашей инфраструктуре?

Это зависит от количества серверов, которые мы хотим настроить. Если у нас всего один сервер приложений (что характерно для большинства приложений), создание команды в fabfile для этого излишне. Но, очевидно, вы можете это сделать. В этом случае вы, вероятно, назовёте её setup или bootstrap, а затем явно передадите имя сервера в командной строке:

$ fab -H newserver.example.com bootstrap

Для настройки нового сервера примерно выполните эти шаги:

Создайте структуру каталогов в /var/www:

$ mkdir /var/www/yourapplication
$ cd /var/www/yourapplication
$ virtualenv --distribute env

Загрузите новый файл application.wsgi на сервер и файл конфигурации приложения (например: application.cfg)
Создайте новую конфигурацию Apache для yourapplication и активируйте её. Убедитесь, что активировано отслеживание изменений файла .wsgi, чтобы мы могли автоматически перезагрузить приложение, изменив его. (Дополнительную информацию см. в mod_wsgi (Apache))

Теперь вопрос в том, откуда берутся файлы application.wsgi и application.cfg?

Файл WSGI

Файл WSGI должен импортировать приложение и также установить переменную окружения, чтобы приложение знало, где искать конфигурацию. Вот короткий пример, который делает именно это:

import os
os.environ['YOURAPPLICATION_CONFIG'] = '/var/www/yourapplication/application.cfg'
from yourapplication import app

Само приложение должно инициализировать себя таким образом, чтобы искать конфигурацию по этой переменной окружения:

app = Flask(__name__)
app.config.from_object('yourapplication.default_config')
app.config.from_envvar('YOURAPPLICATION_CONFIG')

Этот подход подробно описан в разделе Обработка конфигурации документации.

Файл конфигурации

Как упоминалось выше, приложение найдёт правильный файл конфигурации, посмотрев на переменную окружения YOURAPPLICATION_CONFIG. Поэтому нам нужно поместить конфигурацию в место, где приложение сможет её найти. Файлы конфигурации обладают неудобным свойством быть разными на всех компьютерах, поэтому их обычно не включают в систему контроля версий.

Популярный подход заключается в хранении файлов конфигурации для разных серверов в отдельном репозитории системы контроля версий и их извлечении на всех серверах. Затем используйте символическую ссылку на активный файл конфигурации в нужное место (например: /var/www/yourapplication).

В любом случае, в нашем случае мы ожидаем только один или два сервера, и мы можем загрузить их заранее вручную.

Первое развёртывание

Теперь мы можем выполнить первое развёртывание. Мы настроили серверы так, что у них есть свои виртуальные среды и активированы конфигурации Apache. Теперь мы можем упаковать приложение и развернуть его:

$ fab pack deploy

Fabric теперь подключится ко всем серверам и выполнит команды, как указано в fabfile. Сначала он выполнит pack, чтобы подготовить наш tarball, а затем deploy, чтобы загрузить исходный код на все серверы и установить его там. Благодаря файлу setup.py мы автоматически подключим необходимые библиотеки в нашу виртуальную среду.

Следующие шаги

С этого момента можно сделать много вещей, чтобы сделать развёртывание действительно приятным:

Создайте команду bootstrap, которая инициализирует новые серверы. Она могла бы инициализировать новую виртуальную среду, должным образом настроить Apache и т. д.
Поместите файлы конфигурации в отдельный репозиторий системы контроля версий и используйте символические ссылки на активные конфигурации.
Вы также можете поместить код вашего приложения в репозиторий и извлечь последнюю версию на сервере, а затем установить. Таким образом, вы также можете легко вернуться к более старым версиям.
Включите функциональность тестирования, чтобы вы могли развернуть приложение на внешнем сервере и запустить набор тестов.

Работа с Fabric — это приятно, и вы заметите, что очень здорово набрать fab deploy и увидеть, как ваше приложение автоматически развертывается на одном или нескольких удалённых серверах.