Обновление среды
Описание
Обновляет среду Amazon Managed Workflows for Apache Airflow (MWAA).
См. также: Документация API AWS
Синтаксис
update-environment
--name <value>
[--execution-role-arn <value>]
[--airflow-version <value>]
[--source-bucket-arn <value>]
[--dag-s3-path <value>]
[--plugins-s3-path <value>]
[--plugins-s3-object-version <value>]
[--requirements-s3-path <value>]
[--requirements-s3-object-version <value>]
[--startup-script-s3-path <value>]
[--startup-script-s3-object-version <value>]
[--airflow-configuration-options <value>]
[--environment-class <value>]
[--max-workers <value>]
[--network-configuration <value>]
[--logging-configuration <value>]
[--weekly-maintenance-window-start <value>]
[--webserver-access-mode <value>]
[--min-workers <value>]
[--schedulers <value>]
[--min-webservers <value>]
[--max-webservers <value>]
[--cli-input-json | --cli-input-yaml]
[--generate-cli-skeleton <value>]
[--debug]
[--endpoint-url <value>]
[--no-verify-ssl]
[--no-paginate]
[--output <value>]
[--query <value>]
[--profile <value>]
[--region <value>]
[--version <value>]
[--color <value>]
[--no-sign-request]
[--ca-bundle <value>]
[--cli-read-timeout <value>]
[--cli-connect-timeout <value>]
[--cli-binary-format <value>]
[--no-cli-pager]
[--cli-auto-prompt]
[--no-cli-auto-prompt]
Параметры
--name (строка)
MyMWAAEnvironment .--execution-role-arn (строка)
arn:aws:iam::123456789:role/my-execution-role . Дополнительная информация см. в Amazon MWAA Execution role .--airflow-version (строка)
Версия Apache Airflow для вашей среды. Для обновления среды укажите более новую версию Apache Airflow, поддерживаемую Amazon MWAA.
Прежде чем обновлять среду, убедитесь, что ваши требования, DAG, плагины и другие ресурсы, используемые в ваших рабочих процессах, совместимы с новой версией Apache Airflow. Дополнительная информация об обновлении ресурсов см. в разделе Обновление среды Amazon MWAA .
Допустимые значения: 1.10.12 , 2.0.2 , 2.2.2 , 2.4.3 , 2.5.1 , 2.6.3 , 2.7.2 , 2.8.1 , 2.9.2 , 2.10.1 и 2.10.3 .
--source-bucket-arn (строка)
arn:aws:s3:::my-airflow-bucket-unique-name . Дополнительная информация см. в разделе Создание Amazon S3-ведра для Amazon MWAA .--dag-s3-path (строка)
dags . Дополнительная информация см. в разделе Добавление или обновление DAG .--plugins-s3-path (строка)
plugins.zip в вашем Amazon S3-ведре. Например, plugins.zip . Если указано, то требуется версия plugins.zip. Дополнительная информация см. в разделе Установка пользовательских плагинов .--plugins-s3-object-version (строка)
plugins.zip . Дополнительная информация см. в разделе Как работает версия S3 .--requirements-s3-path (строка)
requirements.txt в вашем Amazon S3-ведре. Например, requirements.txt . Если указано, то требуется версия файла. Дополнительная информация см. в разделе Установка зависимостей Python .--requirements-s3-object-version (строка)
requirements.txt . Дополнительная информация см. в разделе Как работает версия S3 .--startup-script-s3-path (строка)
Относительный путь к скрипту запуска оболочки в вашем Amazon S3-ведре. Например, s3://mwaa-environment/startup.sh .
Amazon MWAA выполняет скрипт при запуске вашей среды и перед запуском процесса Apache Airflow. Вы можете использовать этот скрипт для установки зависимостей, изменения конфигурации Apache Airflow и установки переменных среды. Дополнительная информация см. в разделе Использование скрипта запуска .
--startup-script-s3-object-version (строка)
Версия скрипта запуска оболочки в вашем Amazon S3-ведре. Вы должны указать идентификатор версии, который Amazon S3 присваивает файлу каждый раз, когда вы обновляете скрипт.
Идентификаторы версий — это кодированные в Unicode, UTF-8, URL-готовые, не имеющие смысла строки, длина которых не превышает 1024 байта. Пример:
3sL4kqtJlcpXroDTDmJ+rmSpXd3dIbrHY+MTRCxf3vjVBH40Nr8X8gdRQBpUMLUoДополнительная информация см. в разделе Использование скрипта запуска .
--airflow-configuration-options (массив)
Список пар ключ-значение, содержащих параметры конфигурации Apache Airflow, которые вы хотите прикрепить к вашей среде. Дополнительная информация см. в разделе Параметры конфигурации Apache Airflow .
ключ -> (строка)
значение -> (строка)
Упрощенный синтаксис:
KeyName1=string,KeyName2=string
Синтаксис JSON:
{"string": "string"
...}
--environment-class (строка)
mw1.micro , mw1.small , mw1.medium , mw1.large , mw1.xlarge и mw1.2xlarge . Дополнительная информация см. в разделе Класс среды Amazon MWAA .--max-workers (целое число)
MaxWorkers . Например, 20 . Когда больше задач не выполняется и нет задач в очереди, MWAA удаляет дополнительные рабочие процессы, оставляя один рабочий процесс, включенный в вашу среду, или количество, указанное в MinWorkers .--network-configuration (структура)
Компоненты сети VPC, используемые для защиты и обеспечения сетевого трафика между ресурсами Amazon Web Services для вашей среды. Дополнительная информация см. в разделе О сети в Amazon MWAA .
SecurityGroupIds -> (список)
Список идентификаторов групп безопасности. Группа безопасности должна быть подключена к той же сети VPC, что и подсети. Дополнительная информация см. в разделе Безопасность в вашей сети VPC в Amazon MWAA .
(строка)
Упрощенный синтаксис:
SecurityGroupIds=string,string
Синтаксис JSON:
{
"SecurityGroupIds": ["string", ...]
}
--logging-configuration (структура)
Типы журналов Apache Airflow, которые необходимо отправлять в CloudWatch Logs.
DagProcessingLogs -> (структура)
Опубликуйте журналы обработки DAG Airflow в CloudWatch Logs.
Enabled -> (булево)
DagProcessingLogs ).LogLevel -> (строка)
INFO ), который необходимо отправлять в CloudWatch Logs.SchedulerLogs -> (структура)
Опубликуйте журналы планировщика Airflow в CloudWatch Logs.
Enabled -> (булево)
DagProcessingLogs ).LogLevel -> (строка)
INFO ), который необходимо отправлять в CloudWatch Logs.WebserverLogs -> (структура)
Опубликуйте журналы веб-сервера Airflow в CloudWatch Logs.
Enabled -> (булево)
DagProcessingLogs ).LogLevel -> (строка)
INFO ), который необходимо отправлять в CloudWatch Logs.WorkerLogs -> (структура)
Опубликуйте журналы рабочих процессов Airflow в CloudWatch Logs.
Enabled -> (булево)
DagProcessingLogs ).LogLevel -> (строка)
INFO ), который необходимо отправлять в CloudWatch Logs.TaskLogs -> (структура)
Опубликуйте журналы задач Airflow в CloudWatch Logs.
Enabled -> (булево)
DagProcessingLogs ).LogLevel -> (строка)
INFO ), который необходимо отправлять в CloudWatch Logs.Упрощенный синтаксис:
DagProcessingLogs={Enabled=boolean,LogLevel=string},SchedulerLogs={Enabled=boolean,LogLevel=string},WebserverLogs={Enabled=boolean,LogLevel=string},WorkerLogs={Enabled=boolean,LogLevel=string},TaskLogs={Enabled=boolean,LogLevel=string}
Синтаксис JSON:
{
"DagProcessingLogs": {
"Enabled": true|false,
"LogLevel": "CRITICAL"|"ERROR"|"WARNING"|"INFO"|"DEBUG"
},
"SchedulerLogs": {
"Enabled": true|false,
"LogLevel": "CRITICAL"|"ERROR"|"WARNING"|"INFO"|"DEBUG"
},
"WebserverLogs": {
"Enabled": true|false,
"LogLevel": "CRITICAL"|"ERROR"|"WARNING"|"INFO"|"DEBUG"
},
"WorkerLogs": {
"Enabled": true|false,
"LogLevel": "CRITICAL"|"ERROR"|"WARNING"|"INFO"|"DEBUG"
},
"TaskLogs": {
"Enabled": true|false,
"LogLevel": "CRITICAL"|"ERROR"|"WARNING"|"INFO"|"DEBUG"
}
}
--weekly-maintenance-window-start (строка)
DAY:HH:MM . Например: TUE:03:30 . Можно указать время с шагом в 30 минут.--webserver-access-mode (строка)
Режим доступа к веб-серверу Apache Airflow. Дополнительная информация см. в разделе Режимы доступа к Apache Airflow .
Возможные значения:
PRIVATE_ONLYPUBLIC_ONLY
--min-workers (целое число)
MaxWorkers . При отсутствии задач в работе и очереди MWAA удаляет дополнительные рабочие процессы, оставляя количество рабочих процессов, указанное в поле MinWorkers . Например, 2 .--schedulers (целое число)
--min-webservers (целое число)
Минимальное количество веб-серверов, которые вы хотите запустить в вашей среде. Amazon MWAA масштабирует количество веб-серверов Apache Airflow до значения, указанного для MaxWebservers , когда вы взаимодействуете со средой Apache Airflow с помощью API REST Apache Airflow или командной строки Apache Airflow. По мере снижения скорости транзакций в секунду и сетевой нагрузки Amazon MWAA удаляет дополнительные веб-серверы и масштабирует вниз до числа, установленного в MinxWebserers .
Допустимые значения: Для сред, больших чем mw1.micro, принимаются значения от 2 до 5 . По умолчанию установлено значение 2 для всех размеров сред, за исключением mw1.micro, для которого по умолчанию установлено значение 1 .
--max-webservers (целое число)
Максимальное количество веб-серверов, которые вы хотите запустить в вашей среде. Amazon MWAA масштабирует количество веб-серверов Apache Airflow до значения, указанного для MaxWebservers , когда вы взаимодействуете со средой Apache Airflow с помощью API REST Apache Airflow или командной строки Apache Airflow. Например, в сценариях, где ваша рабочая нагрузка требует сетевых запросов к API REST Apache Airflow с высокой скоростью транзакций в секунду (TPS), Amazon MWAA увеличит количество веб-серверов до значения, установленного в MaxWebserers . По мере снижения показателей TPS Amazon MWAA удаляет дополнительные веб-серверы и масштабирует вниз до числа, установленного в MinxWebserers .
Допустимые значения: Для сред, больших чем mw1.micro, принимаются значения от 2 до 5 . По умолчанию установлено значение 2 для всех размеров сред, за исключением mw1.micro, для которого по умолчанию установлено значение 1 .
--cli-input-json | --cli-input-yaml (строка) Читает аргументы из предоставленной строки JSON. Строка JSON следует формату, предоставленному в --generate-cli-skeleton. Если на командной строке указаны другие аргументы, эти значения переопределят значения, предоставленные в формате JSON. Невозможно передавать произвольные двоичные значения, используя значение, предоставленное в формате JSON, так как строка будет взята буквально. Это не может быть указано вместе с --cli-input-yaml.
--generate-cli-skeleton (строка) Выводит JSON-скелет в стандартный вывод без отправки запроса к API. Если указано без значения или со значением input, выводит пример входного JSON, который можно использовать в качестве аргумента для --cli-input-json. Аналогично, если указано yaml-input, выведет пример входного YAML, который можно использовать с --cli-input-yaml. Если указано значение output, оно проверяет входные данные команды и возвращает пример выходного JSON для этой команды. Сгенерированный JSON-скелет нестабилен между версиями AWS CLI, и нет гарантий обратной совместимости в сгенерированном JSON-скелете.
Общие параметры
--debug (логическое значение)
Включить отладочный вывод.
--endpoint-url (строка)
Переопределить URL по умолчанию команды указанным URL.
--no-verify-ssl (логическое значение)
По умолчанию AWS CLI использует SSL при общении с AWS-сервисами. Для каждого SSL-соединения AWS CLI будет проверять сертификаты SSL. Этот параметр переопределяет поведение проверки сертификатов SSL по умолчанию.
--no-paginate (логическое значение)
Отключить автоматическую постраничную навигацию. Если автоматическая постраничная навигация отключена, AWS CLI выполнит только один вызов для первой страницы результатов.
--output (строка)
Стиль форматирования для вывода команд.
- json
- текст
- таблица
- yaml
- yaml-поток
--query (строка)
Запрос JMESPath для использования в фильтрации данных ответа.
--profile (строка)
Использовать определённый профиль из файла аутентификации.
--region (строка)
Регион для использования. Переопределяет настройки конфигурации/окружения.
--version (строка)
Отобразить версию этого инструмента.
--color (строка)
Включить/выключить цветной вывод.
- включено
- выключено
- автоматически
--no-sign-request (логическое значение)
Не подписывать запросы. Кредиты не будут загружены, если этот аргумент предоставлен.
--ca-bundle (строка)
Файл с набором сертификатов CA для проверки сертификатов SSL. Переопределяет настройки конфигурации/окружения.
--cli-read-timeout (целое число)
Максимальное время чтения сокета в секундах. Если значение установлено в 0, чтение сокета будет выполняться без блокировки и таймаута. Значение по умолчанию составляет 60 секунд.
--cli-connect-timeout (целое число)
Максимальное время подключения к сокету в секундах. Если значение установлено в 0, подключение к сокету будет выполняться без блокировки и таймаута. Значение по умолчанию составляет 60 секунд.
--cli-binary-format (строка)
Стиль форматирования для двоичных блоков. Формат по умолчанию — base64. Формат base64 ожидает, что двоичные блоки будут предоставлены как строка, закодированная в base64. Формат raw-in-base64-out сохраняет совместимость с поведением AWS CLI версии 1, и двоичные значения должны быть переданы буквально. При предоставлении содержимого из файла, отображающего двоичный блок, fileb:// всегда будет обрабатываться как двоичный и использовать содержимое файла напрямую независимо от параметра cli-binary-format. При использовании file:// содержимое файла должно быть должным образом отформатировано для настроенного параметра cli-binary-format.
- base64
- raw-in-base64-out
--no-cli-pager (логическое значение)
Отключить пагинатор CLI для вывода.
--cli-auto-prompt (логическое значение)
Автоматически запрашивать параметры ввода CLI.
--no-cli-auto-prompt (логическое значение)
Отключить автоматическое запроса параметров ввода CLI.
Вывод
Arn -> (строка)
arn:aws:airflow:us-east-1:123456789012:environment/MyMWAAEnvironment .
© Copyright 2025, Amazon Web Services. Created using Sphinx.