describe-processing-job
Описание
Возвращает описание задания обработки.
См. также: Документацию API AWS
Синтаксис
describe-processing-job
--processing-job-name <value>
[--cli-input-json | --cli-input-yaml]
[--generate-cli-skeleton <value>]
[--debug]
[--endpoint-url <value>]
[--no-verify-ssl]
[--no-paginate]
[--output <value>]
[--query <value>]
[--profile <value>]
[--region <value>]
[--version <value>]
[--color <value>]
[--no-sign-request]
[--ca-bundle <value>]
[--cli-read-timeout <value>]
[--cli-connect-timeout <value>]
[--cli-binary-format <value>]
[--no-cli-pager]
[--cli-auto-prompt]
[--no-cli-auto-prompt]
Параметры
--processing-job-name (строка)
--cli-input-json | --cli-input-yaml (строка) Считывает аргументы из предоставленной JSON-строки. JSON-строка следует формату, предоставленному --generate-cli-skeleton. Если другие аргументы предоставлены в командной строке, эти значения переопределят значения, полученные из JSON. Невозможно передавать произвольные двоичные значения с помощью JSON-строки, так как строка будет интерпретирована буквально. Это не может быть указано вместе с --cli-input-yaml.
--generate-cli-skeleton (строка) Выводит JSON-скелет в стандартный вывод без отправки запроса API. Если предоставлено значение без значения или значение input, выводит пример JSON-ввода, который можно использовать в качестве аргумента для --cli-input-json. Аналогично, если предоставлено yaml-input, выведет пример YAML-ввода, который можно использовать с --cli-input-yaml. Если предоставлено значение output, оно валидирует входные данные команды и возвращает пример выходного JSON для данной команды. Сгенерированный JSON-скелет нестабилен между версиями AWS CLI, и нет гарантий обратной совместимости в сгенерированном JSON-скелете.
Глобальные параметры
--debug (логическое значение)
Включить отладочную регистрацию.
--endpoint-url (строка)
Переопределить адрес по умолчанию команды данным адресом.
--no-verify-ssl (логическое значение)
По умолчанию AWS CLI использует SSL при взаимодействии с AWS-сервисами. Для каждого соединения SSL AWS CLI будет проверять сертификаты SSL. Этот параметр переопределяет поведение по умолчанию по проверке SSL-сертификатов.
--no-paginate (логическое значение)
Отключить автоматическую постраничную навигацию. Если автоматическая постраничная навигация отключена, AWS CLI сделает только один вызов для первой страницы результатов.
--output (строка)
Стиль форматирования для вывода команды.
- json
- text
- table
- yaml
- yaml-stream
--query (строка)
Запрос JMESPath для фильтрации данных ответа.
--profile (строка)
Использование определенного профиля из файла учетных данных.
--region (строка)
Область, которую нужно использовать. Переопределяет настройки конфигурации/окружения.
--version (строка)
Отобразить версию этого инструмента.
--color (строка)
Включение/выключение цветного вывода.
- on
- off
- auto
--no-sign-request (логическое значение)
Не подписывать запросы. Учетные данные не будут загружены, если этот параметр предоставлен.
--ca-bundle (строка)
Файл с пакетом сертификатов CA для проверки SSL-сертификатов. Переопределяет настройки конфигурации/окружения.
--cli-read-timeout (целое число)
Максимальное время чтения сокета в секундах. Если значение установлено в 0, чтение сокета будет блокирующим и не будет иметь таймаута. Значение по умолчанию составляет 60 секунд.
--cli-connect-timeout (целое число)
Максимальное время подключения сокета в секундах. Если значение установлено в 0, подключение сокета будет блокирующим и не будет иметь таймаута. Значение по умолчанию составляет 60 секунд.
--cli-binary-format (строка)
Стиль форматирования, который будет использоваться для двоичных блоков. Формат по умолчанию — base64. Формат base64 ожидает, что двоичные блоки будут предоставлены как строка в кодировке base64. Формат raw-in-base64-out сохраняет совместимость с поведением AWS CLI V1, и двоичные значения должны передаваться буквально. При предоставлении содержимого из файла, сопоставленного с двоичным блоком, fileb:// всегда будет обрабатываться как двоичный, и содержимое файла будет использоваться непосредственно независимо от настройки cli-binary-format. При использовании file:// содержимое файла должно быть должным образом отформатировано для настроенного cli-binary-format.
- base64
- raw-in-base64-out
--no-cli-pager (логическое значение)
Отключить вывод пагинатора CLI.
--cli-auto-prompt (логическое значение)
Автоматически запросить параметры ввода CLI.
--no-cli-auto-prompt (логическое значение)
Отключить автоматический запрос параметров ввода CLI.
Вывод
ProcessingInputs -> (список)
Вводные данные для задачи обработки.
(структура)
Вводные данные для задачи обработки. Вводные данные обработки должны указывать ровно один из типов S3Input или DatasetDefinition.
InputName -> (строка)
AppManaged -> (булево)
True , операции ввода, такие как загрузка данных, управляются непосредственно приложением задачи обработки. Когда False (по умолчанию), операции ввода управляются Amazon SageMaker.S3Input -> (структура)
Настройки для загрузки входных данных из Amazon S3 в контейнер обработки.
S3Uri -> (строка)
LocalPath -> (строка)
LocalPath — это абсолютный путь к входным данным и должен начинаться с /opt/ml/processing/. LocalPath — это обязательный параметр, когда AppManaged равен False (по умолчанию).S3DataType -> (строка)
S3Prefix или ManifestFile для типа данных. Если выбран S3Prefix, S3Uri идентифицирует префикс имени ключа. Amazon SageMaker использует все объекты с указанным префиксом имени ключа для задачи обработки. Если выбран ManifestFile, S3Uri идентифицирует объект, который является файлом манифеста, содержащим список ключей объектов, которые Amazon SageMaker должен использовать для задачи обработки.S3InputMode -> (строка)
File или Pipe. В режиме файла Amazon SageMaker копирует данные из источника во временный объем локального хранилища перед запуском контейнера обработки. Это наиболее часто используемый режим ввода. В режиме Pipe Amazon SageMaker передает входные данные из источника непосредственно в контейнер обработки в именованные каналы без использования временного объема локального хранилища.S3DataDistributionType -> (строка)
FullyReplicated или данные из Amazon S3 разделяются по ключу Amazon S3, при этом один фрагмент данных загружается на каждый экземпляр обработки.S3CompressionType -> (строка)
Gzip может быть использовано только при указании режима Pipe в качестве режима S3InputMode. В режиме Pipe Amazon SageMaker передает входные данные из источника непосредственно в контейнер без использования тома EBS.DatasetDefinition -> (структура)
Настройки для входных данных определения набора данных.
AthenaDatasetDefinition -> (структура)
Настройки для входных данных определения набора данных Athena.
Catalog -> (строка)
Database -> (строка)
QueryString -> (строка)
WorkGroup -> (строка)
OutputS3Uri -> (строка)
KmsKeyId -> (строка)
OutputFormat -> (строка)
OutputCompression -> (строка)
RedshiftDatasetDefinition -> (структура)
Настройки для входных данных определения набора данных Redshift.
ClusterId -> (строка)
Database -> (строка)
DbUser -> (строка)
QueryString -> (строка)
ClusterRoleArn -> (строка)
OutputS3Uri -> (строка)
KmsKeyId -> (строка)
OutputFormat -> (строка)
OutputCompression -> (строка)
LocalPath -> (строка)
LocalPath — это абсолютный путь к входным данным. Это обязательный параметр, когда AppManaged равен False (по умолчанию).DataDistributionType -> (строка)
FullyReplicated или ShardedByS3Key (по умолчанию).InputMode -> (строка)
File или Pipe. В режиме File (по умолчанию) Amazon SageMaker копирует данные из источника в локальные тома Amazon Elastic Block Store (Amazon EBS) перед запуском алгоритма обучения. Это наиболее часто используемый режим ввода. В режиме Pipe Amazon SageMaker передает входные данные из источника непосредственно в алгоритм без использования тома EBS.ProcessingOutputConfig -> (структура)
Настройки вывода для задачи обработки.
Outputs -> (список)
Массив настроек вывода для данных, которые необходимо загрузить из контейнера обработки.
(структура)
Описание результатов задачи обработки. Выходные данные обработки должны указывать ровно один из типов S3Output или FeatureStoreOutput.
OutputName -> (строка)
S3Output -> (структура)
Настройки для выходных данных задачи обработки в Amazon S3.
S3Uri -> (строка)
LocalPath -> (строка)
LocalPath — это абсолютный путь к каталогу, содержащему выходные файлы. Этот каталог будет создан платформой и существовать при вызове точки входа вашего контейнера.S3UploadMode -> (строка)
FeatureStoreOutput -> (структура)
Настройки для выходных данных задачи обработки в Amazon SageMaker Feature Store. Этот тип выходных данных обработки поддерживается только при указании AppManaged.
FeatureGroupName -> (строка)
AppManaged -> (булево)
True , операции вывода, такие как загрузка данных, управляются непосредственно приложением задачи обработки. Когда False (по умолчанию), операции вывода управляются Amazon SageMaker.KmsKeyId -> (строка)
KmsKeyId может быть идентификатором ключа KMS, ARN ключа KMS или псевдонимом ключа KMS. KmsKeyId применяется ко всем выходам.ProcessingJobName -> (строка)
ProcessingResources -> (структура)
Определяет ресурсы, экземпляры вычислительных машин ML и тома хранилища ML, которые необходимо развернуть для задачи обработки. При распределенном обучении вы указываете несколько экземпляров.
ClusterConfig -> (структура)
Настройки ресурсов в кластере, используемом для выполнения задачи обработки.
InstanceCount -> (целое число)
InstanceType -> (строка)
VolumeSizeInGB -> (целое число)
Размер тома хранилища ML в гигабайтах, который вы хотите предоставить. Вы должны указать достаточное хранилище ML для вашего сценария.
Примечание
Некоторые экземпляры на основе Nitro включают локальное хранилище с фиксированным общим размером, зависящим от типа экземпляра. При использовании этих экземпляров для обработки Amazon SageMaker подключает локальное хранилище экземпляра вместо хранилища Amazon EBS gp2. Вы не можете запросить VolumeSizeInGB, превышающий общий размер локального хранилища экземпляра.
Список типов экземпляров, поддерживающих локальное хранилище экземпляров, включая общий размер для каждого типа, см. в разделе Тома хранилища экземпляров.
VolumeKmsKeyId -> (строка)
Ключ Amazon Web Services Key Management Service (Amazon Web Services KMS), который Amazon SageMaker использует для шифрования данных на томе хранилища, подключенном к экземплярам вычислительной машины ML, выполняющим задачу обработки.
Примечание
Некоторые экземпляры на основе Nitro включают локальное хранилище, зависящее от типа экземпляра. Тома локального хранилища шифруются с помощью аппаратного модуля на экземпляре. Вы не можете запросить VolumeKmsKeyId при использовании типа экземпляра с локальным хранилищем.
Список типов экземпляров, поддерживающих локальное хранилище экземпляров, см. в разделе Тома хранилища экземпляров.
Дополнительную информацию о шифровании локального хранилища экземпляра см. в разделе Тома хранилища экземпляров SSD.
StoppingCondition -> (структура)
Ограничение по времени выполнения задачи обработки.
MaxRuntimeInSeconds -> (целое число)
AppSpecification -> (структура)
Настройка задачи обработки для выполнения указанного изображения контейнера.
ImageUri -> (строка)
ContainerEntrypoint -> (список)
Точка входа контейнера, используемого для выполнения задачи обработки.
(строка)
ContainerArguments -> (список)
Аргументы для контейнера, используемого для выполнения задачи обработки.
(строка)
Environment -> (массив)
Переменные среды, установленные в контейнере Docker.
ключ -> (строка)
значение -> (строка)
NetworkConfig -> (структура)
Параметры сети для обработки задания.
EnableInterContainerTrafficEncryption -> (логическое значение)
True, чтобы зашифровать коммуникации. Шифрование обеспечивает большую безопасность для распределенных заданий обработки, но обработка может занять больше времени.EnableNetworkIsolation -> (логическое значение)
VpcConfig -> (структура)
Указывает виртуальную частную сеть Amazon (VPC), к которой имеют доступ ваши задания SageMaker, размещенные модели и вычислительные ресурсы. Вы можете контролировать доступ к ресурсам и из них, настроив VPC. Дополнительную информацию см. в разделе Предоставление SageMaker доступа к ресурсам в вашей Amazon VPC.
SecurityGroupIds -> (список)
Идентификаторы групп безопасности VPC в формате sg-xxxxxxxx. Укажите группы безопасности для VPC, указанной в поле Subnets.
(строка)
Subnets -> (список)
Идентификатор подсетей в VPC, к которым вы хотите подключить задание обучения или модель. Информацию о доступности определенных типов экземпляров см. в разделе Поддерживаемые типы экземпляров и доступные зоны.
(строка)
RoleArn -> (строка)
ExperimentConfig -> (структура)
Конфигурационная информация, используемая для создания эксперимента.
ExperimentName -> (строка)
TrialName -> (строка)
TrialComponentDisplayName -> (строка)
RunName -> (строка)
ProcessingJobArn -> (строка)
ProcessingJobStatus -> (строка)
ExitMessage -> (строка)
FailureReason -> (строка)
ProcessingEndTime -> (метка времени)
ProcessingStartTime -> (метка времени)
LastModifiedTime -> (метка времени)
CreationTime -> (метка времени)
MonitoringScheduleArn -> (строка)
AutoMLJobArn -> (строка)
TrainingJobArn -> (строка)
© Copyright 2025, Amazon Web Services. Created using Sphinx.