создать-эксперимент-вывода
Описание
Создает эксперимент вывода с использованием конфигураций, указанных в запросе.
Используйте этот API для настройки и планирования эксперимента по сравнениям вариантов моделей на конечной точке вывода Amazon SageMaker. Дополнительную информацию об экспериментах вывода см. в разделе Тестирование теней.
Amazon SageMaker запускает эксперимент в запланированное время и перенаправляет трафик на варианты моделей конечной точки в соответствии с указанной конфигурацией.
Во время выполнения эксперимента или после его завершения вы можете просмотреть метрики, сравнивающие ваши варианты моделей. Дополнительную информацию см. в разделе Просмотр, мониторинг и редактирование тестов теней.
См. также: Документация API AWS
Синтаксис
create-inference-experiment
--name <value>
--type <value>
[--schedule <value>]
[--description <value>]
--role-arn <value>
--endpoint-name <value>
--model-variants <value>
[--data-storage-config <value>]
--shadow-mode-config <value>
[--kms-key <value>]
[--tags <value>]
[--cli-input-json | --cli-input-yaml]
[--generate-cli-skeleton <value>]
[--debug]
[--endpoint-url <value>]
[--no-verify-ssl]
[--no-paginate]
[--output <value>]
[--query <value>]
[--profile <value>]
[--region <value>]
[--version <value>]
[--color <value>]
[--no-sign-request]
[--ca-bundle <value>]
[--cli-read-timeout <value>]
[--cli-connect-timeout <value>]
[--cli-binary-format <value>]
[--no-cli-pager]
[--cli-auto-prompt]
[--no-cli-auto-prompt]
Параметры
--name (строка)
--type (строка)
Тип эксперимента вывода, который вы хотите запустить. Возможные типы экспериментов:
-
ShadowMode: Этот тип можно использовать для проверки варианта тени. Дополнительную информацию см. в разделе Тестирование теней.
Возможные значения:
ShadowMode
--schedule (структура)
Продолжительность эксперимента вывода. Если этот параметр не указан, эксперимент автоматически запускается сразу после создания и завершается через 7 дней.
StartTime -> (метка времени)
EndTime -> (метка времени)
Сокращенный синтаксис:
StartTime=timestamp,EndTime=timestamp
Синтаксис JSON:
{
"StartTime": timestamp,
"EndTime": timestamp
}
--description (строка)
--role-arn (строка)
--endpoint-name (строка)
--model-variants (список)
Массив объектов ModelVariantConfig. По одному для каждого варианта в эксперименте вывода. Каждый объект ModelVariantConfig в массиве описывает конфигурацию инфраструктуры для соответствующего варианта.
(структура)
Содержит информацию о параметрах развертывания модели.
ModelName -> (строка)
VariantName -> (строка)
InfrastructureConfig -> (структура)
Конфигурация инфраструктуры, к которой будет развернута модель.
InfrastructureType -> (строка)
Вариант вывода, к которому развернуть модель. Возможные значения:
-
RealTime: Развернуть для реального времени.
RealTimeInferenceConfig -> (структура)
Конфигурация инфраструктуры для развертывания модели в реальном времени.
InstanceType -> (строка)
InstanceCount -> (целое число)
InstanceType.Сокращенный синтаксис:
ModelName=string,VariantName=string,InfrastructureConfig={InfrastructureType=string,RealTimeInferenceConfig={InstanceType=string,InstanceCount=integer}} ...
Синтаксис JSON:
[
{
"ModelName": "string",
"VariantName": "string",
"InfrastructureConfig": {
"InfrastructureType": "RealTimeInference",
"RealTimeInferenceConfig": {
"InstanceType": "ml.t2.medium"|"ml.t2.large"|"ml.t2.xlarge"|"ml.t2.2xlarge"|"ml.t3.medium"|"ml.t3.large"|"ml.t3.xlarge"|"ml.t3.2xlarge"|"ml.m4.xlarge"|"ml.m4.2xlarge"|"ml.m4.4xlarge"|"ml.m4.10xlarge"|"ml.m4.16xlarge"|"ml.m5.xlarge"|"ml.m5.2xlarge"|"ml.m5.4xlarge"|"ml.m5.12xlarge"|"ml.m5.24xlarge"|"ml.m5d.large"|"ml.m5d.xlarge"|"ml.m5d.2xlarge"|"ml.m5d.4xlarge"|"ml.m5d.8xlarge"|"ml.m5d.12xlarge"|"ml.m5d.16xlarge"|"ml.m5d.24xlarge"|"ml.c4.xlarge"|"ml.c4.2xlarge"|"ml.c4.4xlarge"|"ml.c4.8xlarge"|"ml.c5.xlarge"|"ml.c5.2xlarge"|"ml.c5.4xlarge"|"ml.c5.9xlarge"|"ml.c5.18xlarge"|"ml.c5d.xlarge"|"ml.c5d.2xlarge"|"ml.c5d.4xlarge"|"ml.c5d.9xlarge"|"ml.c5d.18xlarge"|"ml.p2.xlarge"|"ml.p2.8xlarge"|"ml.p2.16xlarge"|"ml.p3.2xlarge"|"ml.p3.8xlarge"|"ml.p3.16xlarge"|"ml.p3dn.24xlarge"|"ml.g4dn.xlarge"|"ml.g4dn.2xlarge"|"ml.g4dn.4xlarge"|"ml.g4dn.8xlarge"|"ml.g4dn.12xlarge"|"ml.g4dn.16xlarge"|"ml.r5.large"|"ml.r5.xlarge"|"ml.r5.2xlarge"|"ml.r5.4xlarge"|"ml.r5.8xlarge"|"ml.r5.12xlarge"|"ml.r5.16xlarge"|"ml.r5.24xlarge"|"ml.g5.xlarge"|"ml.g5.2xlarge"|"ml.g5.4xlarge"|"ml.g5.8xlarge"|"ml.g5.16xlarge"|"ml.g5.12xlarge"|"ml.g5.24xlarge"|"ml.g5.48xlarge"|"ml.inf1.xlarge"|"ml.inf1.2xlarge"|"ml.inf1.6xlarge"|"ml.inf1.24xlarge"|"ml.trn1.2xlarge"|"ml.trn1.32xlarge"|"ml.trn1n.32xlarge"|"ml.inf2.xlarge"|"ml.inf2.8xlarge"|"ml.inf2.24xlarge"|"ml.inf2.48xlarge"|"ml.p4d.24xlarge"|"ml.p4de.24xlarge"|"ml.p5.48xlarge"|"ml.m6i.large"|"ml.m6i.xlarge"|"ml.m6i.2xlarge"|"ml.m6i.4xlarge"|"ml.m6i.8xlarge"|"ml.m6i.12xlarge"|"ml.m6i.16xlarge"|"ml.m6i.24xlarge"|"ml.m6i.32xlarge"|"ml.m7i.large"|"ml.m7i.xlarge"|"ml.m7i.2xlarge"|"ml.m7i.4xlarge"|"ml.m7i.8xlarge"|"ml.m7i.12xlarge"|"ml.m7i.16xlarge"|"ml.m7i.24xlarge"|"ml.m7i.48xlarge"|"ml.c6i.large"|"ml.c6i.xlarge"|"ml.c6i.2xlarge"|"ml.c6i.4xlarge"|"ml.c6i.8xlarge"|"ml.c6i.12xlarge"|"ml.c6i.16xlarge"|"ml.c6i.24xlarge"|"ml.c6i.32xlarge"|"ml.c7i.large"|"ml.c7i.xlarge"|"ml.c7i.2xlarge"|"ml.c7i.4xlarge"|"ml.c7i.8xlarge"|"ml.c7i.12xlarge"|"ml.c7i.16xlarge"|"ml.c7i.24xlarge"|"ml.c7i.48xlarge"|"ml.r6i.large"|"ml.r6i.xlarge"|"ml.r6i.2xlarge"|"ml.r6i.4xlarge"|"ml.r6i.8xlarge"|"ml.r6i.12xlarge"|"ml.r6i.16xlarge"|"ml.r6i.24xlarge"|"ml.r6i.32xlarge"|"ml.r7i.large"|"ml.r7i.xlarge"|"ml.r7i.2xlarge"|"ml.r7i.4xlarge"|"ml.r7i.8xlarge"|"ml.r7i.12xlarge"|"ml.r7i.16xlarge"|"ml.r7i.24xlarge"|"ml.r7i.48xlarge"|"ml.m6id.large"|"ml.m6id.xlarge"|"ml.m6id.2xlarge"|"ml.m6id.4xlarge"|"ml.m6id.8xlarge"|"ml.m6id.12xlarge"|"ml.m6id.16xlarge"|"ml.m6id.24xlarge"|"ml.m6id.32xlarge"|"ml.c6id.large"|"ml.c6id.xlarge"|"ml.c6id.2xlarge"|"ml.c6id.4xlarge"|"ml.c6id.8xlarge"|"ml.c6id.12xlarge"|"ml.c6id.16xlarge"|"ml.c6id.24xlarge"|"ml.c6id.32xlarge"|"ml.r6id.large"|"ml.r6id.xlarge"|"ml.r6id.2xlarge"|"ml.r6id.4xlarge"|"ml.r6id.8xlarge"|"ml.r6id.12xlarge"|"ml.r6id.16xlarge"|"ml.r6id.24xlarge"|"ml.r6id.32xlarge"|"ml.g6.xlarge"|"ml.g6.2xlarge"|"ml.g6.4xlarge"|"ml.g6.8xlarge"|"ml.g6.12xlarge"|"ml.g6.16xlarge"|"ml.g6.24xlarge"|"ml.g6.48xlarge",
"InstanceCount": integer
}
}
}
...
]
--data-storage-config (структура)
Расположение и конфигурация Amazon S3 для хранения данных запроса и ответа вывода.
Это необязательный параметр, который можно использовать для захвата данных. Дополнительную информацию см. в разделе Захват данных.
Destination -> (строка)
KmsKey -> (строка)
ContentType -> (структура)
Конфигурация, определяющая, как обрабатывать различные заголовки. Если заголовки не указаны, Amazon SageMaker AI по умолчанию использует base64-кодирование при захвате данных.
CsvContentTypes -> (список)
Список всех заголовков типа содержимого, которые Amazon SageMaker AI будет обрабатывать как CSV и соответствующим образом сохранять.
(строка)
JsonContentTypes -> (список)
Список всех заголовков типа содержимого, которые SageMaker AI будет обрабатывать как JSON и соответствующим образом сохранять.
(строка)
Сокращенный синтаксис:
Destination=string,KmsKey=string,ContentType={CsvContentTypes=[string,string],JsonContentTypes=[string,string]}
Синтаксис JSON:
{
"Destination": "string",
"KmsKey": "string",
"ContentType": {
"CsvContentTypes": ["string", ...],
"JsonContentTypes": ["string", ...]
}
}
--shadow-mode-config (структура)
Конфигурация типа эксперимента ShadowMode вывода. Используйте этот параметр для задания варианта производства, который принимает все запросы на вывод, и варианта тени, к которому Amazon SageMaker дублирует определенный процент запросов на вывод. Для варианта тени также укажите процент запросов, которые Amazon SageMaker дублирует.
SourceModelVariantName -> (строка)
ShadowModelVariants -> (список)
Список конфигураций вариантов тени.
(структура)
Имя и процент выборки варианта тени.
ShadowModelVariantName -> (строка)
SamplingPercentage -> (целое число)
Сокращенный синтаксис:
SourceModelVariantName=string,ShadowModelVariants=[{ShadowModelVariantName=string,SamplingPercentage=integer},{ShadowModelVariantName=string,SamplingPercentage=integer}]
Синтаксис JSON:
{
"SourceModelVariantName": "string",
"ShadowModelVariants": [
{
"ShadowModelVariantName": "string",
"SamplingPercentage": integer
}
...
]
}
--kms-key (строка)
Ключ Amazon Web Services Key Management Service (Amazon Web Services KMS), который Amazon SageMaker использует для шифрования данных на томе хранения, подключенном к экземпляру вычислительных ресурсов ML, на котором размещена конечная точка. KmsKey может быть в одном из следующих форматов:
- Идентификатор ключа KMS
"1234abcd-12ab-34cd-56ef-1234567890ab" - Amazon Resource Name (ARN) ключа KMS
"arn:aws:kms:us-west-2:111122223333:key/1234abcd-12ab-34cd-56ef-1234567890ab" - Алиас ключа KMS
"alias/ExampleAlias" - Amazon Resource Name (ARN) алиаса ключа KMS
"arn:aws:kms:us-west-2:111122223333:alias/ExampleAlias"
Если вы используете идентификатор ключа KMS или алиас вашего ключа KMS, роль выполнения Amazon SageMaker должна включать разрешения на вызов kms:Encrypt. Если вы не предоставите идентификатор ключа KMS, Amazon SageMaker использует по умолчанию ключ KMS для Amazon S3 для учетной записи вашей роли. Amazon SageMaker использует шифрование на стороне сервера с управляемыми ключами KMS для OutputDataConfig. Если вы используете политику ведра с разрешением s3:PutObject, которое разрешает только объекты с шифрованием на стороне сервера, установите ключевое условие s3:x-amz-server-side-encryption в "aws:kms". Дополнительную информацию см. в разделе Управляемые ключи шифрования KMS в Руководстве разработчика Amazon Simple Storage Service.
Политика ключа KMS должна предоставлять разрешения роли IAM, которую вы указываете в ваших запросах CreateEndpoint и UpdateEndpoint. Дополнительную информацию см. в разделе Использование политик ключей в Amazon Web Services KMS в Руководстве разработчика Amazon Web Services Key Management Service.
--tags (список)
Массив пар ключ-значение. Вы можете использовать теги для категоризации ресурсов Amazon Web Services различными способами, например, по назначению, владельцу или среде. Дополнительную информацию см. в разделе Размещение тегов на ваших ресурсах Amazon Web Services.
(структура)
Объект тега, состоящий из ключа и необязательного значения, используемый для управления метаданными для ресурсов Amazon Web Services SageMaker.
Вы можете добавлять теги к экземплярам ноутбуков, задачам обучения, задачам настройки гиперпараметров, задачам пакетного преобразования, моделям, задачам маркировки, рабочим командам, конфигурациям конечных точек и конечным точкам. Дополнительную информацию о добавлении тегов к ресурсам SageMaker см. в разделе Добавить теги.
Дополнительную информацию о добавлении метаданных в ваши ресурсы Amazon Web Services с помощью тегов см. в разделе Размещение тегов на ресурсах Amazon Web Services. Советы по рекомендациям по лучшим практикам для управления ресурсами Amazon Web Services с помощью тегов см. в разделе Рекомендации по размещению тегов: реализация эффективной стратегии размещения тегов для ресурсов Amazon Web Services.
Key -> (строка)
Value -> (строка)
Сокращенный синтаксис:
Key=string,Value=string ...
Синтаксис JSON:
[
{
"Key": "string",
"Value": "string"
}
...
]
--cli-input-json | --cli-input-yaml (строка) Читает аргументы из предоставленной строки JSON. Строка JSON следует формату, предоставляемому --generate-cli-skeleton. Если другие аргументы указаны в командной строке, эти значения будут переопределять значения, предоставленные в JSON. Невозможно передавать произвольные двоичные значения с помощью предоставленного значения JSON, так как строка будет интерпретироваться буквально. Это может не быть указано вместе с --cli-input-yaml.
--generate-cli-skeleton (строка) Печатает скелет JSON в стандартный вывод без отправки запроса API. Если предоставлено значение null или строка input, печатает пример входного JSON, который можно использовать в качестве аргумента для --cli-input-json. Аналогично, если предоставлено значение yaml-input, будет напечатан пример входного YAML, который можно использовать с --cli-input-yaml. Если предоставлено значение output, он проверяет входные данные команды и возвращает пример выходного JSON для данной команды. Сгенерированный скелет JSON не является стабильным между версиями AWS CLI, и нет гарантий обратной совместимости в сгенерированном скелете JSON.
Общие параметры
--debug (boolean)
Включить отладку.
--endpoint-url (string)
Переопределить URL по умолчанию команды указанным URL.
--no-verify-ssl (boolean)
По умолчанию AWS CLI использует SSL при общении с AWS-сервисами. Для каждого SSL-соединения AWS CLI будет проверять SSL-сертификаты. Этот параметр переопределяет стандартное поведение проверки SSL-сертификатов.
--no-paginate (boolean)
Отключить автоматическую постраничную навигацию. Если автоматическая постраничная навигация отключена, AWS CLI выполнит только один вызов для первой страницы результатов.
--output (string)
Стиль форматирования вывода команды.
- json
- text
- table
- yaml
- yaml-stream
--query (string)
Запрос JMESPath для фильтрации данных ответа.
--profile (string)
Использовать определённый профиль из файла учетных данных.
--region (string)
Регион для использования. Переопределяет настройки конфигурации/среды.
--version (string)
Отобразить версию этого инструмента.
--color (string)
Включить/выключить вывод в цвете.
- on
- off
- auto
--no-sign-request (boolean)
Не подписывать запросы. Учетные данные не будут загружаться, если этот аргумент указан.
--ca-bundle (string)
Файл сертификатов CA для проверки SSL-сертификатов. Переопределяет настройки конфигурации/среды.
--cli-read-timeout (int)
Максимальное время чтения сокета в секундах. Если значение установлено в 0, чтение сокета будет выполняться блокирующим образом без таймаута. Значение по умолчанию - 60 секунд.
--cli-connect-timeout (int)
Максимальное время подключения сокета в секундах. Если значение установлено в 0, подключение сокета будет выполняться блокирующим образом без таймаута. Значение по умолчанию - 60 секунд.
--cli-binary-format (string)
Стиль форматирования, используемый для двоичных блоков. Формат по умолчанию - base64. Формат base64 ожидает, что двоичные блоки будут предоставлены в виде закодированной строкой base64. Формат raw-in-base64-out сохраняет совместимость с поведением AWS CLI V1, и двоичные значения должны передаваться буквально. При предоставлении содержимого из файла, соответствующего двоичному блоку fileb:// всегда будет обрабатываться как двоичный и будет использовать содержимое файла напрямую независимо от настройки cli-binary-format. При использовании file:// содержимое файла должно быть должным образом отформатировано для настроенного cli-binary-format.
- base64
- raw-in-base64-out
--no-cli-pager (boolean)
Отключить пейджер CLI для вывода.
--cli-auto-prompt (boolean)
Автоматически запросить параметры ввода CLI.
--no-cli-auto-prompt (boolean)
Отключить автоматическое запроса параметров ввода CLI.
Вывод
InferenceExperimentArn -> (string)
© Copyright 2025, Amazon Web Services. Created using Sphinx.