получение результатов эксперимента
Описание
Получает результаты выполняемого или завершенного эксперимента. Результаты недоступны до тех пор, пока для каждой вариации не будет 100 событий и не пройдет как минимум 10 минут с момента начала эксперимента. Для повышения статистической мощности Evidently выполняет дополнительный офлайн-анализ p-значения в конце эксперимента. Офлайн-анализ p-значения может обнаружить статистическую значимость в некоторых случаях, когда p-значения в режиме реального времени, используемые во время эксперимента, не обнаруживают статистической значимости.
Результаты эксперимента доступны в течение 63 дней после начала эксперимента. Они недоступны после этого из-за политики удержания данных CloudWatch.
См. также: Документацию API AWS
Синтаксис
get-experiment-results
[--base-stat <value>]
[--end-time <value>]
--experiment <value>
--metric-names <value>
[--period <value>]
--project <value>
[--report-names <value>]
[--result-stats <value>]
[--start-time <value>]
--treatment-names <value>
[--cli-input-json | --cli-input-yaml]
[--generate-cli-skeleton <value>]
[--debug]
[--endpoint-url <value>]
[--no-verify-ssl]
[--no-paginate]
[--output <value>]
[--query <value>]
[--profile <value>]
[--region <value>]
[--version <value>]
[--color <value>]
[--no-sign-request]
[--ca-bundle <value>]
[--cli-read-timeout <value>]
[--cli-connect-timeout <value>]
[--cli-binary-format <value>]
[--no-cli-pager]
[--cli-auto-prompt]
[--no-cli-auto-prompt]
Параметры
--base-stat (строка)
Статистика, используемая для расчета результатов эксперимента. В настоящее время единственное допустимое значение — mean, которое использует среднее значение собранных значений в качестве статистики.
Возможные значения:
Mean
--end-time (метка времени)
--experiment (строка)
--metric-names (список)
Имена метрик эксперимента, результаты которых вы хотите увидеть.
(строка)
Синтаксис:
"string" "string" ...
--period (целое)
--project (строка)
--report-names (список)
Имена типов отчетов, которые вы хотите увидеть. В настоящее время BayesianInference — единственное допустимое значение.
(строка)
Синтаксис:
"string" "string" ...
Where valid values are:
BayesianInference
--result-stats (список)
Статистики, которые вы хотите видеть в возвращаемых результатах.
-
PValueуказывает на использование p-значений для результатов. P-значение используется в проверке гипотез для измерения частоты ошибки при отклонении нулевой гипотезы. Общепринятой практикой является отклонение нулевой гипотезы и объявление результатов статистически значимыми, если p-значение меньше 0,05. -
ConfidenceIntervalуказывает доверительный интервал для результатов. Доверительный интервал представляет собой диапазон значений выбранной метрики, который, вероятно, содержит истинное различие междуbaseStatварианта и базовым значением. Evidently возвращает 95%-й доверительный интервал. -
TreatmentEffectпредставляет собой разницу в статистике, указанной параметромbaseStat, между каждой вариацией и базовой вариацией. -
BaseStatвозвращает статистические значения, собранные для метрики для каждой вариации. Статистика использует ту же статистику, которая указана в параметреbaseStat. Следовательно, еслиbaseStat—mean, это возвращает среднее значение собранных значений для каждой вариации.
(строка)
Синтаксис:
"string" "string" ...
Where valid values are:
BaseStat
TreatmentEffect
ConfidenceInterval
PValue
--start-time (метка времени)
--treatment-names (список)
Имена обработанных значений эксперимента, результаты которых вы хотите увидеть.
(строка)
Синтаксис:
"string" "string" ...
--cli-input-json | --cli-input-yaml (строка) Читает аргументы из предоставленной JSON-строки. JSON-строка соответствует формату, предоставленному --generate-cli-skeleton. Если на командной строке указаны другие аргументы, эти значения переопределят значения, предоставленные в JSON. Невозможно передавать произвольные двоичные значения с помощью предоставленного значения JSON, так как строка будет принята буквально. Это не может быть указано вместе с --cli-input-yaml.
--generate-cli-skeleton (строка) Выводит JSON-скелет в стандартный вывод без отправки запроса к API. Если указано без значения или со значением input, выводит пример входного JSON, который может быть использован как аргумент для --cli-input-json. Аналогично, если указано yaml-input, будет выведен пример входного YAML, который можно использовать с --cli-input-yaml. Если указано значение output, он проверяет входные данные команд и возвращает пример выходного JSON для этой команды. Сгенерированный JSON-скелет нестабилен между версиями AWS CLI, и нет гарантий обратной совместимости в сгенерированном JSON-скелете.
Глобальные параметры
--debug (булево)
Включить отладку.
--endpoint-url (строка)
Переопределить URL по умолчанию команды указанным URL.
--no-verify-ssl (булево)
По умолчанию AWS CLI использует SSL при общении с AWS-сервисами. Для каждого подключения SSL AWS CLI будет проверять сертификаты SSL. Этот параметр переопределяет поведение по умолчанию по проверке SSL-сертификатов.
--no-paginate (булево)
Отключить автоматическую постраничную навигацию. Если автоматическая постраничная навигация отключена, AWS CLI выполнит только один вызов для первой страницы результатов.
--output (строка)
Стиль форматирования вывода команд.
- json
- текст
- таблица
- yaml
- yaml-поток
--query (строка)
Запрос JMESPath для фильтрации данных ответа.
--profile (строка)
Использование определенного профиля из файла учетных данных.
--region (строка)
Используемый регион. Переопределяет настройки конфигурации/среды.
--version (строка)
Отображение версии этого инструмента.
--color (строка)
Включение/выключение цветного вывода.
- включено
- выключено
- автоматически
--no-sign-request (булево)
Не подписывать запросы. Учетные данные не будут загружены, если этот аргумент предоставлен.
--ca-bundle (строка)
Пучок сертификатов CA для проверки SSL-сертификатов. Переопределяет настройки конфигурации/среды.
--cli-read-timeout (целое)
Максимальное время чтения сокета в секундах. Если значение установлено в 0, чтение сокета будет блокирующим и не будет иметь ограничения по времени. Значение по умолчанию — 60 секунд.
--cli-connect-timeout (целое)
Максимальное время подключения сокета в секундах. Если значение установлено в 0, подключение сокета будет блокирующим и не будет иметь ограничения по времени. Значение по умолчанию — 60 секунд.
--cli-binary-format (строка)
Стиль форматирования, используемый для двоичных блоков. Формат по умолчанию — base64. Формат base64 ожидает, что двоичные блоки будут предоставлены как строка, закодированная в base64. Формат raw-in-base64-out сохраняет совместимость с поведением AWS CLI V1, а двоичные значения должны передаваться буквально. При предоставлении содержимого из файла, которое соответствует двоичному блоку, fileb:// всегда будет обрабатываться как двоичный и будет использовать содержимое файла напрямую независимо от настройки cli-binary-format. При использовании file:// содержимое файла необходимо правильно отформатировать для настроенного cli-binary-format.
- base64
- raw-in-base64-out
--no-cli-pager (булево)
Отключить средства постраничной навигации CLI для вывода.
--cli-auto-prompt (булево)
Автоматически запросить параметры CLI.
--no-cli-auto-prompt (булево)
Отключить автоматическое запросить параметры CLI.
Вывод
details -> (строка)
Not enough events to generate results. Если событий достаточно для предоставления валидных результатов, это поле не возвращается.reports -> (список)
Массив структур, включающих запрошенные отчеты.
(структура)
Структура, содержащая результаты эксперимента.
content -> (строка)
metricName -> (строка)
reportName -> (строка)
treatmentName -> (строка)
resultsData -> (список)
Массив структур, включающих результаты эксперимента, включая имена и значения метрик.
(структура)
Структура, содержащая результаты эксперимента для одной метрики, которая отслеживается в эксперименте.
metricName -> (строка)
resultStat -> (строка)
treatmentName -> (строка)
values в этой структуре.values -> (список)
Значения metricName, которые были зарегистрированы в эксперименте.
(вещественное число)
timestamps -> (список)
Метки времени каждого возвращенного результата.
(метка времени)
© Copyright 2025, Amazon Web Services. Created using Sphinx.