создать-набор-данных
Описание
Создает новый набор данных DataBrew.
См. также: Документацию API AWS
Синтаксис
create-dataset
--name <value>
[--format <value>]
[--format-options <value>]
--input <value>
[--path-options <value>]
[--tags <value>]
[--cli-input-json | --cli-input-yaml]
[--generate-cli-skeleton <value>]
[--debug]
[--endpoint-url <value>]
[--no-verify-ssl]
[--no-paginate]
[--output <value>]
[--query <value>]
[--profile <value>]
[--region <value>]
[--version <value>]
[--color <value>]
[--no-sign-request]
[--ca-bundle <value>]
[--cli-read-timeout <value>]
[--cli-connect-timeout <value>]
[--cli-binary-format <value>]
[--no-cli-pager]
[--cli-auto-prompt]
[--no-cli-auto-prompt]
Параметры
--name (строка)
--format (строка)
Формат файла набора данных, созданного из файла или папки Amazon S3.
Возможные значения:
CSVJSONPARQUETEXCELORC
--format-options (структура)
Представляет набор параметров, определяющих структуру входных данных в формате CSV, Excel или JSON.
Json -> (структура)
Параметры, определяющие, как DataBrew интерпретирует входные данные JSON.
MultiLine -> (логическое значение)
Excel -> (структура)
Параметры, определяющие, как DataBrew интерпретирует входные данные Excel.
SheetNames -> (список)
Одно или несколько именованных листов Excel-файла, которые будут включены в набор данных.
(строка)
SheetIndexes -> (список)
Один или несколько номеров листов в Excel-файле, которые будут включены в набор данных.
(целое число)
HeaderRow -> (логическое значение)
Csv -> (структура)
Параметры, определяющие, как DataBrew интерпретирует входные данные CSV.
Delimiter -> (строка)
HeaderRow -> (логическое значение)
Сокращенный синтаксис:
Json={MultiLine=boolean},Excel={SheetNames=[string,string],SheetIndexes=[integer,integer],HeaderRow=boolean},Csv={Delimiter=string,HeaderRow=boolean}
Синтаксис JSON:
{
"Json": {
"MultiLine": true|false
},
"Excel": {
"SheetNames": ["string", ...],
"SheetIndexes": [integer, ...],
"HeaderRow": true|false
},
"Csv": {
"Delimiter": "string",
"HeaderRow": true|false
}
}
--input (структура)
Представляет информацию о том, как DataBrew находит данные в каталоге Glue или Amazon S3.
S3InputDefinition -> (структура)
Расположение данных в Amazon S3.
Bucket -> (строка)
Key -> (строка)
BucketOwner -> (строка)
DataCatalogInputDefinition -> (структура)
Параметры каталога данных Glue для данных.
CatalogId -> (строка)
DatabaseName -> (строка)
TableName -> (строка)
TempDirectory -> (структура)
Представляет местоположение Amazon, где DataBrew может хранить промежуточные результаты.
Bucket -> (строка)
Key -> (строка)
BucketOwner -> (строка)
DatabaseInputDefinition -> (структура)
Информация о подключении к файлам входных данных набора данных, хранящихся в базе данных.
GlueConnectionName -> (строка)
DatabaseTableName -> (строка)
TempDirectory -> (структура)
Представляет местоположение Amazon S3 (имя ведра, владелец ведра и ключ объекта), где DataBrew может читать входные данные или записывать выходные данные из задания.
Bucket -> (строка)
Key -> (строка)
BucketOwner -> (строка)
QueryString -> (строка)
Metadata -> (структура)
Содержит дополнительную информацию о ресурсе, необходимую для конкретных наборов данных.
SourceArn -> (строка)
Сокращенный синтаксис:
S3InputDefinition={Bucket=string,Key=string,BucketOwner=string},DataCatalogInputDefinition={CatalogId=string,DatabaseName=string,TableName=string,TempDirectory={Bucket=string,Key=string,BucketOwner=string}},DatabaseInputDefinition={GlueConnectionName=string,DatabaseTableName=string,TempDirectory={Bucket=string,Key=string,BucketOwner=string},QueryString=string},Metadata={SourceArn=string}
Синтаксис JSON:
{
"S3InputDefinition": {
"Bucket": "string",
"Key": "string",
"BucketOwner": "string"
},
"DataCatalogInputDefinition": {
"CatalogId": "string",
"DatabaseName": "string",
"TableName": "string",
"TempDirectory": {
"Bucket": "string",
"Key": "string",
"BucketOwner": "string"
}
},
"DatabaseInputDefinition": {
"GlueConnectionName": "string",
"DatabaseTableName": "string",
"TempDirectory": {
"Bucket": "string",
"Key": "string",
"BucketOwner": "string"
},
"QueryString": "string"
},
"Metadata": {
"SourceArn": "string"
}
}
--path-options (структура)
Набор параметров, определяющих, как DataBrew интерпретирует путь Amazon S3 набора данных.
LastModifiedDateCondition -> (структура)
Если задан, эта структура определяет диапазон дат для сопоставления объектов Amazon S3 на основе атрибута LastModifiedDate в Amazon S3.
Expression -> (строка)
ValuesMap -> (карта)
Карта имён переменных подстановки и их значений, используемых в этом выражении фильтра.
ключ -> (строка)
значение -> (строка)
FilesLimit -> (структура)
Если задан, эта структура накладывает ограничение на количество файлов, которые должны быть выбраны.
MaxFiles -> (целое число)
OrderedBy -> (строка)
Order -> (строка)
Parameters -> (карта)
Структура, отображающая имена параметров, используемых в пути Amazon S3 набора данных, и их определения.
ключ -> (строка)
значение -> (структура)
Представляет параметр набора данных, определяющий тип и условия для параметра в пути Amazon S3 набора данных.
Name -> (строка)
Type -> (строка)
DatetimeOptions -> (структура)
Дополнительные параметры параметров, такие как формат и часовой пояс. Требуется для параметров типа дата.
Format -> (строка)
TimezoneOffset -> (строка)
LocaleCode -> (строка)
CreateColumn -> (логическое значение)
Filter -> (структура)
Необязательная структура выражения фильтра для применения дополнительных критериев соответствия к параметру.
Expression -> (строка)
ValuesMap -> (карта)
Карта имён переменных подстановки и их значений, используемых в этом выражении фильтра.
ключ -> (строка)
значение -> (строка)
Сокращенный синтаксис:
LastModifiedDateCondition={Expression=string,ValuesMap={KeyName1=string,KeyName2=string}},FilesLimit={MaxFiles=integer,OrderedBy=string,Order=string},Parameters={KeyName1={Name=string,Type=string,DatetimeOptions={Format=string,TimezoneOffset=string,LocaleCode=string},CreateColumn=boolean,Filter={Expression=string,ValuesMap={KeyName1=string,KeyName2=string}}},KeyName2={Name=string,Type=string,DatetimeOptions={Format=string,TimezoneOffset=string,LocaleCode=string},CreateColumn=boolean,Filter={Expression=string,ValuesMap={KeyName1=string,KeyName2=string}}}}
Синтаксис JSON:
{
"LastModifiedDateCondition": {
"Expression": "string",
"ValuesMap": {"string": "string"
...}
},
"FilesLimit": {
"MaxFiles": integer,
"OrderedBy": "LAST_MODIFIED_DATE",
"Order": "DESCENDING"|"ASCENDING"
},
"Parameters": {"string": {
"Name": "string",
"Type": "Datetime"|"Number"|"String",
"DatetimeOptions": {
"Format": "string",
"TimezoneOffset": "string",
"LocaleCode": "string"
},
"CreateColumn": true|false,
"Filter": {
"Expression": "string",
"ValuesMap": {"string": "string"
...}
}
}
...}
}
--tags (карта)
Метки метаданных, которые необходимо применить к этому набору данных.
ключ -> (строка)
значение -> (строка)
Сокращенный синтаксис:
KeyName1=string,KeyName2=string
Синтаксис JSON:
{"string": "string"
...}
--cli-input-json | --cli-input-yaml (строка) Читает аргументы из предоставленной строки JSON. Строка JSON соответствует формату, предоставленному в --generate-cli-skeleton. Если другие аргументы предоставлены в командной строке, эти значения перекроют значения, предоставленные в JSON. Невозможно передавать произвольные двоичные значения с помощью предоставленного значения JSON, так как строка будет взята дословно. Это может не быть указано вместе с --cli-input-yaml.
--generate-cli-skeleton (строка) Выводит скелет JSON в стандартный вывод без отправки запроса к API. Если предоставлено без значения или со значением input, выводит пример входного JSON, который можно использовать в качестве аргумента для --cli-input-json. Аналогично, если предоставлено yaml-input, будет выведен пример входного YAML, который можно использовать с --cli-input-yaml. Если предоставлено значение output, оно проверит входные данные команды и вернёт пример выходного JSON для этой команды. Сгенерированный скелет JSON не является стабильным между версиями AWS CLI, и нет гарантий обратной совместимости в сгенерированном скелете JSON.
Общие параметры
--debug (boolean)
Включить отладку.
--endpoint-url (string)
Переопределить адрес по умолчанию команды заданным адресом.
--no-verify-ssl (boolean)
По умолчанию AWS CLI использует SSL при общении с AWS-сервисами. Для каждого SSL-соединения AWS CLI проверяет SSL-сертификаты. Этот параметр переопределяет поведение проверки SSL-сертификатов по умолчанию.
--no-paginate (boolean)
Отключить автоматическую постраничную навигацию. Если автоматическая постраничная навигация отключена, AWS CLI выполнит только один вызов для первой страницы результатов.
--output (string)
Стиль форматирования вывода команды.
- json
- text
- table
- yaml
- yaml-stream
--query (string)
Запрос JMESPath для фильтрации данных ответа.
--profile (string)
Использовать определённый профиль из файла учетных данных.
--region (string)
Используемая область. Переопределяет настройки конфигурации/среды.
--version (string)
Отобразить версию этого инструмента.
--color (string)
Включить/выключить цветной вывод.
- on
- off
- auto
--no-sign-request (boolean)
Не подписывать запросы. Учетные данные не будут загружены, если этот аргумент предоставлен.
--ca-bundle (string)
Файл сертификатов CA для проверки SSL-сертификатов. Переопределяет настройки конфигурации/среды.
--cli-read-timeout (int)
Максимальное время чтения сокета в секундах. Если значение равно 0, чтение сокета будет блокирующим и не будет иметь таймаута. Значение по умолчанию — 60 секунд.
--cli-connect-timeout (int)
Максимальное время подключения к сокету в секундах. Если значение равно 0, подключение к сокету будет блокирующим и не будет иметь таймаута. Значение по умолчанию — 60 секунд.
--cli-binary-format (string)
Стиль форматирования, используемый для двоичных блоков. По умолчанию формат — base64. Формат base64 ожидает, что двоичные блоки будут предоставлены как строка, закодированная в base64. Формат raw-in-base64-out сохраняет совместимость с поведением AWS CLI V1, и двоичные значения должны быть переданы буквально. При предоставлении содержимого из файла, которое отображается в двоичный блок fileb:// всегда будет обрабатываться как двоичный и будет использовать содержимое файла непосредственно независимо от настройки cli-binary-format. При использовании file:// содержимое файла необходимо правильно отформатировать для настроенного cli-binary-format.
- base64
- raw-in-base64-out
--no-cli-pager (boolean)
Отключить кли-педжер для вывода.
--cli-auto-prompt (boolean)
Автоматически запрашивать параметры ввода CLI.
--no-cli-auto-prompt (boolean)
Отключить автоматический запрос параметров ввода CLI.
Вывод
Имя -> (строка)
© Copyright 2025, Amazon Web Services. Created using Sphinx.