create-integration-table-properties

Описание

Этот API используется для предоставления необязательных свойств перезаписи для таблиц, которые необходимо реплицировать. Эти свойства могут включать свойства для фильтрации и разбиения для исходных и целевых таблиц. Для задания свойств и исходных, и целевых таблиц необходимо вызвать один и тот же API с ARN подключения Glue как ResourceArn с SourceTableConfig, и ARN базы данных Glue как ResourceArn с TargetTableConfig соответственно.

См. также: документацию AWS API

Синтаксис

  create-integration-table-properties
--resource-arn <value>
--table-name <value>
[--source-table-config <value>]
[--target-table-config <value>]
[--cli-input-json | --cli-input-yaml]
[--generate-cli-skeleton <value>]
[--debug]
[--endpoint-url <value>]
[--no-verify-ssl]
[--no-paginate]
[--output <value>]
[--query <value>]
[--profile <value>]
[--region <value>]
[--version <value>]
[--color <value>]
[--no-sign-request]
[--ca-bundle <value>]
[--cli-read-timeout <value>]
[--cli-connect-timeout <value>]
[--cli-binary-format <value>]
[--no-cli-pager]
[--cli-auto-prompt]
[--no-cli-auto-prompt]

Параметры

--resource-arn (строка)

Amazon Resource Name (ARN) целевой таблицы, для которой необходимо создать свойства интегрированной таблицы. В настоящее время этот API поддерживает только создание свойств интегрированной таблицы для целевых таблиц, и предоставленный ARN должен быть ARN целевой таблицы в Glue Data Catalog. Поддержка создания свойств интегрированной таблицы для подключений источника (используя ARN подключения) пока не реализована и будет добавлена в будущей версии.

--table-name (строка)

Имя таблицы, подлежащей репликации.

--source-table-config (структура)

Структура для конфигурации исходной таблицы. См. структуру SourceTableConfig, чтобы увидеть список поддерживаемых свойств источника.

Поля -> (список)

Список полей, используемых для фильтрации на уровне столбцов. В настоящее время не поддерживается.

(строка)

FilterPredicate -> (строка)

Условие фильтрации на уровне строк. В настоящее время не поддерживается.

PrimaryKey -> (список)

Укажите набор первичных ключей для этой таблицы. В настоящее время поддерживается только для сущностей SAP EntityOf по запросу. Обратитесь в службу поддержки Amazon Web Services, чтобы активировать эту функцию.

(строка)

RecordUpdateField -> (строка)

Поле, основанное на отметке времени обновления записей. В настоящее время не поддерживается.

Сокращенный синтаксис:

Fields=string,string,FilterPredicate=string,PrimaryKey=string,string,RecordUpdateField=string

Синтаксис JSON:

{
  "Fields": ["string", ...],
  "FilterPredicate": "string",
  "PrimaryKey": ["string", ...],
  "RecordUpdateField": "string"
}

--target-table-config (структура)

Структура для конфигурации целевой таблицы.

UnnestSpec -> (строка)

Определяет, как вложенные объекты сглаживаются до элементов верхнего уровня. Допустимые значения: «TOPLEVEL», «FULL» или «NOUNNEST».

PartitionSpec -> (список)

Определяет макет файлов в целевом месте.

(структура)

Структура, описывающая, как данные разбиваются на части в целевом месте.

FieldName -> (строка)

Имя поля, используемое для разбиения данных в целевом месте. Избегайте использования столбцов, которые имеют уникальные значения для каждой строки (например, LastModifiedTimestamp, SystemModTimeStamp) в качестве столбца разбиения. Эти столбцы не подходят для разбиения, так как они создают большое количество небольших разделов, что может привести к проблемам производительности.

FunctionSpec -> (строка)

Указывает функцию, используемую для разбиения данных в целевом месте. Единственное допустимое значение для этого параметра - ‘identity’ (строка). Функция ‘identity’ гарантирует, что разбиение данных в целевом месте соответствует схеме источника. Другими словами, структура разбиения исходных данных сохраняется в целевом месте назначения.

ConversionSpec -> (строка)

Указывает формат даты и времени исходных данных. Допустимые значения:

epoch_sec - временная метка эпохи Unix в секундах
epoch_milli - временная метка эпохи Unix в миллисекундах
iso - отформатированная временная метка ISO 8601

Примечание

Указывать ConversionSpec необходимо только при использовании функций разбиения, основанных на отметках времени (год, месяц, день или час). Glue Zero-ETL использует этот параметр для правильного преобразования исходных данных в формат отметки времени перед разбиением.

Не используйте столбцы с высокой степенью изменчивости с функцией разбиения identity. Столбцы с высокой степенью изменчивости включают:

Первичные ключи
Поля даты и времени (например, LastModifiedTimestamp , CreatedDate)
Генерируемые системой отметки времени

Использование столбцов с высокой степенью изменчивости с разбиением по идентификатору создает множество небольших разделов, что может значительно снизить производительность загрузки.

TargetTableName -> (строка)

Необязательное имя целевой таблицы.

Сокращенный синтаксис:

UnnestSpec=string,PartitionSpec=[{FieldName=string,FunctionSpec=string,ConversionSpec=string},{FieldName=string,FunctionSpec=string,ConversionSpec=string}],TargetTableName=string

Синтаксис JSON:

{
  "UnnestSpec": "TOPLEVEL"|"FULL"|"NOUNNEST",
  "PartitionSpec": [
    {
      "FieldName": "string",
      "FunctionSpec": "string",
      "ConversionSpec": "string"
    }
    ...
  ],
  "TargetTableName": "string"
}

--cli-input-json | --cli-input-yaml (строка) Считывает аргументы из предоставленной строки JSON. Строка JSON соответствует формату, указанному в --generate-cli-skeleton. Если другие аргументы указаны в командной строке, эти значения переопределят значения, предоставленные в JSON. Невозможно передавать произвольные двоичные значения с помощью значения, предоставленного в JSON, так как строка будет воспринята буквально. Это не может быть указано вместе с --cli-input-yaml.

--generate-cli-skeleton (строка) Выводит каркас JSON в стандартный вывод без отправки запроса API. Если предоставлено без значения или со значением input, выводит пример входного JSON, который можно использовать в качестве аргумента для --cli-input-json. Аналогично, если предоставлено yaml-input, оно выведет пример входного YAML, который можно использовать с --cli-input-yaml. Если предоставлено значение output, проверяет входные данные команды и возвращает пример выходного JSON для этой команды. Сгенерированный каркас JSON не является стабильным между версиями AWS CLI, и нет гарантий обратной совместимости в сгенерированном каркасе JSON.

Глобальные параметры

--debug (булево)

Включить отладочную запись.

--endpoint-url (строка)

Переопределить URL по умолчанию команды заданным URL.

--no-verify-ssl (булево)

По умолчанию AWS CLI использует SSL при общении с сервисами AWS. Для каждого SSL-соединения AWS CLI будет проверять сертификаты SSL. Этот параметр переопределяет стандартное поведение проверки сертификатов SSL.

--no-paginate (булево)

Отключить автоматическую постраничную навигацию. Если автоматическая постраничная навигация отключена, AWS CLI выполнит только один вызов для первой страницы результатов.

--output (строка)

Стиль форматирования вывода команды.

json
текст
таблица
yaml
yaml-поток

--query (строка)

Запрос JMESPath для фильтрации данных ответа.

--profile (строка)

Использование определенного профиля из файла учетных данных.

--region (строка)

Использование указанного региона. Переопределяет параметры конфигурации/среды.

--version (строка)

Отображение версии этого инструмента.

--color (строка)

Включение/выключение цветного вывода.

включено
выключено
автоматически

--no-sign-request (булево)

Не подписывать запросы. Учетные данные не будут загружены, если этот аргумент указан.

--ca-bundle (строка)

Файл сертификатов CA для проверки сертификатов SSL. Переопределяет параметры конфигурации/среды.

--cli-read-timeout (целое число)

Максимальное время чтения сокета в секундах. Если значение установлено в 0, чтение сокета будет блокирующим и без таймаута. Значение по умолчанию составляет 60 секунд.

--cli-connect-timeout (целое число)

Максимальное время подключения сокета в секундах. Если значение установлено в 0, подключение сокета будет блокирующим и без таймаута. Значение по умолчанию составляет 60 секунд.

--cli-binary-format (строка)

Стиль форматирования, используемый для двоичных блоков. Формат по умолчанию - base64. Формат base64 ожидает, что двоичные блоки будут предоставлены как строка, закодированная в base64. Формат raw-in-base64-out сохраняет совместимость с поведением AWS CLI V1, а двоичные значения должны быть переданы буквально. При предоставлении содержимого из файла, которое соответствует двоичному блоку, fileb:// всегда будет обрабатываться как двоичный файл и будет использовать содержимое файла напрямую независимо от настройки cli-binary-format. При использовании file:// содержимое файла должно быть должным образом отформатировано для настроенного cli-binary-format.

base64
raw-in-base64-out

--no-cli-pager (булево)

Отключить кли-паджинатор для вывода.

--cli-auto-prompt (булево)

Автоматически запрашивать параметры ввода CLI.

--no-cli-auto-prompt (булево)

Отключить автоматическое запросы параметров ввода CLI.

Вывод

Нет