update-integration-table-properties

Описание

Этот API используется для предоставления необязательных свойств переопределения для таблиц, которые необходимо дублировать. Эти свойства могут включать свойства для фильтрации и разбиения для исходных и целевых таблиц. Чтобы задать свойства как для исходной, так и для целевой таблиц, необходимо вызвать этот же API с ARN-адресом подключения Glue в качестве ResourceArn с SourceTableConfig , и ARN-адресом базы данных Glue в качестве ResourceArn с TargetTableConfig соответственно.

Переопределение будет отражено во всех интеграциях, использующих ту же ResourceArn и исходную таблицу.

См. также: Документация API AWS

Синтаксис

  update-integration-table-properties
--resource-arn <value>
--table-name <value>
[--source-table-config <value>]
[--target-table-config <value>]
[--cli-input-json | --cli-input-yaml]
[--generate-cli-skeleton <value>]
[--debug]
[--endpoint-url <value>]
[--no-verify-ssl]
[--no-paginate]
[--output <value>]
[--query <value>]
[--profile <value>]
[--region <value>]
[--version <value>]
[--color <value>]
[--no-sign-request]
[--ca-bundle <value>]
[--cli-read-timeout <value>]
[--cli-connect-timeout <value>]
[--cli-binary-format <value>]
[--no-cli-pager]
[--cli-auto-prompt]
[--no-cli-auto-prompt]

Параметры

--resource-arn (строка)

ARN-адрес подключения источника или ARN-адрес базы данных целевого объекта.

--table-name (строка)

Имя таблицы, подлежащей дублированию.

--source-table-config (структура)

Структура конфигурации исходной таблицы.

Поля -> (список)

Список полей, используемых для фильтрации на уровне столбцов. В настоящее время не поддерживается.

(строка)

FilterPredicate -> (строка)

Условие, используемое для фильтрации строк на уровне строк. В настоящее время не поддерживается.

PrimaryKey -> (список)

Укажите набор первичных ключей для этой таблицы. В настоящее время поддерживается конкретно для сущностей SAP EntityOf по запросу. Обратитесь в службу поддержки Amazon Web Services, чтобы получить доступ к этой функции.

(строка)

RecordUpdateField -> (строка)

Поле, основанное на отметке времени обновления записей. В настоящее время не поддерживается.

Сокращенный синтаксис:

Fields=string,string,FilterPredicate=string,PrimaryKey=string,string,RecordUpdateField=string

Синтаксис JSON:

{
  "Fields": ["string", ...],
  "FilterPredicate": "string",
  "PrimaryKey": ["string", ...],
  "RecordUpdateField": "string"
}

--target-table-config (структура)

Структура конфигурации целевой таблицы.

UnnestSpec -> (строка)

Указывает, как вложенные объекты сглаживаются до элементов верхнего уровня. Допустимые значения: «TOPLEVEL», «FULL» или «NOUNNEST».

PartitionSpec -> (список)

Определяет макет файлов в целевом объекте.

(структура)

Структура, описывающая, как данные разделяются по разделам в целевом объекте.

FieldName -> (строка)

Имя поля, используемого для разделения данных по разделам в целевом объекте. Избегайте использования столбцов, которые имеют уникальные значения для каждой строки (например, LastModifiedTimestamp, SystemModTimeStamp), в качестве столбца разбиения. Эти столбцы не подходят для разбиения, поскольку они создают большое количество мелких разделов, что может привести к проблемам производительности.

FunctionSpec -> (строка)

Указывает функцию, используемую для разбиения данных в целевом объекте. Единственное допустимое значение для этого параметра — ‘identity’ (строка). Функция ‘identity’ гарантирует, что разбиение данных в целевом объекте соответствует схеме источника. Другими словами, структура разбиения исходных данных сохраняется в целевом объекте.

ConversionSpec -> (строка)

Указывает формат временной метки исходных данных. Допустимые значения:

epoch_sec — временная метка эпохи Unix в секундах
epoch_milli — временная метка эпохи Unix в миллисекундах
iso — отформатированная временная метка ISO 8601

Примечание

Указывайте ConversionSpec только при использовании функций разбиения, основанных на временных метках (год, месяц, день или час). Glue Zero-ETL использует этот параметр для правильного преобразования исходных данных в формат временных меток перед разбиением.

Не используйте столбцы с высокой кардинальностью с функцией разбиения identity. Столбцы с высокой кардинальностью включают:

Первичные ключи
Поля временных меток (такие как LastModifiedTimestamp , CreatedDate )
Генерируемые системой временные метки

Использование столбцов с высокой кардинальностью с разбиением по идентичности создает множество мелких разделов, что может значительно ухудшить производительность загрузки.

TargetTableName -> (строка)

Необязательное имя целевой таблицы.

Сокращенный синтаксис:

UnnestSpec=string,PartitionSpec=[{FieldName=string,FunctionSpec=string,ConversionSpec=string},{FieldName=string,FunctionSpec=string,ConversionSpec=string}],TargetTableName=string

Синтаксис JSON:

{
  "UnnestSpec": "TOPLEVEL"|"FULL"|"NOUNNEST",
  "PartitionSpec": [
    {
      "FieldName": "string",
      "FunctionSpec": "string",
      "ConversionSpec": "string"
    }
    ...
  ],
  "TargetTableName": "string"
}

--cli-input-json | --cli-input-yaml (строка) Читает аргументы из предоставленной строки JSON. Строка JSON соответствует формату, предоставленному --generate-cli-skeleton. Если на командной строке предоставлены другие аргументы, эти значения переопределят значения, предоставленные в формате JSON. Передавать произвольные двоичные значения с помощью значения, предоставленного в формате JSON, невозможно, так как строка будет воспринята буквально. Это может не быть указано вместе с --cli-input-yaml.

--generate-cli-skeleton (строка) Выводит каркас JSON в стандартный вывод без отправки запроса API. При отсутствии значения или с значением input выводит пример входного JSON, который можно использовать в качестве аргумента для --cli-input-json. Аналогично, при указании yaml-input он выведет пример входного YAML, который можно использовать с --cli-input-yaml. При указании значения output он проверяет входные данные команды и возвращает пример выходного JSON для этой команды. Сгенерированный каркас JSON нестабилен между версиями AWS CLI, и нет гарантий обратной совместимости в сгенерированном каркасе JSON.

Глобальные параметры

--debug (логическое значение)

Включить отладочную запись журнала.

--endpoint-url (строка)

Переопределить стандартный URL команды указанным URL-адресом.

--no-verify-ssl (логическое значение)

По умолчанию AWS CLI использует SSL при общении с AWS-сервисами. Для каждого SSL-соединения AWS CLI будет проверять сертификаты SSL. Этот параметр переопределяет стандартное поведение проверки сертификатов SSL.

--no-paginate (логическое значение)

Отключить автоматическую постраничную навигацию. Если автоматическая постраничная навигация отключена, AWS CLI сделает только один вызов для первой страницы результатов.

--output (строка)

Стиль форматирования для вывода команд.

json
текст
таблица
yaml
yaml-поток

--query (строка)

Запрос JMESPath для фильтрации данных ответа.

--profile (строка)

Использовать определенный профиль из файла учетных данных.

--region (строка)

Регион для использования. Переопределяет настройки конфигурации/среды.

--version (строка)

Отобразить версию этого инструмента.

--color (строка)

Включить/выключить вывод цвета.

вкл
выкл
авто

--no-sign-request (логическое значение)

Не подписывать запросы. Учетные данные не будут загружены, если этот аргумент указан.

--ca-bundle (строка)

Файл пакета сертификатов CA для использования при проверке сертификатов SSL. Переопределяет настройки конфигурации/среды.

--cli-read-timeout (целое число)

Максимальное время чтения сокета в секундах. Если значение установлено в 0, чтение сокета будет выполняться блокирующим образом без таймаута. Значение по умолчанию составляет 60 секунд.

--cli-connect-timeout (целое число)

Максимальное время подключения сокета в секундах. Если значение установлено в 0, подключение сокета будет выполняться блокирующим образом без таймаута. Значение по умолчанию составляет 60 секунд.

--cli-binary-format (строка)

Стиль форматирования, который следует использовать для двоичных блоков. Формат по умолчанию — base64. Формат base64 предполагает, что двоичные блоки предоставляются как строка, закодированная в base64. Формат raw-in-base64-out сохраняет совместимость с поведением AWS CLI V1, и двоичные значения должны передаваться буквально. При предоставлении содержимого из файла, отображаемого как двоичный блок, fileb:// всегда будет обрабатываться как двоичный и использовать содержимое файла напрямую независимо от настройки cli-binary-format. При использовании file:// содержимое файла должно быть должным образом отформатировано для настроенного cli-binary-format.

base64
raw-in-base64-out

--no-cli-pager (логическое значение)

Отключить страницу cli для вывода.

--cli-auto-prompt (логическое значение)

Автоматически запросить параметры ввода CLI.

--no-cli-auto-prompt (логическое значение)

Отключить автоматическое запросы параметров ввода CLI.

Вывод

Нет