Spec-Zone.ru › TensorFlow

tf.strings.unicode_encode

Кодирует каждую последовательность кодовых точек Unicode из input в строку.

Просмотреть псевдонимы

Псевдонимы совместимости для миграции

Подробнее см. в руководстве по миграции.

tf.compat.v1.strings.unicode_encode

tf.strings.unicode_encode(
    input,
    output_encoding,
    errors='replace',
    replacement_char=65533,
    name=None
)

Используется в блокнотах

Используется в руководстве
  • Строки Unicode
  • Токенизация с помощью TF Text

result[i1...iN] — это строка, полученная конкатенацией кодовых точек Unicode input[1...iN, :] и закодированная с использованием output_encoding.

Аргументы
input Целочисленный тензор размерности N+1, потенциально с неоднородной структурой, с формой [D1...DN, num_chars].
output_encoding Кодировка Unicode, используемая для кодирования каждой последовательности кодовых точек. Может быть "UTF-8", "UTF-16-BE" или "UTF-32-BE".
errors Определяет реакцию при обнаружении недопустимой кодовой точки (необязательно). Одно из значений:
* `'replace'`: Replace invalid codepoint with the
  `replacement_char`. (default)
* `'ignore'`: Skip invalid codepoints.
* `'strict'`: Raise an exception for any invalid codepoint.
replacement_char Кодовая точка символа замены, используемая вместо любых недопустимых входных данных при errors='replace'. Можно использовать любую допустимую кодовую точку Unicode. По умолчанию используется стандартный символ замены Unicode — 0xFFFD (U+65533).
name Имя операции (необязательно).
Возвращаемое значение
Тензор N размерности string с формой [D1...DN].

Пример:

input = tf.ragged.constant(
    [[71, 246, 246, 100, 110, 105, 103, 104, 116], [128522]])
print(unicode_encode(input, 'UTF-8'))
tf.Tensor([b'G\xc3\xb6\xc3\xb6dnight' b'\xf0\x9f\x98\x8a'],
          shape=(2,), dtype=string)

© 2022 The TensorFlow Authors. All rights reserved.
Licensed under the Creative Commons Attribution License 4.0.
Code samples licensed under the Apache 2.0 License.
https://www.tensorflow.org/api_docs/python/tf/strings/unicode_encode

Spec-Zone.ru

Настройки Оффлайн Что нового Помощь О нас
Spec-Zone .ru
спецификации, руководства, описания, API