Spec-Zone.ru › TensorFlow

tf.strings.unicode_encode

Кодирует каждую последовательность кодовых точек Юникода в input в строку.

Просмотр псевдонимов

Псевдонимы для миграции

См. Руководство по миграции для получения более подробной информации.

tf.compat.v1.strings.unicode_encode

tf.strings.unicode_encode(
    input,
    output_encoding,
    errors='replace',
    replacement_char=65533,
    name=None
)

Использование в ноутбуках

Используется в руководстве
  • Строки Юникода
  • Токенизация с помощью TF Text

result[i1...iN] — это строка, образованная конкатенацией кодовых точек Юникода input[1...iN, :], закодированных с помощью output_encoding.

Аргументы
input Многомерный, потенциально разрозненный целочисленный тензор с формой [D1...DN, num_chars].
output_encoding Кодировка Юникода, которая должна использоваться для кодирования каждой последовательности кодовых точек. Может быть "UTF-8", "UTF-16-BE" или "UTF-32-BE".
errors Указывает ответ при обнаружении недействительной кодовой точки (необязательно). Одно из:
* `'replace'`: Replace invalid codepoint with the
  `replacement_char`. (default)
* `'ignore'`: Skip invalid codepoints.
* `'strict'`: Raise an exception for any invalid codepoint.
replacement_char Кодовая точка символа замены, которая должна использоваться вместо любого недействительного ввода при errors='replace'. Может быть использована любая допустимая кодовая точка Юникода. Значение по умолчанию — символ замены по умолчанию для Юникода, который равен 0xFFFD (U+65533).
name Имя операции (необязательно).
Возвращаемое значение
Многомерный тензор типа string с формой [D1...DN].

Пример:

input = tf.ragged.constant(
    [[71, 246, 246, 100, 110, 105, 103, 104, 116], [128522]])
print(unicode_encode(input, 'UTF-8'))
tf.Tensor([b'G\xc3\xb6\xc3\xb6dnight' b'\xf0\x9f\x98\x8a'],
          shape=(2,), dtype=string)

© 2022 The TensorFlow Authors. All rights reserved.
Licensed under the Creative Commons Attribution License 4.0.
Code samples licensed under the Apache 2.0 License.
https://www.tensorflow.org/api_docs/python/tf/strings/unicode_encode

Spec-Zone.ru

Настройки Оффлайн Что нового Помощь О нас
Spec-Zone .ru
спецификации, руководства, описания, API