tf.strings.unicode_encode
| Просмотреть исходный код на GitHub |
Кодирует каждую последовательность точек кода Юникода в input в строку.
tf.strings.unicode_encode(
input,
output_encoding,
errors='replace',
replacement_char=65533,
name=None
)
result[i1...iN] — это строка, образованная конкатенацией точек кода Юникода input[1...iN, :], закодированных с использованием output_encoding.
| Аргументы | |
|---|---|
input | Многомерный потенциально разрозненный целочисленный тензор с формой [D1...DN, num_chars]. |
output_encoding | Кодировка Юникода, которая должна использоваться для кодирования каждой последовательности точек кода. Может быть "UTF-8", "UTF-16-BE", или "UTF-32-BE". |
errors | Указывает реакцию при обнаружении недействительной точки кода (необязательно). Один из: * `'replace'`: Replace invalid codepoint with the `replacement_char`. (default) * `'ignore'`: Skip invalid codepoints. * `'strict'`: Raise an exception for any invalid codepoint. |
replacement_char | Код символа-заменителя, который будет использоваться вместо любого недействительного входного значения при errors='replace'. Можно использовать любую допустимую точку кода Юникода. Значение по умолчанию — символ замены по умолчанию Юникода, который равен 0xFFFD (U+65533). |
name | Имя операции (необязательно). |
| Возвращаемое значение | |
|---|---|
Многомерный тензор string с формой [D1...DN]. |
Пример:
input = tf.ragged.constant(
[[71, 246, 246, 100, 110, 105, 103, 104, 116], [128522]])
print(unicode_encode(input, 'UTF-8'))
tf.Tensor([b'G\xc3\xb6\xc3\xb6dnight' b'\xf0\x9f\x98\x8a'],
shape=(2,), dtype=string)
© 2022 The TensorFlow Authors. All rights reserved.
Licensed under the Creative Commons Attribution License 4.0.
Code samples licensed under the Apache 2.0 License.
https://www.tensorflow.org/versions/r2.9/api_docs/python/tf/strings/unicode_encode