tf.raw_ops.StringNGrams
Создаёт ngram из данных разрозненных строк.
tf.raw_ops.StringNGrams(
data, data_splits, separator, ngram_widths, left_pad, right_pad, pad_width,
preserve_short_sequences, name=None
)
Этот оператор принимает разрозненный тензор с 1 разрозненным измерением, содержащим только строки, и возвращает разрозненный тензор с 1 разрозненным измерением, содержащим ngram этой строки, соединённые вдоль внутреннего осей.
| Аргументы | |
|---|---|
data | A Tensor типа string. Тензор значений разрозненного тензора строк, из которого необходимо создать ngram. Должен быть одномерным тензором строк. |
data_splits | A Tensor. Должен быть одного из следующих типов: int32, int64. Тензор разбиений разрозненного тензора строк, из которого необходимо создать ngram. |
separator | A string. Строка, добавляемая между элементами токена. Используйте "" для отсутствия разделителя. |
ngram_widths | Список ints. Размеры ngram, которые нужно создать. |
left_pad | A string. Строка, используемая для заполнения левой стороны последовательности ngram. Используется только если pad_width != 0. |
right_pad | A string. Строка, используемая для заполнения правой стороны последовательности ngram. Используется только если pad_width != 0. |
pad_width | A int. Количество элементов заполнения, добавляемых к каждой стороне каждой последовательности. Обратите внимание, что заполнение никогда не будет больше, чем 'ngram_widths'-1 независимо от этого значения. Если pad_width=-1, то добавляется max(ngram_widths)-1 элементов. |
preserve_short_sequences | A bool. |
name | Имя операции (необязательно). |
| Возвращаемые значения | |
|---|---|
Кортеж объектов Tensor (ngrams, ngrams_splits). | |
ngrams | A Tensor типа string. |
ngrams_splits | A Tensor. Имеет тот же тип, что и data_splits. |
© 2020 The TensorFlow Authors. All rights reserved.
Licensed under the Creative Commons Attribution License 3.0.
Code samples licensed under the Apache 2.0 License.
https://www.tensorflow.org/versions/r2.3/api_docs/python/tf/raw_ops/StringNGrams
