tensorflow::ops::StringNGrams

#include <string_ops.h>

Создаёт n-граммы из разрозненных строковых данных.

Краткое описание

Этот оператор принимает разрозненный тензор с 1 разрозненной размерностью, содержащей только строки, и выводит разрозненный тензор с 1 разрозненной размерностью, содержащей n-граммы этих строк, соединённые вдоль самой внутренней оси.

Аргументы:

• scope: Объект Scope
• data: Тензор значений разрозненного строкового тензора, из которого нужно создать n-граммы. Должен быть 1D строковым тензором.
• data_splits: Тензор разбиений разрозненного строкового тензора, из которого нужно создать n-граммы.
• separator: Строка для добавления между элементами токена. Используйте "" для отсутствия разделителя.
• ngram_widths: Размеры n-грамм, которые нужно создать.
• left_pad: Строка для заполнения левой стороны последовательности n-грамм. Используется только если pad_width != 0.
• right_pad: Строка для заполнения правой стороны последовательности n-грамм. Используется только если pad_width != 0.
• pad_width: Количество элементов заполнения для добавления с каждой стороны каждой последовательности. Обратите внимание, что заполнение никогда не будет больше, чем 'ngram_widths'-1 независимо от этого значения. Если pad_width=-1, тогда добавьте max(ngram_widths)-1 элементов.

Возвращает:

• Output ngrams: Тензор значений выходного разрозненного тензора n-грамм.
• Output ngrams_splits: Тензор разбиений выходного разрозненного тензора n-грамм.

Общедоступные атрибуты

::tensorflow::Output ngrams

::tensorflow::Output ngrams_splits

Operation operation

Общедоступные функции

 StringNGrams(
  const ::tensorflow::Scope & scope,
  ::tensorflow::Input data,
  ::tensorflow::Input data_splits,
  StringPiece separator,
  const gtl::ArraySlice< int > & ngram_widths,
  StringPiece left_pad,
  StringPiece right_pad,
  int64 pad_width,
  bool preserve_short_sequences
)