tensorflow::ops::StringSplit

#include <string_ops.h>

Разделить элементы input по delimiter в SparseTensor.

Summary

Пусть N — размер исходного массива (обычно N будет размером пакета). Разделите каждый элемент input по delimiter и верните SparseTensor, содержащий разделенные токены. Пустые токены игнорируются.

delimiter может быть пустым или содержать строку символов разделителей. Если delimiter пустая строка, каждый элемент input разделится на отдельные однобайтовые строковые символы, включая разделение многобайтовых последовательностей UTF-8. В противном случае каждый символ delimiter является потенциальной точкой раздела.

Например: N = 2, input[0] — 'hello world', input[1] — 'a b c', тогда результат будет

indices = [0, 0; 0, 1; 1, 0; 1, 1; 1, 2] shape = [2, 3] values = ['hello', 'world', 'a', 'b', 'c']

Аргументы:

• scope: Объект Scope
• input: 1-D. Строки для разделения.
• delimiter: 0-D. Символы-разделители (байты) или пустая строка.

Необязательные атрибуты (см. Attrs):

• skip_empty: A bool. Если True, пропустить пустые строки из результата.

Возвращаемые значения:

• Output indices: Плотная матрица int64, представляющая индексы разреженного тензора.
• Output values: Вектор строк, соответствующих разделенным значениям.
• Output shape: Вектор длины 2 типа int64, представляющий форму разреженного тензора, где первое значение — N, а второе — максимальное количество токенов в одном элементе входных данных.

Общедоступные атрибуты

::tensorflow::Output indices

Operation operation

::tensorflow::Output shape

::tensorflow::Output values

Общедоступные функции

 StringSplit(
  const ::tensorflow::Scope & scope,
  ::tensorflow::Input input,
  ::tensorflow::Input delimiter
)

 StringSplit(
  const ::tensorflow::Scope & scope,
  ::tensorflow::Input input,
  ::tensorflow::Input delimiter,
  const StringSplit::Attrs & attrs
)

Общедоступные статические функции

Attrs SkipEmpty(
  bool x
)