tensorflow::ops::StringSplit

#include <string_ops.h>

Разделение элементов input по delimiter в SparseTensor.

Summary

Пусть N — размер исходного массива (обычно N — размер пакета). Каждый элемент input разделяется по delimiter, и возвращается SparseTensor с разделенными токенами. Пустые токены игнорируются.

delimiter может быть пустым или строкой разделительных символов. Если delimiter — пустая строка, каждый элемент input разделяется на отдельные однобайтовые строковые символы, включая разделение многобайтовых последовательностей UTF-8. В противном случае каждый символ delimiter является потенциальной точкой разделения.

Например: N = 2, input[0] — 'hello world', а input[1] — 'a b c', тогда вывод будет

indices = [0, 0; 0, 1; 1, 0; 1, 1; 1, 2] shape = [2, 3] values = ['hello', 'world', 'a', 'b', 'c']

Аргументы:

• scope: Объект Scope
• input: 1-D. Строки для разделения.
• delimiter: 0-D. Разделительные символы (байты) или пустая строка.

Дополнительные атрибуты (см. Attrs):

• skip_empty: Атрибут bool. Если True, пустые строки из результата пропускаются.

Возвращает:

• Output indices: Плотную матрицу int64, представляющую индексы разреженного тензора.
• Output values: Вектор строк, соответствующих разделенным значениям.
• Output shape: вектор длины 2 типа int64, представляющий форму разреженного тензора, где первое значение — N, а второе — максимальное количество токенов в одном элементе входных данных.

Публичные атрибуты

::tensorflow::Output indices

Operation operation

::tensorflow::Output shape

::tensorflow::Output values

Публичные функции

 StringSplit(
  const ::tensorflow::Scope & scope,
  ::tensorflow::Input input,
  ::tensorflow::Input delimiter
)

 StringSplit(
  const ::tensorflow::Scope & scope,
  ::tensorflow::Input input,
  ::tensorflow::Input delimiter,
  const StringSplit::Attrs & attrs
)

Публичные статические функции

Attrs SkipEmpty(
  bool x
)