tensorflow::ops::StringSplit

#include <string_ops.h>

Разделить элементы input по delimiter в SparseTensor.

Краткое описание

Пусть N — размер исходного массива (обычно N — размер пакета). Разделить каждый элемент input по delimiter и вернуть SparseTensor, содержащий разделительные токены. Пустые токены игнорируются.

delimiter может быть пустым или содержать строку разделителей. Если delimiter — пустая строка, каждый элемент input разделяется на отдельные символы, включая разбиение многобайтовых последовательностей UTF-8. В противном случае каждый символ delimiter является потенциальной точкой разбиения.

Например: N = 2, input[0] — 'hello world', input[1] — 'a b c', тогда вывод будет

indices = [0, 0; 0, 1; 1, 0; 1, 1; 1, 2] shape = [2, 3] values = ['hello', 'world', 'a', 'b', 'c']

Аргументы:

• scope: Объект Scope
• input: 1-D. Строки для разделения.
• delimiter: 0-D. Разделительные символы (байты) или пустая строка.

Необязательные атрибуты (см. Attrs):

• skip_empty: Атрибут bool. Если True, пропустить пустые строки из результата.

Возвращает:

• Output indices: Плотную матрицу int64, представляющую индексы разреженного тензора.
• Output values: Вектор строк, соответствующий разделенным значениям.
• Output shape: Вектор длины 2 из int64, представляющий форму разреженного тензора, где первое значение — N, а второе — максимальное количество токенов в одном входном элементе.

Общедоступные атрибуты

::tensorflow::Output indices

Operation operation

::tensorflow::Output shape

::tensorflow::Output values

Общедоступные функции

 StringSplit(
  const ::tensorflow::Scope & scope,
  ::tensorflow::Input input,
  ::tensorflow::Input delimiter
)

 StringSplit(
  const ::tensorflow::Scope & scope,
  ::tensorflow::Input input,
  ::tensorflow::Input delimiter,
  const StringSplit::Attrs & attrs
)

Общедоступные статические функции

Attrs SkipEmpty(
  bool x
)