tensorflow::ops::StringSplit

#include <string_ops.h>

Разделить элементы input по delimiter в SparseTensor.

Краткое описание

Пусть N — размер входных данных (обычно N — размер пакета). Разделить каждый элемент input по delimiter и вернуть SparseTensor, содержащий разделенные токены. Пустые токены игнорируются.

delimiter может быть пустым или строкой разделительных символов. Если delimiter пустая строка, каждый элемент input разбивается на отдельные однобайтовые символьные строки, включая разделение многобайтовых последовательностей UTF-8. В противном случае каждый символ delimiter является потенциальной точкой разделения.

Например: N = 2, input[0] — 'hello world', input[1] — 'a b c', тогда результат будет

indices = [0, 0; 0, 1; 1, 0; 1, 1; 1, 2] shape = [2, 3] values = ['hello', 'world', 'a', 'b', 'c']

Аргументы:

• scope: Объект Scope
• input: 1-D. Строки для разделения.
• delimiter: 0-D. Разделительные символы (байты) или пустая строка.

Необязательные атрибуты (см. Attrs):

• skip_empty: Атрибут bool. Если True, пропустить пустые строки из результата.

Возвращает:

• Output indices: Прямоугольная матрица int64, представляющая индексы разреженного тензора.
• Output values: Вектор строк, соответствующих разделенным значениям.
• Output shape: Вектор длиной 2 из int64, представляющий форму разреженного тензора, где первое значение — N, а второе — максимальное количество токенов в одном элементе входных данных.

Общедоступные атрибуты

::tensorflow::Output indices

Operation operation

::tensorflow::Output shape

::tensorflow::Output values

Общедоступные функции

 StringSplit(
  const ::tensorflow::Scope & scope,
  ::tensorflow::Input input,
  ::tensorflow::Input delimiter
)

 StringSplit(
  const ::tensorflow::Scope & scope,
  ::tensorflow::Input input,
  ::tensorflow::Input delimiter,
  const StringSplit::Attrs & attrs
)

Общедоступные статические функции

Attrs SkipEmpty(
  bool x
)