Модуль: tf.compat.v2.keras.preprocessing.text

Утилиты для предобработки текстового ввода.

Классы

class Tokenizer: Класс утилиты для токенизации текста.

Функции

hashing_trick(...): Преобразует текст в последовательность индексов в пространстве хеширования фиксированного размера.

one_hot(...): Преобразует текст в список индексов слов размера n методом one-hot кодирования.

text_to_word_sequence(...): Преобразует текст в последовательность слов (или токенов).