tf.keras.preprocessing.text.one_hot

Кодирует текст в виде списка индексов слов размером n.

Просмотр псевдонимов

Псевдонимы для миграции

См. Руководство по миграции для получения более подробной информации.

tf.compat.v1.keras.preprocessing.text.one_hot

tf.keras.preprocessing.text.one_hot(
    input_text, n,
    filters='!"#$%&()*+,-./:;<=>?@[\\]^_`{|}~\t\n',
    lower=True, split=' '
)

Эта функция принимает на вход строку текста и возвращает список закодированных целых чисел, каждый из которых соответствует слову (или токену) в заданной входной строке.

Аргументы
`input_text`	Текст-вход (строка).
`n`	int. Размер словаря.
`filters`	список (или конкатенация) символов для фильтрации, таких как знаки препинания. По умолчанию: '!"#$%&()*+,-./:;<=>?@[\]^_`{\|}~\t\n, включает основные знаки препинания, табуляции и новые строки.
`lower`	boolean. Необходимо ли перевести текст в нижний регистр.
`split`	str. Разделитель для разделения слов.

Возвращаемое значение
Список целых чисел в `[1, n]`. Каждое целое число кодирует слово (уникальность не гарантируется).

© 2020 The TensorFlow Authors. All rights reserved.
Licensed under the Creative Commons Attribution License 3.0.
Code samples licensed under the Apache 2.0 License.
https://www.tensorflow.org/versions/r2.4/api_docs/python/tf/keras/preprocessing/text/one_hot