Spec-Zone.ru › TensorFlow

tf.data.experimental.table_from_dataset

Возвращает таблицу поиска, основанную на заданном наборе данных.

Просмотр псевдонимов

Псевдонимы совместимости для миграции

См. Руководство по миграции для получения дополнительных сведений.

tf.compat.v1.data.experimental.table_from_dataset

tf.data.experimental.table_from_dataset(
    dataset=None,
    num_oov_buckets=0,
    vocab_size=None,
    default_value=None,
    hasher_spec=lookup_ops.FastHashSpec,
    key_dtype=tf.dtypes.string,
    name=None
)

Эта операция строит таблицу поиска на основе заданного набора данных пар (ключ, значение).

Любое обращение к токену, отсутствующему в словаре, вернёт идентификатор корзины, основанный на его хэше, если num_oov_buckets больше нуля. В противном случае ему присваивается default_value. Диапазон идентификаторов корзины составляет [vocabulary size, vocabulary size + num_oov_buckets - 1].

Примеры использования:

keys = tf.data.Dataset.range(100)
values = tf.data.Dataset.range(100).map(
    lambda x: tf.strings.as_string(x * 2))
ds = tf.data.Dataset.zip((keys, values))
table = tf.data.experimental.table_from_dataset(
                              ds, default_value='n/a', key_dtype=tf.int64)
table.lookup(tf.constant([0, 1, 2], dtype=tf.int64)).numpy()
array([b'0', b'2', b'4'], dtype=object)
Аргументы
dataset Набор данных, содержащий пары (ключ, значение).
num_oov_buckets Количество корзин для отсутствующих токенов.
vocab_size Количество элементов в словаре, если известно.
default_value Значение, используемое для значений атрибутов, отсутствующих в словаре. По умолчанию равно -1.
hasher_spec Объект HasherSpec, определяющий функцию хеширования для назначения корзин отсутствующим токенам.
key_dtype Тип данных для key.
name Имя этой операции (необязательно).
Возвращаемое значение
Таблица поиска, основанная на заданном наборе данных.
Исключения
ValueError Если
  • dataset не содержит пар
  • Второй элемент в парах dataset имеет тип данных, несовместимый с default_value
  • num_oov_buckets отрицательное
  • vocab_size не больше нуля
  • key_dtype не целое число или строка

© 2022 The TensorFlow Authors. All rights reserved.
Licensed under the Creative Commons Attribution License 4.0.
Code samples licensed under the Apache 2.0 License.
https://www.tensorflow.org/api_docs/python/tf/data/experimental/table_from_dataset

Spec-Zone.ru

Настройки Оффлайн Что нового Помощь О нас
Spec-Zone .ru
спецификации, руководства, описания, API