tf.nn.safe_embedding_lookup_sparse

Поиск результатов вложения, учитывая недопустимые идентификаторы и пустые признаки.

tf.nn.safe_embedding_lookup_sparse(
    embedding_weights, sparse_ids, sparse_weights=None, combiner='mean',
    default_id=None, max_norm=None, name=None
)

Разделенное вложение в embedding_weights должно иметь одинаковую форму, за исключением первого измерения. Первое измерение разрешено варьироваться, так как размер словаря не обязательно является кратным числу фрагментов.

Недопустимые идентификаторы (< 0) удаляются из входных идентификаторов и весов, а также любые идентификаторы с весом не больше нуля. Для записи без признаков возвращается вектор вложения для default_id, или нулевой вектор, если default_id не предоставлен.

Идентификаторы и веса могут быть многомерными. Вложения всегда агрегируются по последнему измерению.

Если len(embedding_weights) > 1, каждый элемент id из ids распределяется между элементами embedding_weights в соответствии со стратегией разделения "div", что означает, что мы назначаем идентификаторы разделам в непрерывном порядке. Например, 13 идентификаторов распределены по 5 разделам следующим образом: [[0, 1, 2], [3, 4, 5], [6, 7, 8], [9, 10], [11, 12]].

Если пространство идентификаторов не делится равномерно на число разделов, каждому из первых (max_id + 1) % len(embedding_weights) разделов будет назначен ещё один идентификатор.

Аргументы
`embedding_weights`	Единственный тензор, представляющий полный тензор вложения, или список тензоров, все с одинаковой формой, за исключением первого измерения, представляющих фрагментированные тензоры вложения, следуя стратегии разделения "div".
`sparse_ids`	`SparseTensor` формы `[d_0, d_1, ..., d_n]`, содержащий идентификаторы. `d_0` обычно является размером пакета.
`sparse_weights`	`SparseTensor` такой же формы, как `sparse_ids`, содержащий вещественные веса, соответствующие `sparse_ids`, или `None` если все веса предполагаются равными 1.0.
`combiner`	Строка, определяющая способ объединения результатов вложения для каждой записи. В настоящее время поддерживаются "mean", "sqrtn" и "sum", по умолчанию используется "mean".
`default_id`	Идентификатор, используемый для записи без признаков. По умолчанию — нулевой вектор.
`max_norm`	Если не `None`, все вложения нормализуются по l2 до max_norm перед объединением.
`name`	Имя для этой операции (необязательно).

Возвращаемое значение

Возвращаемое значение
Плотное тензорное представление объединённых вложений для разреженных идентификаторов. Для каждой строки в плотном тензоре, представленном `sparse_ids`, операция ищет вложения для всех идентификаторов в этой строке, умножает их на соответствующие веса и объединяет эти вложения, как указано. Другими словами, если `shape(combined embedding_weights) = [p0, p1, ..., pm]` и `shape(sparse_ids) = shape(sparse_weights) = [d0, d1, ..., dn]` тогда `shape(output) = [d0, d1, ... dn-1, p1, ..., pm]`. Например, если params — матрица 10x20, а sp_ids/sp_weights — [0, 0]: id 1, weight 2.0 [0, 1]: id 3, weight 0.5 [1, 0]: id -1, weight 1.0 [2, 3]: id 1, weight 3.0 `default_id` равно 0. при `combiner`="mean", то выход будет матрицей 3x20, где output[0, :] = (params[1, :] * 2.0 + params[3, :] * 0.5) / (2.0 + 0.5) output[1, :] = (params[0, :] * 1.0) / 1.0 output[2, :] = (params[1, :] * 3.0) / 3.0

Плотное тензорное представление объединённых вложений для разреженных идентификаторов. Для каждой строки в плотном тензоре, представленном sparse_ids, операция ищет вложения для всех идентификаторов в этой строке, умножает их на соответствующие веса и объединяет эти вложения, как указано.

Другими словами, если

shape(combined embedding_weights) = [p0, p1, ..., pm]

shape(sparse_ids) = shape(sparse_weights) = [d0, d1, ..., dn]

тогда

shape(output) = [d0, d1, ... dn-1, p1, ..., pm].

Например, если params — матрица 10x20, а sp_ids/sp_weights —

[0, 0]: id 1, weight 2.0
[0, 1]: id 3, weight 0.5
[1, 0]: id -1, weight 1.0
[2, 3]: id 1, weight 3.0

default_id равно 0.

при combiner="mean", то выход будет матрицей 3x20, где

output[0, :] = (params[1, :] * 2.0 + params[3, :] * 0.5) / (2.0 + 0.5)
output[1, :] = (params[0, :] * 1.0) / 1.0
output[2, :] = (params[1, :] * 3.0) / 3.0

Исключения
`ValueError`	если `embedding_weights` пусто.

© 2020 The TensorFlow Authors. All rights reserved.
Licensed under the Creative Commons Attribution License 3.0.
Code samples licensed under the Apache 2.0 License.
https://www.tensorflow.org/versions/r2.4/api_docs/python/tf/nn/safe_embedding_lookup_sparse