tf.compat.v1.keras.layers.LSTMCell
Класс ячейки для слоя LSTM.
Унаследован от: Layer
tf.compat.v1.keras.layers.LSTMCell(
units, activation='tanh', recurrent_activation='hard_sigmoid', use_bias=True,
kernel_initializer='glorot_uniform', recurrent_initializer='orthogonal',
bias_initializer='zeros', unit_forget_bias=True, kernel_regularizer=None,
recurrent_regularizer=None, bias_regularizer=None, kernel_constraint=None,
recurrent_constraint=None, bias_constraint=None, dropout=0.0,
recurrent_dropout=0.0, implementation=1, **kwargs
)
| Аргументы | |
|---|---|
units | Положительное целое число, размерность выходного пространства. |
activation | Функция активации для использования. По умолчанию: гиперболический тангенс (tanh). Если вы передадите None, активация не применяется (т.е. используется линейная активация: a(x) = x). |
recurrent_activation | Функция активации для использования на рекуррентном шаге. По умолчанию: жёсткий сигмоид (hard_sigmoid). Если вы передадите None, активация не применяется (т.е. используется линейная активация: a(x) = x). |
use_bias | Булево значение, использует ли слой вектор смещения. |
kernel_initializer | Инициализатор матрицы весов kernel, используемой для линейного преобразования входных данных. |
recurrent_initializer | Инициализатор матрицы весов recurrent_kernel, используемой для линейного преобразования рекуррентного состояния. |
bias_initializer | Инициализатор вектора смещения. |
unit_forget_bias | Булево значение. Если True, к смещению забывающего воротника добавляется 1 при инициализации. Установка в значение true также принудительно установит bias_initializer="zeros". Это рекомендуется в Jozefowicz et al., 2015 |
kernel_regularizer | Функция регуляризации, применяемая к матрице весов kernel. |
recurrent_regularizer | Функция регуляризации, применяемая к матрице весов recurrent_kernel. |
bias_regularizer | Функция регуляризации, применяемая к вектору смещения. |
kernel_constraint | Функция ограничения, применяемая к матрице весов kernel. |
recurrent_constraint | Функция ограничения, применяемая к матрице весов recurrent_kernel. |
bias_constraint | Функция ограничения, применяемая к вектору смещения. |
dropout | Вещественное число от 0 до 1. Доля единиц, которые необходимо выбросить для линейного преобразования входных данных. |
recurrent_dropout | Вещественное число от 0 до 1. Доля единиц, которые необходимо выбросить для линейного преобразования рекуррентного состояния. |
implementation | Режим реализации, либо 1, либо 2. Режим 1 структурирует свои операции как большее количество меньших скалярных произведений и сложений, тогда как режим 2 объединяет их в меньшее количество больших операций. Эти режимы будут иметь различные характеристики производительности на различных аппаратных средствах и для различных применений. |
Аргументы вызова:
-
inputs: 2-мерный тензор. -
states: Список тензоров состояния, соответствующих предыдущему шагу времени. -
training: Булево значение Python, указывающее, должен ли слой вести себя в режиме обучения или в режиме вывода. Актуально только при использованииdropoutилиrecurrent_dropout.
Методы
get_dropout_mask_for_cell
get_dropout_mask_for_cell(
inputs, training, count=1
)
Получить маску дропаута для входных данных ячейки RNN.
Она создаст маску на основе контекста, если нет кэшированной маски. Если генерируется новая маска, она обновит кэш в ячейке.
| Аргументы | |
|---|---|
inputs | Входной тензор, форма которого будет использоваться для генерации маски дропаута. |
training | Булевой тензор, находится ли он в режиме обучения, дропаут будет проигнорирован в режиме, отличном от обучения. |
count | Целое число, сколько масок дропаута будет сгенерировано. Это полезно для ячеек, у которых внутренние веса объединены вместе. |
| Возвращаемое значение | |
|---|---|
| Список тензоров масок, сгенерированных или кэшированных на основе контекста. |
get_initial_state
get_initial_state(
inputs=None, batch_size=None, dtype=None
)
get_recurrent_dropout_mask_for_cell
get_recurrent_dropout_mask_for_cell(
inputs, training, count=1
)
Получить маску рекуррентного дропаута для ячейки RNN.
Она создаст маску на основе контекста, если нет кэшированной маски. Если генерируется новая маска, она обновит кэш в ячейке.
| Аргументы | |
|---|---|
inputs | Входной тензор, форма которого будет использоваться для генерации маски дропаута. |
training | Булевой тензор, находится ли он в режиме обучения, дропаут будет проигнорирован в режиме, отличном от обучения. |
count | Целое число, сколько масок дропаута будет сгенерировано. Это полезно для ячеек, у которых внутренние веса объединены вместе. |
| Возвращаемое значение | |
|---|---|
| Список тензоров масок, сгенерированных или кэшированных на основе контекста. |
reset_dropout_mask
reset_dropout_mask()
Сбросить кэшированные маски дропаута, если они есть.
Это важно для слоя RNN, чтобы вызвать это в его методе call(), чтобы кэшированная маска была очищена перед вызовом cell.call(). Маска должна быть кэширована на протяжении шага времени в рамках той же партии, но не должна кэшироваться между партиями. В противном случае это введёт необоснованное смещение против определённого индекса данных в пределах партии.
reset_recurrent_dropout_mask
reset_recurrent_dropout_mask()
Сбросить кэшированные маски рекуррентного дропаута, если они есть.
Это важно для слоя RNN, чтобы вызвать это в его методе call(), чтобы кэшированная маска была очищена перед вызовом cell.call(). Маска должна быть кэширована на протяжении шага времени в рамках той же партии, но не должна кэшироваться между партиями. В противном случае это введёт необоснованное смещение против определённого индекса данных в пределах партии.
© 2020 The TensorFlow Authors. All rights reserved.
Licensed under the Creative Commons Attribution License 3.0.
Code samples licensed under the Apache 2.0 License.
https://www.tensorflow.org/versions/r2.3/api_docs/python/tf/compat/v1/keras/layers/LSTMCell