Spec-Zone.ru › PyTorch 1

ConvTranspose3d

class torch.nn.ConvTranspose3d(in_channels, out_channels, kernel_size, stride=1, padding=0, output_padding=0, groups=1, bias=True, dilation=1, padding_mode='zeros', device=None, dtype=None) [source]

Применяет оператор 3D транспонированной свёртки к входному изображению, состоящему из нескольких входных плоскостей. Оператор транспонированной свёртки поэлементно умножает каждое входное значение на обучаемый ядро и суммирует выходы от всех входных плоскостей признаков.

Этот модуль можно рассматривать как градиент Conv3d относительно его входа. Он также известен как свёртка с дробной длиной шага или деконволюция (хотя это не фактическая операция деконволюции, так как она не вычисляет истинное обратное преобразование свёртки). Для получения более подробной информации см. визуализации здесь и статью Deconvolutional Networks.

Этот модуль поддерживает TensorFloat32.

На некоторых устройствах ROCm при использовании входных данных с плавающей запятой 16 бит этот модуль будет использовать разную точность для обратного прохода.

  • stride определяет шаг для кросс-корреляции.
  • padding определяет количество неявного нулевого заполнения с обеих сторон для dilation * (kernel_size - 1) - padding количества точек. Подробности см. в примечании ниже.
  • output_padding определяет дополнительный размер, добавляемый к одной стороне выходной формы. Подробности см. в примечании ниже.
  • dilation определяет расстояние между точками ядра; также известен как алгоритм à trous. Его сложнее описать, но ссылка здесь содержит хорошую визуализацию того, что dilation делает.
  • groups управляет соединениями между входами и выходами. in_channels и out_channels должны быть кратными groups. Например,

    • При groups=1 все входные данные свёртываются ко всем выходным данным.
    • При groups=2 операция становится эквивалентной двум слоям свёртки, расположенным бок о бок, каждый из которых видит половину входных каналов и генерирует половину выходных каналов, а затем оба объединяются.
    • При groups= in_channels, каждый входной канал свёртывается с собственным набором фильтров (размера out_channelsin_channels\frac{\text{out\_channels}}{\text{in\_channels}}).

Параметры kernel_size, stride, padding, output_padding могут быть:

  • одним int — в этом случае одно и то же значение используется для измерений глубины, высоты и ширины
  • кортежем из трёх целых чисел — в этом случае первое int используется для измерения глубины, второе int для измерения высоты, и третье int для измерения ширины

Примечание

Аргумент padding эффективно добавляет dilation * (kernel_size - 1) - padding нулевого заполнения к обеим сторонам входных данных. Это делается для того, чтобы при инициализации Conv3d и ConvTranspose3d с одинаковыми параметрами, они были взаимно обратными по отношению к входным и выходным формам. Однако, когда stride > 1, Conv3d отображает несколько входных форм на одну и ту же выходную форму. output_padding предоставлено, чтобы разрешить эту неоднозначность, фактически увеличивая вычисленную выходную форму с одной стороны. Обратите внимание, что output_padding используется только для определения выходной формы, но фактически не добавляет нулевое заполнение к выходу.

Примечание

В некоторых случаях, когда заданы тензоры на устройстве CUDA и используется CuDNN, этот оператор может выбрать недетерминированный алгоритм для повышения производительности. Если это нежелательно, вы можете попытаться сделать операцию детерминированной (возможно, с затратами на производительность) путём установки torch.backends.cudnn.deterministic = True. См. Воспроизводимость для получения дополнительной информации.

Параметры:
  • in_channels (int) – Количество каналов в входном изображении
  • out_channels (int) – Количество каналов, полученных в результате свёртки
  • kernel_size (int или кортеж) – Размер свёртки
  • stride (int или кортеж, необязательно) – Шаг свёртки. По умолчанию: 1
  • padding (int или кортеж, необязательно) – dilation * (kernel_size - 1) - padding нулевое заполнение будет добавлено к обеим сторонам каждого измерения во входных данных. По умолчанию: 0
  • output_padding (int или кортеж, необязательно) – Дополнительный размер, добавляемый к одной стороне каждого измерения в выходной форме. По умолчанию: 0
  • groups (int, необязательно) – Количество блоков соединений от входных каналов к выходным каналам. По умолчанию: 1
  • bias (bool, необязательно) – Если True, добавляет обучаемый смещение к выходу. По умолчанию: True
  • dilation (int или кортеж, необязательно) – Расстояние между элементами ядра. По умолчанию: 1
Форма:
  • Вход: (N,Cin,Din,Hin,Win)(N, C_{in}, D_{in}, H_{in}, W_{in}) или (Cin,Din,Hin,Win)(C_{in}, D_{in}, H_{in}, W_{in})
  • Выход: (N,Cout,Dout,Hout,Wout)(N, C_{out}, D_{out}, H_{out}, W_{out}) или (Cout,Dout,Hout,Wout)(C_{out}, D_{out}, H_{out}, W_{out}), где
Dout=(Din−1)×stride[0]−2×padding[0]+dilation[0]×(kernel_size[0]−1)+output_padding[0]+1D_{out} = (D_{in} - 1) \times \text{stride}[0] - 2 \times \text{padding}[0] + \text{dilation}[0] \times (\text{kernel\_size}[0] - 1) + \text{output\_padding}[0] + 1
Hout=(Hin−1)×stride[1]−2×padding[1]+dilation[1]×(kernel_size[1]−1)+output_padding[1]+1H_{out} = (H_{in} - 1) \times \text{stride}[1] - 2 \times \text{padding}[1] + \text{dilation}[1] \times (\text{kernel\_size}[1] - 1) + \text{output\_padding}[1] + 1
Wout=(Win−1)×stride[2]−2×padding[2]+dilation[2]×(kernel_size[2]−1)+output_padding[2]+1W_{out} = (W_{in} - 1) \times \text{stride}[2] - 2 \times \text{padding}[2] + \text{dilation}[2] \times (\text{kernel\_size}[2] - 1) + \text{output\_padding}[2] + 1
Переменные:
  • weight (Тензор) – обучаемые веса модуля формы (in_channels,out_channelsgroups,(\text{in\_channels}, \frac{\text{out\_channels}}{\text{groups}}, kernel_size[0],kernel_size[1],kernel_size[2])\text{kernel\_size[0]}, \text{kernel\_size[1]}, \text{kernel\_size[2]}). Значения этих весов выбираются из U(−k,k)\mathcal{U}(-\sqrt{k}, \sqrt{k}), где k=groupsCout∗∏i=02kernel_size[i]k = \frac{groups}{C_\text{out} * \prod_{i=0}^{2}\text{kernel\_size}[i]}
  • bias (Тензор) – обучаемый сдвиг модуля формы (out_channels) Если bias True, то значения этих весов выбираются из U(−k,k)\mathcal{U}(-\sqrt{k}, \sqrt{k}) где k=groupsCout∗∏i=02kernel_size[i]k = \frac{groups}{C_\text{out} * \prod_{i=0}^{2}\text{kernel\_size}[i]}

Примеры:

>>> # With square kernels and equal stride
>>> m = nn.ConvTranspose3d(16, 33, 3, stride=2)
>>> # non-square kernels and unequal stride and with padding
>>> m = nn.ConvTranspose3d(16, 33, (3, 5, 2), stride=(2, 1, 1), padding=(0, 4, 2))
>>> input = torch.randn(20, 16, 10, 50, 100)
>>> output = m(input)

© 2024, PyTorch Contributors
PyTorch has a BSD-style license, as found in the LICENSE file.
https://pytorch.org/docs/1.13/generated/torch.nn.ConvTranspose3d.html

Spec-Zone.ru

Настройки Оффлайн Что нового Помощь О нас
Spec-Zone .ru
спецификации, руководства, описания, API