tf.signal.frame

Расширяет размерность signal в кадры размером frame_length.

tf.signal.frame(
    signal,
    frame_length,
    frame_step,
    pad_end=False,
    pad_value=0,
    axis=-1,
    name=None
)

Проводит окно размером frame_length по размерности signal с шагом frame_step, заменяя размерность axis на [frames, frame_length] кадров.

Если pad_end равно True, позиции окна, которые выходят за пределы размерности axis, заполняются значениями pad_value, пока окно полностью не выйдет за пределы размерности. В противном случае генерируются только позиции окна, которые полностью перекрывают размерность axis.

Например:

# A batch size 3 tensor of 9152 audio samples.
audio = tf.random.normal([3, 9152])

# Compute overlapping frames of length 512 with a step of 180 (frames overlap
# by 332 samples). By default, only 49 frames are generated since a frame
# with start position j*180 for j > 48 would overhang the end.
frames = tf.signal.frame(audio, 512, 180)
frames.shape.assert_is_compatible_with([3, 49, 512])

# When pad_end is enabled, the final two frames are kept (padded with zeros).
frames = tf.signal.frame(audio, 512, 180, pad_end=True)
frames.shape.assert_is_compatible_with([3, 51, 512])

Если размерность по axis равна N, и pad_end=False, количество кадров может быть вычислено следующим образом:

num_frames = 1 + (N - frame_size) // frame_step

Если pad_end=True, количество кадров может быть вычислено следующим образом:

num_frames = -(-N // frame_step) # ceiling division