tf.contrib.image.sparse_image_warp

Деформация изображения с использованием соответствий между разреженными опорными точками.

tf.contrib.image.sparse_image_warp(
    image, source_control_point_locations, dest_control_point_locations,
    interpolation_order=2, regularization_weight=0.0, num_boundary_points=0,
    name='sparse_image_warp'
)

Применяет нелинейную деформацию изображения, где деформация задаётся исходными и конечными координатами (возможно, небольшого числа) опорных точек. Сначала, мы используем сплайн полигармонического типа (tf.contrib.image.interpolate_spline) для интерполяции смещений между соответствующими опорными точками в плотное поле потока. Затем, мы деформируем изображение, используя это плотное поле потока (tf.contrib.image.dense_image_warp).

Пусть t индексирует наши опорные точки. При regularization_weight=0, у нас есть: warped_image[b, dest_control_point_locations[b, t, 0], dest_control_point_locations[b, t, 1], :] = image[b, source_control_point_locations[b, t, 0], source_control_point_locations[b, t, 1], :].

При regularization_weight > 0, это условие выполняется приблизительно, так как регулируемая интерполяция балансирует плавность интерполянта и восстановление интерполянта в опорных точках. Смотрите tf.contrib.image.interpolate_spline для дополнительной документации по аргументам interpolation_order и regularization_weight.