视频编码中的受指导图像上采样

摘要

本发明公开了视频编码中的受指导图像上采样。编码器接收第一空间分辨率的第一图像和第二空间分辨率的第二图像，其中，所述第一图像和所述第二图像两者都表示相同场景，所述第二空间分辨率高于所述第一空间分辨率。选择滤波器以将所述第一图像上采样为具有与所述第二空间分辨率相同的空间分辨率的第三图像。通过使得所述第二图像与所述第三图像的像素值之间的误差度量（例如MSE）最小化来计算用于所述上采样滤波器的滤波系数。计算的滤波系数的集合被信传到接收机（例如，作为元数据）。解码器接收所述第一图像（或其近似）和所述元数据，并且可以使用与所述编码器推导出的相同的滤波器和优化选择的滤波系数来对所述第一图像进行上采样。

主权项

一种图像处理方法，包括：接收第一空间分辨率的第一图像和第二空间分辨率的指导图像，其中，所述第一图像和所述指导图像两者都表示相似场景，并且所述第二空间分辨率高于所述第一空间分辨率；选择滤波器以将所述第一图像尺度上推到具有等于所述第二空间分辨率的空间分辨率的第三图像；计算用于所述滤波器的滤波系数集合，其中，滤波系数的计算部分地基于使得所述指导图像与所述第三图像的像素值之间的误差度量最小化，其中，所述第一图像包括第一颜色分量和第二颜色分量，用于尺度上推所述第一图像的至少一个颜色分量的滤波器包括普通3D滤波器，其中，所述普通3D滤波器包括至少两个滤波系数集合，其中，第一滤波系数集合对所述第一图像的所述第一颜色分量操作，第二滤波系数集合对所述第一图像的所述第二颜色分量操作；以及将所述滤波系数集合发送到解码器。