一种基于场景样本库的影视图像深度提取方法

摘要

本发明公开了一种基于场景样本库的影视图像深度提取方法，主要包括：深度场景库的建立、图片特征提取、深度图片融合、前景目标深度估计、深度图整体优化五部分。本发明利用普通RGB图片之间的相似性，将已有的深度图片中深度值迁移到输入目标图片；在实际影视制作过程中，可以建立多个场景库利用相似场景中的深度图片，生成输入目标图片的深度图；在此过程中能够将人工参与的深度调整减少的最低，提高工作效率，具有准确性高，处理时间短等特点。

主权项

一种基于场景样本库的影视图像深度提取方法，包括如下步骤：(1)建立图像库；所述图像库包含有大量RGB图像及其对应的深度图，且这些RGB图像来自于多个场景；(2)对输入图像以及图像库中的RGB图像进行特征提取，以得到这些图像的GIST特征向量和光流特征向量，进而计算输入图像与图像库中每一RGB图像的相似度值；(3)从图像库中选取与输入图像相似度值最小的若干张RGB图像作为候选图片，并确保这些候选图片分别来自于各个不同的场景，进而将各候选图片对应的深度图在像素级别融合成一张深度图片U；(4)在深度图片U中恢复出前景目标，从而得到深度图片D^*；(5)使深度图片D^*作为初值对以下目标函数进行最小化求解，得到输入图像对应的深度图D；$\underset{D}{\min }\underset{i=1}{\overset{N}{\Sigma }}\{E_t\left(D_i\right)+{\mathrm{\alpha E}}_s\left(D_i\right)+{\mathrm{\beta E}}_p\left(D_i\right)\}$其中：D_i为深度图D中第i像素的深度值，E_t(D_i)为D_i对应的数据项，E_s(D_i)为D_i对应的空间平滑项，E_p(D_i)为D_i对应的图像库先验深度项，α和β均为预设的常数，i为自然数且1≤i≤N，N为深度图片D的像素总数。