发明名称 自由视点视频深度图失真预测方法和编码方法
摘要 一种自由视点视频深度图失真预测方法及编码方法,包括:对于多视点立体视频序列给定视点的给定帧的用作空洞填补合成的待编码图块,输入已完成编码的纹理图块、采用预选的编码模式试编码的深度图块、相应原始纹理图块及原始深度图块;输入待编码图块的合并权重矩阵,其标记了利用左右视点纹理图获得合成视点纹理时的合并权重;计算利用深度图块中的像素点完成映射、空洞填补合成后得到的合成纹理的失真,将其作为合成视点失真的预测值;将待编码图块各像素的失真预测值求和,得到编码待编码图块造成的合成视点失真预测值。该方法能够准确预测深度图块的编码失真,同时避免反复执行合成视图算法,极大地降低计算复杂度。
申请公布号 CN103873867B 申请公布日期 2017.01.25
申请号 CN201410128188.8 申请日期 2014.03.31
申请人 清华大学深圳研究生院 发明人 金欣;李晨阳;戴琼海
分类号 H04N19/154(2014.01)I;H04N19/597(2014.01)I;H04N19/176(2014.01)I;H04N13/00(2006.01)I 主分类号 H04N19/154(2014.01)I
代理机构 深圳新创友知识产权代理有限公司 44223 代理人 王震宇
主权项 一种自由视点视频深度图失真预测方法,其特征在于,所述方法包括:A1:对于多视点立体视频序列给定视点的给定帧的用作空洞填补合成的待编码图块,输入已完成编码的纹理图块T<sub>c</sub>、采用预选的编码模式试编码的深度图块d<sub>c</sub>、相应原始纹理图块T<sub>o</sub>及原始深度图块d<sub>o</sub>;A2:输入所述待编码图块的合并权重矩阵W,合并权重矩阵W标记了分别利用左右视点纹理图获得合成视点纹理时的合并权重;A3:计算利用深度图块d<sub>c</sub>中的像素点d<sub>c,n</sub>完成映射、空洞填补合成后得到的合成纹理的失真D<sub>vs,n</sub>,将所述失真D<sub>vs,n</sub>作为像素点d<sub>c,n</sub>造成的合成视点失真的预测值;A4:将待编码图块各像素的失真预测值求和,得到编码所述待编码图块造成的合成视点失真预测值;所述步骤A3中,对于步骤A1获取的d<sub>c</sub>中的像素点d<sub>c,n</sub>及其相邻像素点d<sub>c,n+1</sub>,计算利用像素点d<sub>c,n</sub>及d<sub>c,n+1</sub>进行空洞填补的合成视点纹理失真预测值D<sub>vs,n</sub>,计算方式如下,<img file="FDA0001084915140000011.GIF" wi="1738" he="83" /><img file="FDA0001084915140000012.GIF" wi="1758" he="147" /><img file="FDA0001084915140000013.GIF" wi="1767" he="179" />D<sub>vs,n</sub>=(D<sub>vs,n,basic</sub>+D<sub>vs,nleft</sub>+D<sub>vs,n,right</sub>)W<sub>n</sub><sup>2</sup>         (4)其中,D<sub>vs,n,basic</sub>为由于纹理失真造成的空洞填补合成纹理失真,D<sub>vs,n,left</sub>为由于d<sub>o,n</sub>编码为d<sub>c,n</sub>造成的空洞填补合成纹理失真,D<sub>vs,n,left</sub>为由于d<sub>o,n+1</sub>编码为d<sub>c,n+1</sub>造成的空洞填补合成纹理失真,d<sub>o,n</sub>及d<sub>o,n+1</sub>分别为d<sub>c,n</sub>及d<sub>c,n+1</sub>在原始深度图块中的对应像素,x<sub>o,n</sub>及x<sub>o,n+1</sub>为图块中深度图像素n及相邻像素n+1的对应纹理根据未编码的深度图块d<sub>o,n</sub>映射到合成视点中的位置,x<sub>c,n</sub>及x<sub>c,n+1</sub>为待编码视点深度图像素n及相邻像素n+1的对应纹理根据试编码的深度图d<sub>c,n</sub>映射到合成视点中的位置,T<sub>o,n</sub>及T<sub>o,n+1</sub>为待编码视点深度图像素n及相邻像素n+1对应在T<sub>o</sub>中的纹理值,T<sub>c,n</sub>及T<sub>c,n+1</sub>为待编码视点深度图像素n及相邻像素n+1对应在T<sub>c</sub>中的纹理值,W<sub>n</sub>为合并权重,<img file="FDA0001084915140000014.GIF" wi="162" he="83" />和<img file="FDA0001084915140000015.GIF" wi="115" he="79" />分别为x<sub>c,n+1</sub>和x<sub>c,n</sub>的上取整,<img file="FDA0001084915140000016.GIF" wi="167" he="77" />和<img file="FDA0001084915140000017.GIF" wi="116" he="73" />分别为x<sub>o,n+1</sub>和x<sub>o,n</sub>的上取整。
地址 518055 广东省深圳市南山区西丽大学城清华校区