发明名称 分布式视频压缩感知系统中基于区域划分的重构方法
摘要 本发明公开了一种分布式视频压缩感知系统中基于区域划分的自适应重构方法,包括下列步骤:1)视频序列分割与压缩测量;2)关键帧初始重构与区域划分;3)关键帧的重构;4)CS帧初始重构与块模式判决;5)CS帧的重构;6)视频序列输出。本发明在重构中采用区域内/区域外与帧内/帧间模式相结合的方法,利用了视频帧中图像块的时空相关性和边缘结构信息,使得视频帧在测量域的信号更加稀疏,在保证压缩效率的前提下,提高了视频图像重构的质量。
申请公布号 CN103297782A 申请公布日期 2013.09.11
申请号 CN201310228285.X 申请日期 2013.06.08
申请人 河海大学常州校区 发明人 朱金秀;孟雨;张瑶;朱顺五;孟祯琪
分类号 H04N7/26(2006.01)I 主分类号 H04N7/26(2006.01)I
代理机构 南京纵横知识产权代理有限公司 32224 代理人 董建林
主权项 1.分布式视频压缩感知系统中基于区域划分的自适应重构方法,其特征是包括以下步骤:1)视频序列分割与压缩测量1a)将视频帧分为关键帧和CS帧;1b)关键帧和CS帧同时进行基于块的压缩测量,得到基于块的测量值,并传输到解码端;2)关键帧的重构2a)在解码端先对关键帧的每个块进行初始块重构,然后将重构块按照块顺序组合得到初始重构的关键帧;2b)对初始重构的关键帧利用Roberts算子进行区域提取,通过边缘检测划分区域,即将初始重构的关键帧分为帧内区域内多假设块K<sub>C1</sub>和帧内区域外多假设块K<sub>C2</sub>;2c)对于帧内区域内多假设块K<sub>C1</sub>和帧内区域外多假设块K<sub>C2</sub>分别进行自适应字典构造;2d)利用字典和当前块的信息在测量域通过求解最优化方法得到边信息块,然后将所有边信息块按照块顺序进行组合,得到边信息帧;2e)利用测量矩阵计算边信息帧的测量值,然后联合边信息帧的测量值和关键帧的测量值进行残差稀疏重构,生成残差帧;2f)将残差帧与边信息帧进行相加,得到重构的关键帧;3)CS帧的重构3a)在测量域计算当前帧与前一关键帧同位置块的相关性<img file="FDA00003322552700011.GIF" wi="241" he="86" />计算公式如下:<maths num="0001"><![CDATA[<math><mrow><mi>r</mi><mrow><mo>(</mo><msubsup><mi>y</mi><mi>B</mi><mi>cs</mi></msubsup><mo>,</mo><msubsup><mi>y</mi><mi>B</mi><mi>K</mi></msubsup><mo>)</mo></mrow><mo>=</mo><mfrac><mrow><munderover><mi>&Sigma;</mi><mrow><mi>i</mi><mo>=</mo><mn>1</mn></mrow><mi>N</mi></munderover><mo>[</mo><msubsup><mi>y</mi><mi>B</mi><mi>cs</mi></msubsup><mrow><mo>(</mo><mi>i</mi><mo>)</mo></mrow><mo>-</mo><mover><msubsup><mi>y</mi><mi>B</mi><mi>cs</mi></msubsup><mo>&OverBar;</mo></mover><mo>]</mo><mo>&CenterDot;</mo><mo>[</mo><msubsup><mi>y</mi><mi>B</mi><mi>K</mi></msubsup><mrow><mo>(</mo><mi>i</mi><mo>)</mo></mrow><mo>-</mo><mover><msubsup><mi>y</mi><mi>B</mi><mi>K</mi></msubsup><mo>&OverBar;</mo></mover><mo>]</mo></mrow><mrow><msqrt><munderover><mi>&Sigma;</mi><mrow><mi>i</mi><mo>=</mo><mn>1</mn></mrow><mi>N</mi></munderover><msup><mrow><mo>[</mo><msubsup><mi>y</mi><mi>B</mi><mi>cs</mi></msubsup><mrow><mo>(</mo><mi>i</mi><mo>)</mo></mrow><mo>-</mo><mover><msubsup><mi>y</mi><mi>B</mi><mi>cs</mi></msubsup><mo>&OverBar;</mo></mover><mo>]</mo></mrow><mn>2</mn></msup></msqrt><msqrt><munderover><mi>&Sigma;</mi><mrow><mi>i</mi><mo>=</mo><mn>1</mn></mrow><mi>N</mi></munderover><msup><mrow><mo>[</mo><msubsup><mi>y</mi><mi>B</mi><mi>K</mi></msubsup><mrow><mo>(</mo><mi>i</mi><mo>)</mo></mrow><mo>-</mo><mover><msubsup><mi>y</mi><mi>B</mi><mi>K</mi></msubsup><mo>&OverBar;</mo></mover><mo>]</mo></mrow><mn>2</mn></msup></msqrt></mrow></mfrac><mo>-</mo><mo>-</mo><mo>-</mo><mrow><mo>(</mo><mn>1</mn><mo>)</mo></mrow></mrow></math>]]></maths>其中<img file="FDA00003322552700013.GIF" wi="80" he="78" />表示当前CS块的测量值矢量,<img file="FDA00003322552700014.GIF" wi="82" he="87" />表示前一关键帧相同位置块的测量值矢量;3b)根据相关性大小对当前帧中的所有块进行块模式决策,分为两种块类型:INTRA块和INTER块,<maths num="0002"><![CDATA[<math><mrow><mi>B</mi><mo>_</mo><mi>mode</mi><mo>=</mo><mfenced open='{' close=''><mtable><mtr><mtd><mi>INTRA</mi></mtd><mtd><mi>r</mi><mrow><mo>(</mo><msubsup><mi>y</mi><mi>B</mi><mi>cs</mi></msubsup><mo>,</mo><msubsup><mi>y</mi><mi>B</mi><mi>K</mi></msubsup><mo>)</mo></mrow><mo>&lt;</mo><msub><mi>T</mi><mn>1</mn></msub></mtd></mtr><mtr><mtd><mi>INTER</mi></mtd><mtd><mi>r</mi><mrow><mo>(</mo><msubsup><mi>y</mi><mi>B</mi><mi>cs</mi></msubsup><mo>,</mo><msubsup><mi>y</mi><mi>B</mi><mi>K</mi></msubsup><mo>)</mo></mrow><mo>&GreaterEqual;</mo><msub><mi>T</mi><mn>1</mn></msub></mtd></mtr></mtable></mfenced><mo>-</mo><mo>-</mo><mo>-</mo><mrow><mo>(</mo><mn>2</mn><mo>)</mo></mrow></mrow></math>]]></maths>其中T<sub>1</sub>取为0.995,是通过实验预先设定的门限值;3c)利用基于块的投影光滑Landweber算法对所有CS块进行初始块重构,然后将重构块按照块顺序组合得到初始重构的CS帧;3d)对初始重构的CS帧利用Roberts算子进行区域提取,通过边缘检测划分区域,即将初始重构的CS帧分为帧内区域内多假设块<img file="FDA00003322552700021.GIF" wi="158" he="79" />帧内区域外多假设块<img file="FDA00003322552700022.GIF" wi="157" he="79" />帧间区域内多假设块<img file="FDA00003322552700023.GIF" wi="134" he="80" />和帧间区域外多假设块<img file="FDA00003322552700024.GIF" wi="160" he="86" />3e)对于帧内区域内多假设块<img file="FDA00003322552700025.GIF" wi="154" he="85" />帧内区域外多假设块<img file="FDA00003322552700026.GIF" wi="150" he="81" />帧内区域内自适应字典构造法和帧内区域外自适应字典构造法与关键帧的方法相同,只是参考帧由初始重构的关键帧换成了初始重构的CS帧;3f)对于帧间区域内多假设块<img file="FDA00003322552700027.GIF" wi="150" he="79" />和帧间区域外多假设块<img file="FDA00003322552700028.GIF" wi="161" he="77" />也分别进行自适应字典构造;3g)利用字典和当前块的信息在测量域通过求解最优化方法得到边信息块,然后按照块顺序进行组合生成边信息帧;3h)利用测量矩阵计算边信息帧的测量值,联合边信息帧和当前CS帧在测量域进行残差稀疏重构,生成残差帧;3i)将残差帧与边信息帧进行相加,得到重构的CS帧;4)视频序列输出4a)将重构的关键帧和CS帧按照块顺序进行帧组合,最后输出视频序列。
地址 213022 江苏省常州市晋陵北路200号