基于全景图拼接的视频编辑方法

摘要

本发明公开了一种基于全景图拼接的视频编辑方法。用于对一段运动视频序列的编辑或者修复。该方法首先对视频序列各帧图像进行特征点匹配，计算出各帧之间的投影矩阵，然后对各帧图像进行拼接，得到视频全景图；根据视频编辑的具体要求，利用人工交互和计算机相结合的方法对视频全景图进行图像编辑；最后根据投影关系，从编辑后的全景图中恢复出视频序列。本发明通过以视频全景图为中介，将视频编辑简化成为对视频全景图的图像编辑，不仅可使使用者直观地了解全部场景的信息，还能够大大减少计算量和人工交互。

主权项

1、一种基于全景图拼接的视频编辑方法，其特征在于，该方法的步骤如下：1)用多个视频帧生成一描述运动视频全貌的视频全景图；2)对得到的视频全景图进行图像内容编辑；3)由编辑后的视频全景图逆投影回各视频帧坐标系，生成编辑后的视频序列；所述的视频全景图生成包括下列步骤：(1)对多个视频帧之间相对的全局运动进行全局运动估计，得出各视频帧图像之间的平面投影关系；(2)如果运动视频序列中包含有运动物体，则首先将其去除；(3)根据各视频帧图像之间的平面投影关系，以第一帧图像作为参考帧，建立全景图坐标系，将各视频帧图像投影到该全景图坐标系中，并估计出全景图的尺寸；(4)根据各视频帧之间的平面投影关系，计算全景图上每个像点在多个视频帧图像中的对应点，将这多个对应点进行排序，取中值作为全景图上的值，构成视频全景图；所述的全景图内容编辑方法包括：(1)图像移植：通过手工选择一块区域，再将此块区域的信息放到需要填充的区域中，根据被填充区域外部的信息改变原区域信息的颜色，使这种填充变得自然；(2)基于信息繁衍的图像编辑：利用围绕着待编辑区域边界的已知信息，沿着梯度最小的方向将边界上的灰度信息“繁殖”到待编辑区域内来实现；(3)纹理图像的半自动填充：自动填充有纹理的区域；所述的编辑后的视频序列生成包括下列步骤：(1)计算从视频全景图到各视频帧坐标系的逆投影矩阵；(2)根据逆投影矩阵从视频全景图生成各视频帧图象，完成视频编辑过程。