一种视频摘要中事件与背景的融合方法

摘要

本发明公开了一种视频摘要中事件与背景的融合方法。该方法在前景检测与目标跟踪的基础上，将事件与背景的融合问题分成事件预处理、背景帧选择、事件与背景融合三个步骤。首先对事件进行预处理，包括对事件按面积大小排序并调整局部亮度；然后，用事件投票的方式选择最优背景帧，使尽可能多的事件落在该帧背景上；最后融合事件与背景，根据当前位置的像素点在背景帧上的状态标志值和在图像块上的二值前景值选择使用泊松图像编辑方法融合或加权融合的方法，从而形成完整而清晰的新的视频摘要帧。该方法能够无缝、自然的将事件融合到对应的背景中，有效的避免事件与事件之间的遮挡，形成高质量的新视频图像场景。

主权项

一种视频摘要中事件与背景的融合方法，其特征在于，所述方法包括以下步骤：(1)通过运动目标的检测和跟踪，得到原始视频序列中所有的事件和最后形成摘要视频所需的背景帧序列；记录每一个事件的所有发生时刻所对应的图像块的宽高及图像块内所有像素位置的二值前景值、每一个事件发生的起始帧号和结束帧号、以及每一个事件摘要视频中出现时的起始帧号；(2)根据每一个事件发生的起始帧号和结束帧号，以及每一个事件在摘要视频中发生时的起始帧号，从原始视频序列的所有事件中，找出当前摘要帧上需要出现的所有事件及其对应时刻的图像块；(3)对步骤(2)所述摘要帧上所有事件的相应时刻的图像块进行预处理，包括对各事件所对应图像块按照面积从大到小排序，所述各图像块的面积根据步骤(1)中得到的各图像块的宽高得到，然后根据步骤(1)中得到的各图像块内所有像素位置的二值前景值调整对应图像块的局部亮度；(4)利用步骤(2)所述摘要帧上的所有事件对步骤(1)中得到的背景帧进行投票，得票最高的背景帧即为当前摘要帧所需的背景帧，所述利用事件对背景帧进行投票是根据相应时刻的图像块在原始视频中所在的帧号与步骤(1)中获取背景帧时的周期相比，根据比值判断对步骤(1)中得到的背景帧中的哪一帧进行投票；(5)对步骤(3)所述预处理后的图像块和步骤(4)所述背景帧进行融合得到摘要帧，所述融合是根据步骤(1)中得到的各图像块内所有像素位置的二值前景值与背景帧上当前像素位置的融合状态选择加权融合与泊松图像编辑中的某一种方法进行融合。