一种基于时空显著单元的视频内容表示方法

摘要

本发明公开了一种基于时空显著单元的视频内容表示方法，是以生物视觉的注意力机制为基础，通过模糊信息粒化方法将原特征空间映射到模糊信息粒特征空间，可以更有效地实现视觉信息的显著性分析，提取符合视觉感知特点的显著区域作为子单元的时域一致性分析主体；在此基础上，根据显著区域和背景区域对内容描述的不同影响程度，进行子单元的合并，从而得到具有时空内容一致性的时空显著单元。实验结果验证了本发明提取的时空显著单元作为视频内容表示模式的有效性和语义表征性。

主权项

1.一种基于时空显著单元的视频内容表示方法，其特征在于：它包括以下步骤：(1)首先将视频序列按照长度L(L＝5帧)的时间窗进行时域分割，时间窗内的视频帧集合构成一个子单元，原视频序列分割为子单元序列；(2)对子单元首帧根据颜色信息进行同质区域分割，以分割后的同质区域为单位，提取视频帧的可计算特征集合；并将可计算特征空间映射到模糊信息粒特征空间；(3)通过考察显著区域和非显著区域两类特征分布，将区域分类为显著区域和非显著区域；(4)在子单元包含的帧序列中，通过对子单元首帧提取的显著区域进行区域跟踪，得到该单元后续帧的显著区域，从而将子单元的每个图像帧分割为显著区域和非显著区域(背景区域)；(5)分别提取子单元显著区域和非显著区域两部分的内容描述子，通过考察子单元的内容连续性，将具有相似内容的子单元进行合并，从而合并后的子单元所包含的显著区域集合形成了具有时空特征一致性的显著区域集合，即时空显著单元，提取的时空显著单元为高层视频应用提供了一种有效的视频内容表示模式。