一种新闻视频中主播镜头的检测方法

摘要

本发明公开了一种新闻视频中主播镜头的检测方法，包括：对新闻视频进行镜头切分检测；去除图像非重点区域后提取两个对角线方向的时空切片；对时空切片沿时间方向和垂直于时间方向进行切割，得到若干窗口；选取所述每一部分每一个镜头所对应的窗口中的第一个和最后一个；提取所选窗口图像特征向量；通过串行聚类方法对特征向量进行聚类，提取初步的主播镜头；利用图像运动特征对得到的初步主播镜头进行进一步筛选；将筛选后的各部分结果融合，得到最终的新闻主播镜头。本发明的优点是对各类新闻视频中主播镜头检测准确率高，计算复杂度低，有效克服了现有技术对于主持人不在屏幕中间以及动态演播室背景的情况下漏检率较高的问题。

主权项

一种新闻视频中主播镜头的检测方法，按照以下步骤顺序执行：步骤A、对新闻视频进行镜头切变检测；步骤B、将新闻视频中的每一帧图像分别去除上、下方的非重点区域后，沿剩余区域的两条对角线方向分别提取时空切片；其中：所述提取时空切片是指先提取所述新闻视频中每一帧图像去除上、下方非重点区域后剩余区域两条对角线上的两列像素，然后按照时间先后顺序将同一对角线方向上每一帧图像提取的像素列拼接成一幅二维图像，所得二维图像即为该对角线方向的时空切片，时空切片的长为所述新闻视频的总帧数，宽为所述对角线的长度；步骤C、分别将所述的时空切片沿时间方向均分为3个部分，然后分别将每一部分中每一个镜头所对应的时空切片片段沿垂直于时间的方向等分切割为若干窗口，每一窗口的宽度为X帧；步骤D、选取所述每一部分每一个镜头所对应的窗口中的第一个和最后一个；提取所选窗口的图像特征，得到相应的特征向量；步骤E、通过串行聚类方法对所述的每一部分选取的窗口所对应的特征向量分别聚类，并提取聚类得到的每一簇成员窗口所对应的镜头作为初步的主播镜头；所述串行聚类方法具体为：按视频时间顺序从头到尾扫描各样本，若当前样本与已经存在的各个类的距离的最小值大于预先设定的第一阈值，则将该样本设定为新的一类，若小于第一阈值则将该样本归到与该样本值距离最小的类中，并且重新计算该类的中心；步骤F、以步骤E中聚类得到的每个簇为单位，分别提取对应的运动特征；根据所述运动特征并遵照设定的规则分别对步骤E中得到的每部分初步的新闻主播镜头进行筛选；步骤G、将步骤F筛选出的两个对角线方向，共6个部分的结果进行融合，得到最终的主播镜头。