一种基于事件最优重组的保时序摘要视频生成方法与系统

摘要

本发明公开了一种基于事件最优重组的保时序摘要视频生成方法和系统，将事件最优重组问题建立在保持事件之间的时序关系的基础之上，将事件重组的问题转换为迭代判断当前事件与已发生的事件之间的轨迹相关程度以及已发生事件的疏密程度的方式来解决。通过迭代最后得到事件重组后每个事件发生的时间点，选取适当的背景图像与事件特定时刻的目标图像进行拼接得到最终的摘要视频。该方法能够避免现行的动态视频摘要生成方法中不能完全包含原始视频中的所有事件，目标轨迹组合最优解求解困难且耗时过长，摘要视频中目标的时序混乱等问题。

主权项

一种基于事件最优重组的保时序摘要视频生成方法，其特征在于，所述方法包括以下步骤：步骤1，对原始视频序列进行运动目标的检测和跟踪，得到原始视频序列中的所有运动目标，和所有运动目标的运动轨迹以及在视频中的出现时间和结束时间，将原始视频序列中的每一个目标在视频中开始到结束的运动当作是一个事件；步骤2，对原始视频序列中的所有事件进行事件重组得到摘要视频，所述重组后的摘要视频中各事件与原原始视频序列中各事件的时序关系一致，即如果事件e_i在原始视频序列中的发生时刻要早于事件e_j，那么事件e_i在摘要视频中的发生时刻M[e_i]要先于事件e_j在摘要视频中的发生时刻M[e_j]；且满足：摘要视频中每一时刻发生的事件的数目小于最大疏密程度阈值，且在同一时刻发生的事件中各目标的活动区域的重叠率小于设定重叠阈值；所述步骤2具体包括：步骤2.1，取出原始视频序列中的第一个事件，将该事件作为摘要视频中第一个发生的事件；步骤2.2，取出原始视频序列中的下一个事件；步骤2.3，获取当前摘要视频中最后发生的事件的开始时刻时同时发生的事件的数目；若该数目小于最小疏密程度阈值ActiveEventMin，则将当前摘要视频中最后发生的事件的开始时刻作为所述步骤2.2中的事件的发生时刻，并转步骤2.2；如果该数目大于最大疏密程度阈值ActiveEventMax，则获取当前摘要视频中最后发生的事件的开始时刻的下一时刻同时发生的事件的数目，并继续进行步骤2.3的判断；若该数目小于最大疏密程度阈值ActiveEventMax，且大于最小疏密程度阈值ActiveEventMin，则转步骤2.4；步骤2.4，计算步骤2.2中的事件与当前摘要视频中最后发生的事件的开始时刻的活动事件之间的轨迹重叠率，如果该轨迹重叠率小于设定重叠阈值，则将当前摘要视频中最后发生的事件的开始时刻作为所述步骤2.2中的事件的发生时刻，并转步骤2.2；如果该轨迹重叠率大于设定重叠阈值，则获取当前摘要视频中最后发生的事件的开始时刻的下一时刻同时发生的事件的数目，并继续进行步骤2.3的判断。