基于特征的视频压缩

摘要

提供处理视频数据的系统和方法。接收和处理具有一系列视频帧的视频数据。在所述视频帧中检测候选特征的一个或者多个实例。处理先前已解码的视频帧以识别所述候选特征的潜在匹配。当先前已解码的视频帧的大量部分包括所述候选特征的实例时，将所述候选特征的所述实例聚集到集合中。使用候选特征集合来创建基于特征的模型。基于特征的模型包括所述候选特征的实例的形变变化模型和外观变化模型。将基于特征的模型的压缩效率与常规视频压缩效率进行比较。

主权项

一种处理视频数据的计算机方法，包括计算机实施的步骤：接收包括一系列视频帧的视频数据；以及如下编码所述视频帧的部分：在一个或者多个所述视频帧中检测候选特征的一个或者多个实例；所述检测确定实例在一个或者多个先前已解码的视频帧中的位置信息，所述位置信息包括帧编号、所述帧中的位置以及所述实例的空间周长；所述候选特征是一个或者多个已检测实例的集合；由运动补偿预测过程使用一个或者多个先前已解码的视频帧来预测所述系列中的当前视频帧的部分；所述运动补偿预测过程利用位置预测而被初始化，其中所述位置预测根据先前已解码的视频帧中已检测特征实例来提供所述位置信息；使用通过增强所述运动补偿预测过程而变换的一个或者多个实例，定义特征以及经变换的实例以创建第一基于特征的模型，所述第一基于特征的模型支持在当前帧中预测实质匹配特征实例的外观和源位置，其中所述实质匹配特征实例是关键特征实例；将所述第一基于特征的模型与一个或者多个已定义特征的常规视频编码模型进行比较；以及根据所述比较确定哪个模型支持较大的编码压缩；以及使用所述比较和确定步骤的结果，向一个或者多个所述视频帧的部分应用基于特征的编码，并且向所述一个或者多个视频帧的其他部分应用常规视频编码。