发明名称 一种内容感知的地理视频多层次关联方法
摘要 本发明涉及一种内容感知的地理视频多层次关联方法,包括以下步骤:a)统一多源地理视频的结构特征;b)解析以轨迹对象为载体的时空变化共性特征,建立结合内容语义和统一参考基准下地理语义的关联要素视图;c)提取包含时空变化特征的地理视频数据集,建立数据到关联要素的规则函数映射;d)基于规则判别地理视频数据实例的关联性并计算关联距离,依据关联层次属性逐层聚集地理数据并根据关联距离排序集合内数据对象。本发明可以支持综合地理视频内容相似和统一参考基准下地理相关的全局关联,进而提升监控网络系统中多路地理视频背后所蕴含的非连续和跨区域监控场景中多尺度复杂行为事件的认知计算能力与信息表达效率。
申请公布号 CN105630897A 申请公布日期 2016.06.01
申请号 CN201510960343.7 申请日期 2015.12.18
申请人 武汉大学 发明人 张叶廷;谢潇;朱庆;杜志强;吴晨
分类号 G06F17/30(2006.01)I 主分类号 G06F17/30(2006.01)I
代理机构 武汉科皓知识产权代理事务所(特殊普通合伙) 42222 代理人 鲁力
主权项 一种内容感知的地理视频多层次关联方法,其特征在于:基于三个结构粒度层次的地理视频数据对象:对象一:地理视频帧(GeoVideo Frame,GVF),用于解析地理视频内容时空变化的最小结构粒度;对象二:地理视频镜头(GeoVideo Shot,GVS),用于记录时空变化特征并用于建立地理视频数据关联关系的基本结构粒度;对象三:地理视频镜头组(GeoVideo Shot Group,GVSG),用于保存多层次关联结果的结构粒度,称为地理视频镜头组;具体包括以下步骤:步骤1,地理视频结构解析:结构化各路待处理地理视频数据为统一特征项表达的GVF序列;GVF对象以栅格图像为基础数据,以各项特征项为元数据;根据现有图像处理算法处理需要,将特征项统一表达为成像特征、结构特征、图像特征和应用特征四类;统一的特征项用于支持步骤2中基于图像特征增量的时空变化解析;其中,GVF统一表达的特征项包括以下4类:步骤1a,成像特征项:记录摄像机成像的时空参考信息,用于成像空间到地理空间的映射;步骤1b,结构特征项:记录GVF图像实例化固有属性,作为视频内容解析的前提条件;步骤1c,图像特征项:记录GVF图像的可视特征,用于视频内容解析;步骤1d,应用特征项:记录专题领域应用相关的图像分割约束条件与分割规则,作为视频内容解析的约束条件;步骤2,地理视频内容解析:依次解析步骤1输出的统一特征项表达的各路GVF序列数据内容,提取内容中的共性时空变化特征;包括状态变化的地理实体解析步骤,以及针对经过地理实体解析步骤处理后得到的地理实体进行的地理实体的行为过程解析步骤;采用面向对象的方法保存时空变化特征为地理实体对象和行为过程对象;其中,所述地理实体对象以状态图像集为载体,记录其描述对象个体特征的内容语义项和描述各状态统一基准下位置特征的地理语义项;其中,所述行为过程对象以时空轨迹为载体,记录其描述行为动作类型的内容语义项和描述统一基准下位置关系变化模式的地理语义项;并且,创建对象实例的同时,保存其与原始地理视频帧的解析映射关系;语义解析用于提取融合内容语义和统一参考基准下地理语义的时空变化特征,作为步骤3语义清洗的参考信息和步骤4语义关联的关联要素;步骤3,地理视频语义清洗:基于步骤2解析得到的两类时空变化特征,从步骤1输出的各路GVF序列数据中提取包含时空变化特征对象的地理视频数据集,构建为GVS;所述GVS对象以连续GVF子序列为基础数据,以时空变化特征对象为语义元数据;语义清洗实现对有效地理视频数据的提取并建立地理视频数据到语义关联要素的规则函数映射;步骤4,地理视频语义关联;利用步骤3构建的GVS语义元数据的内容相似性和地理相关性,生成基于多层次事件的GVS语义关联关系,所述事件指公共安全监测任务中呈现专题特征的时空变化集,所述多层次指用户能从“随时空尺度增长而扩大的时空变化集”中层级递进理解的时空变化的专题特征;利用关系的层次性逐层递进地聚合关联GVS,构建为GVSG,所述GVSG对象以关联的GVS为基础数据,以相应层次的事件对象为语义元数据;保存GVSG作为已知信息用于后续数据组织与检索。
地址 430072 湖北省武汉市武昌区珞珈山武汉大学