一种基于轮廓骨架图的视频场景行为生成方法

摘要

本发明公开了一种基于轮廓骨架图的视频场景行为生成方法。包括步骤：综合运动对象的骨架和轮廓信息，构建一种面向生成的视频场景行为表示轮廓骨架图，在待生成图像中提取目标对象的原始轮廓骨架图，在参考行为视频中逐帧提取参考对象的轮廓骨架图，生成参考对象的轮廓骨架图序列，然后通过局部约束与全局约束相结合的方式，变形目标对象的原始轮廓骨架图，得到目标对象的目标轮廓骨架图序列，再利用三角剖分方法和仿射变换，完成目标行为视频中目标对象的纹理映射，输出目标行为视频。本发明实现了操作成本低、具有全局一致性、减少失真现象等优点，可以广泛地应用于交互式数字娱乐、体育研究与训练模拟等的虚拟行为生成。

主权项

一种基于轮廓骨架图的视频场景行为生成方法，其特征在于，包括以下步骤：步骤一、输入一张包含目标对象的待生成图像和一段由参考对象执行参考行为的参考行为视频；步骤二、分析目标对象或参考对象的轮廓和骨架信息，在待生成图像中提取目标对象的原始轮廓骨架图，在参考行为视频中逐帧提取参考对象的轮廓骨架图，生成包含一定数量的参考对象的轮廓骨架图的参考对象的轮廓骨架图序列；步骤三、依据参考对象的轮廓骨架图序列，通过局部约束与全局约束相结合的方式，变形目标对象的原始轮廓骨架图，得到包含所述一定数量的目标对象的目标轮廓骨架图的目标对象的目标轮廓骨架图序列；其中，所述局部约束首先进行骨架局部约束，骨架局部约束是根据参考对象的轮廓骨架图序列中的每一个参考对象的轮廓骨架图，将目标对象的原始轮廓骨架图进行角度方面变形，形成与每一个参考对象的轮廓骨架图一一对应的目标对象的目标轮廓骨架图序列，并且还根据参考对象的轮廓骨架图序列中的参考对象的轮廓骨架图，将目标对象的目标轮廓骨架图序列中的每一个目标轮廓骨架图在骨骼长度方面变形；所述长度方面变形的过程如下：首先选取参考对象的轮廓骨架图序列中的首张参考对象的轮廓骨架图，其次利用首张参考对象的轮廓骨架图中的骨架关节点的空间位置信息，计算参考对象的图像空间身高信息，结合参考对象的骨骼长度信息，计算得到参考对象的各个骨骼影响因子，其次在目标对象的原始轮廓骨架图中，利用关节点的空间位置信息，计算目标对象的图像空间身高信息，结合目标对象的骨骼长度信息，计算得到目标对象的各个骨骼影响因子；接着，计算参考对象的骨骼的长度变化，利用参考对象的各个骨骼影响因子，得到参考对象的骨骼长度变化尺度，结合目标对象的各个骨骼影响因子，计算目标对象的每一个目标轮廓骨架图中的每个骨骼的长度变化；步骤四、利用三角剖分方法，三角网格化目标轮廓骨架图序列中的每一个目标对象的目标轮廓骨架图，通过仿射变换实现待生成图像中目标对象的每一个目标轮廓骨架图的纹理变形，完成每一个目标轮廓骨架图的纹理映射；步骤五、将完成所有目标轮廓骨架图的纹理映射的目标轮廓骨架图序列输出以生成连续的目标对象执行参考行为的视频。