基于图像的虚拟服装拟合的方法和设备

摘要

本发明提供一种用于基于图像的虚拟服装拟合的方法，包括：构建数据库，所述数据库包括给定衣物的预存视频帧以及对应的预存骨架姿势；接收输入视频，所述输入视频包括包含用户骨架姿势的输入帧；将所述用户骨架姿势与所述预存骨架姿势进行匹配，以在所述数据库中查找所述给定衣物的预存视频帧；将查找到的所述给定衣物的预存视频帧叠加到所述用户骨架姿势；以及在输出帧中呈现叠加有所述给定衣物的预存视频帧的用户骨架姿势。本发明还提供一种用于基于图像的虚拟服装拟合的设备。本发明提供的技术方案能够很好地将数据库中存储的衣物与用户的身体拟合起来，从而产生良好的用户体验。

主权项

一种用于基于图像的虚拟服装拟合的方法，包括：构建数据库，所述数据库包括给定衣物的预存视频帧以及对应的预存骨架姿势；接收输入视频，所述输入视频包括包含用户骨架姿势的输入帧；将所述用户骨架姿势与所述预存骨架姿势进行匹配，以在所述数据库中查找所述给定衣物的预存视频帧；将查找到的所述给定衣物的预存视频帧叠加到所述用户骨架姿势；以及在输出帧中呈现叠加有所述给定衣物的预存视频帧的用户骨架姿势；其中，通过如下方式来将所述用户骨架姿势与所述预存骨架姿势进行匹配：(1)通过以下方程来得到一维序列；$E=\underset{i}{\Sigma }D(l_i,i)+\lambda \underset{i}{\Sigma }S(l_{i-1},l_i)$其中i是所述输入视频中的输入帧的索引，l_i是所述数据库中针对输入视频中第i个输入帧的预存视频帧的索引，D(l_i，i)是i所索引的输入帧中的用户骨架姿势的第一姿态矢量与l_i所索引的预存储视频帧的第二姿势矢量之间的欧几里得距离，如果l_i‑1和l_i为相邻帧，则S(l_i‑1，l_i)被设置为0，否则S(l_i‑1，l_i)被设置为1，λ为常数，目标函数E为一维序列；其中所述姿势矢量表示人体至少一个部位的3D位置；(2)对所述目标函数E应用动态规划算法以确定所述一维序列的全局最优值，从而查找到所述给定衣物的预存视频帧。