一种数据驱动的物体图像修复系统及方法

摘要

本发明的一种数据驱动的物体图像修复系统及方法，属于图像修复技术领域。本发明的第一个目的是提供一种物体图像修复系统，包括依次连接的用户交互模块、物体匹配模块、形状修复模块和纹理修复模块以及独立的物体图像数据库和数据库标注模块；本发明的第二个目的是提供一种数据驱动的物体图像修复方法框架，包括以下步骤：数据预处理、轮廓与修复区域的标示、物体匹配、形状修复、纹理修复、数据后处理。本发明通过各模块的协同工作，克服了现有图像修复方法无法解决的物体缺失部分形状信息无法启发式推导、缺失部分无法在原图像中采样修复等问题，很好地对物体图像进行修复。

主权项

一种数据驱动的物体图像修复系统，其特征在于：包括依次连接的用户交互模块、物体匹配模块、形状修复模块、纹理修复模块和后处理模块以及独立作为数据准备与预处理的物体图像数据库和数据库标注模块；所述用户交互模块采用鼠标或数位板作为输入外设，用于在修复图片上标示修复区域和待修复物体的轮廓；所述物体匹配模块用于将用户标示的待修复物体轮廓在带标注的物体图像数据库中搜索具有最相似轮廓和颜色的物体的匹配图像；所述形状修复模块利用轮廓匹配模块搜索到的匹配图像，在匹配图像的轮廓上按固定分块大小对纹理和结构信息进行采样组成样本字典，通过求全局最优解的方法在样本字典中寻找最优样本分块通过纹理合成技术合成到待修复物体的轮廓上完成形状修复；所述纹理修复模块用于对形状修复后剩余的物体内部、物体外部待修复区域，采用优先度引导的贪婪修复算法（即每修复一个图像分块时，都全局搜索一个最优的样本分块）进行纹理修复；所述后处理模块用于对纹理修复后的结果在物体边缘进行修边操作，消除人工修复痕迹；所述带标注的物体图像数据库为轮廓匹配模块寻找具有与待修复物体相似轮廓图像提供数据集，数据集中包括物体图像和标注对应图像中物体轮廓的掩膜图像；所述数据库标注模块用于人工对图像数据库中的物体图像进行轮廓标注并生成掩膜图像。