发明名称 基于用户信息建模的图像标注增强方法
摘要 本发明是一种基于用户信息建模的图像标注增强方法,首先,用户、图像及标注的原始关系被表示成一个三阶张量;然后,观测到的原始标注被表示成正负样本对,张量分解的目标是最小化正负样本对的排序关系;最终,利用分解得到的核心张量和因子矩阵进行子空间变换,可以得到共同子空间上的图像及标注表示。在大规模图片分享网站数据上,证明了发明的方法获得了更好的标注增强效果。
申请公布号 CN102521227B 申请公布日期 2013.07.31
申请号 CN201110317167.7 申请日期 2011.10.18
申请人 中国科学院自动化研究所 发明人 徐常胜;桑基韬
分类号 G06F17/30(2006.01)I 主分类号 G06F17/30(2006.01)I
代理机构 中科专利商标代理有限责任公司 11021 代理人 梁爱荣
主权项 一种基于用户信息建模的图像标注增强方法,其特征在于,该方法的步骤包括:步骤S1:图片分享网站上的原始标注数据作为输入,利用三阶张量表示用户、图像和标注间的关系,生成用户、图像、标注之间的三元异质关系,以及用户与用户、图像与图像、标注与标注的同质关系;具体的表示方法是:利用用户加入共同的兴趣组计算用户与用户的相关性;利用图像与图像的视觉特征距离计算图像与图像的相关性;利用标注与标注共同出现的频率和该标注词语在词网WordNet上的相关程度,分别计算标注与标注的空间相关性和语义相关性;步骤S2:对三阶张量用排序表示,对三阶张量的每一个用户对、图像对,用观测到的原始标注构成正样本集合,用与正样本集合既不空间相关又不语义相关的标注构成负样本集合;将同质关系的相似性矩阵作为平滑约束加入到目标函数中,利用选择优化方法对该目标函数进行迭代求解,得到的用户、图像、标注因子矩阵和描述各子空间关系的核心张量;步骤S3:利用因子矩阵乘核心张量,对用户、图像、标注因子矩阵和描述各子空间关系的核心张量做空间变换;在用户维做积分,计算得到标注在图像子空间上的表示;用在同一子空间的图像表示和标注表示做内积,获得图像与标注的关系;对于一幅图像,与该幅图像关联最紧密的前K个标注即为增强后的该幅图像标注,K为根据该幅图像标注质量事先约定自然数。
地址 100190 北京市海淀区中关村东路95号