一种结合用户评价与标注的交互式图像检索方法

摘要

本发明是一种结合用户评价和标注的交互式图像检索方法，属于多媒体信息检索领域。在本发明中，该方法利用了基于图像的物理特征和文本相结合的综合检索方法，在检索过程中，允许用户对查询图像进行文本信息描述，或者选择系统提供的关键字，通过对检索结果进行“满意”或“不满意”的相关评价，图像检索系统自动对用户标记的相关满意图像进行文本标记，形成高层语义信息；随着用户的不断使用，该系统会生成丰富的语义信息数据库。考虑到不同用户对同一图片，同一用户不同时间对同一图片文本标注的差异，本发明在生成语义信息数据库的过程中结合了用户的可信度。进行检索时，对存在语义信息的查询图像采用基于特征和文本相结合的综合检索方式进行检索，提高了检索结果的准确度。本发明具有效率高、精确度高、交互方式友好的优点。

主权项

一种结合用户评价和标注的交互式图像检索方法，其特征在于具体步骤如下：1)对图像库中的所有图像进行特征提取，离线生成图像特征库V；2)用户登录，如果不登录即为匿名用户；3)用户提交查询信息，该信息可以是查询图像QN，也可以是输入的文本信息，或者是查询图像与文本信息同时存在；4)检索系统对查询图像QN进行特征提取，并对输入的文本信息提取关键字；5)检索系统对查询图像QN进行特征相似度匹配S1；6)检索系统对提取的关键字进行文本的匹配，即语义相关性S2；7)检索系统利用S1和S2计算总相似度S，返回S值最大的图像集作为初始的检索结果集合set(R)；8)同时，检索系统在关键字数据表KL中查询是否存在set(R)中各图像名对应的记录，如果存在，则给出这些记录对应的关键字权值排序最高的前N(N＞0)个关键字供用户选择；9)用户选择系统提供的关键字K，同时也可以对图像文本标注T′；10)系统根据用户选择的关键字和标注的文本信息，组合新关键字K′；11)同时，用户对结果图像进行“满意”或“不满意”评价，对标记为“满意”的图像，用关键字K′进行文本标注；12)图像检索系统计算该用户的用户可信度a，并计算“满意”图像标 注的关键字权值W，保存到关键字信息表KL中，同时，将注册用户的用户信息保存到用户信息数据表UL中，匿名用户的用户信息不需要保存，只需对KL进行更新；13)如果用户对检索结果不满意，则可修改文本标注T，重复步骤(3)‑(12)，直到用户对检索结果满意为止，并给出最终的检索结果。