利用网络信息挖掘的视频内产品注释

摘要

一种系统向一个或者多个用户提供视频中的产品注释。该系统从用户接收视频，其中该视频包括多个视频帧。该系统从视频提取多个关键帧并且生成关键帧的可视化表示。该系统将关键帧的可视化表示与多个产品可视签名进行比较，其中每个可视签名标识一个产品。基于关键帧的可视化表示和产品可视签名的比较，该系统确定关键帧是否包含由产品的可视签名所标识的产品。为了生成多个产品可视签名，该系统收集多个训练图像，这些训练图像包括从专家产品库获得的专家产品图像中的多个专家产品图像，每个专家产品图像与从多个网络资源获得的多个产品图像关联。

主权项

一种用于向一个或者多个用户提供视频中的产品注释的计算机方法，所述方法包括：至少通过以下操作来生成用于产品的产品可视签名：从专家产品库收集所述产品的未注释的专家产品图像；从与专家产品库不同的多个网络资源搜索多个未注释的产品图像，所述多个未注释的产品图像与所述未注释的专家产品图像相关；通过基于与所述未注释的专家产品图像的相似度测量对所述多个未注释的产品图像进行过滤，来选择所述多个未注释的产品图像的子集，以及根据所述未注释的专家产品图像和所述多个未注释的产品图像的所述子集来生成所述产品可视签名；接收用于产品注释的视频，所述视频包括多个视频帧；从所述视频帧提取多个关键帧；以及对于每个关键帧：生成所述关键帧的可视化表示；比较所述可视化表示与包括所述产品可视签名的多个产品可视签名；以及基于所述比较，确定所述关键帧包含由所述产品可视签名所标识的所述产品。