基于相关性的图像选择

摘要

一种系统、计算机可读存储介质和计算机实施的方法，响应于用户关键词查询来呈现视频搜索结果。视频托管系统使用机器学过程以学特征-关键词模型，该特征-关键词模型将来自已标注训练数据集的媒体内容的特征与描述它们的内容的关键词关联。该系统使用学的模型以基于在视频中找到的特征来提供与关键词查询相关的视频搜索结果。另外，该系统使用学的模型来确定并且呈现代表视频的一个或者多个缩略图图像。

主权项

一种用于创建可搜索视频索引的计算机实施的方法，所述方法由计算机系统执行并且包括：接收已标注训练数据集，所述已标注训练数据集包括一组训练视频以及描述每个所述训练视频的多个帧中的每个帧的音频‑可视内容的一个或者多个关键词；提取表征每个所述训练视频的所述多个帧中的每个帧的所述音频‑可视内容的一个或多个特征；如下存储最有代表性的特征向量与最常被找到的关键词之间的关联性：生成关联函数集合，每个关联函数代表所述最有代表性的特征向量之一与所述最常被找到的关键词之一之间的关联强度；以及生成将所述最有代表性的特征向量映射到所述最常被找到的关键词的特征‑关键词矩阵；使用所述关联函数集合和所述特征‑关键词矩阵来训练机器学习的模型，以学习所提取的表征每个所述训练视频的所述多个帧中的每个帧的所述音频‑可视内容的所述特征与描述每个所述训练视频的所述多个帧中的每个帧的所述音频‑可视内容的所述一个或多个关键词之间的相关性；以及基于视频数据库中的多个索引视频的帧的特征以及所述机器学习的模型，生成将所述一个或多个关键词映射到所述视频数据库中的所述多个索引视频的所述帧的所述可搜索视频索引。