对于搜索查询输入的多模态方式

摘要

包含多种模式的查询输入的搜索查询用于识别响应的结果。搜索查询可以由关键词或者文本输入、图像输入、视频输入、音频输入、或者其它模式的输入的组合组成。多种模式的查询输入可以在初始的搜索请求中存在，或者包含一种类型的查询输入的初始请求可以利用第二种类型的输入来补充。除了提供响应结果之外，在一些实施例中，可以基于查询的内容或者初始响应的结果来做出额外的查询改进或者建议。

主权项

一种用于执行多模态搜索的方法，包括：接收（1110）包括至少两种查询模式的查询；从所述查询提取（1120）对应于所述至少两种查询模式的相关性特征；基于所提取的相关性特征选择（1130）多个响应结果；基于所提取的相关性特征对所述多个响应结果进行评级（1140）；以及显示（1150）所评级的响应结果中的一个或多个。