智能硬件多模态级联建模方法及装置

摘要

本发明实施例提供一种智能硬件多模态级联建模方法和装置，该方法包括：提取多模态输入信号的模态特征；基于模态特征，构造标注数据，针对每种模态分别建立用户意图分析模型；选取用户行为数据，根据用户行为数据对用户意图分析模型进行自学校正；将经过自学校正的用户意图分析模型进行组合，得到二级级联模型。在该多模态级联建模过程中，各个模态的建模可以单独进行而不影响全局，各个模态模型的组合方法也不需要考虑单个模态模型的内部细节，从而避免了单个模态模型改变时需要修改整个多模态级联模型的问题。

主权项

一种智能硬件多模态级联建模方法，其特征在于，包括：步骤101：提取多模态输入信号的模态特征；步骤102：基于所述模态特征，构造标注数据，针对每种模态分别建立用户意图分析模型；步骤103：选取用户行为数据，根据所述用户行为数据对所述用户意图分析模型进行自学习校正；步骤104：将经过自学习校正的用户意图分析模型进行组合，得到二级级联模型。