基于实时对话语义分析的视频实时拼接装置及其方法

摘要

本发明公开了一种基于实时对话语义分析的视频实时拼接装置及其方法，是建立一个与标准语义相关联的视频素材库和音频素材库，语义分析模块对输入进行语义分析，根据语义分析计算出所需选用的视频单元和音频单元，并生成相应的指令发送给实时拼接模块进行对应的处理；实时拼接模块则根椐语义分析模块的指令，从视频素材库和音频素材库中调取对应的视频单元和音频单元，并按指令要求，进行画面拼接和声音合成，形成完整的音视频片段，提供给播放装置播放。本发明的装置及其方法，通过对视频和音频依据语义进行实时拼接的方式，能够实现与现场参观者的实时互动，使得现场参观者需要了解的内容，能够适时地出现在播放的音视频中，从而极大地提高了宣传的效果。

主权项

一种基于实时对话语义分析的视频实时拼接装置，其特征在于：包括：视频素材库，该素材库存储有按预置的方式形成的多段视频单元，且每个视频单元都与能够被语义分析模块读取的素材内容索引、素材使用方式索引、素材使用场合索引相关联；音频素材库，该素材库存储有按预置的方式形成的多段音频单元，且每个音频单元都与能够被语义分析模块读取的素材内容索引、素材使用方式索引、素材使用场合索引相关联；至少一个的输入装置，该输入装置用来实现身份识别，以及实现语音或者文字的输入；语义分析模块，该模块对输入进行语义分析，计算出应该由视频素材库中的哪些视频单元应以哪种方式拼接成对应视频，计算出应该由音频素材库中哪些音频单元应以哪种方式拼接成对应的音频，并生成相应的指令发送给实时拼接模块进行对应的处理；实时拼接模块，该模块根椐语义分析模块的指令，从视频素材库和音频素材库中调取对应的视频单元和音频单元，并按指令要求，进行画面拼接和声音合成，形成完整的音视频片段，供播放装置播放。