一种辅助解说的方法、装置及其系统

摘要

本发明提供了一种辅助解说的方法、装置及其系统，所述方法包括：对视频流图像进行人脸检测，获取人脸图像；通过对所述人脸图像进行人脸识别，从预置人物信息数据库中获取匹配的预置人脸图；其中，所述预置人物信息数据库存储有：预置人脸图及其对应的身份信息；从所述预置人物信息数据库中提取与所述预置人脸图相对应的身份信息，生成解说文字信息。通过本发明，可以提供及时、匹配的解说信息。

主权项

一种辅助解说的方法，其特征在于，包括：每隔n帧对视频流图像进行一次人脸检测，获取当前帧图像中的人脸图像；其中，n为大于1的正整数；对所述人脸图像进行人脸跟踪，当判断前一帧中的人脸图像出现在当前帧图像中时，则针对所述人脸图像跳过人脸识别步骤，不再生成解说文字信息；其中，如果连续m帧未跟踪到所述人脸图像，则结束对所述人脸图像的跟踪；通过对所述人脸图像进行人脸识别，从预置人物信息数据库中获取匹配的预置人脸图；其中，所述预置人物信息数据库存储有：预置人脸图及其对应的身份信息；从所述预置人物信息数据库中提取与所述预置人脸图相对应的身份信息；从当前帧图像中获取人脸图像所对应的人物的位置信息；其中，所述人物的位置信息包括：人物的前后位置信息；其中，在从当前帧图像中获取人脸图像所对应人物的前后位置信息时包括：采用深度分析的方法确定人物的前后位置信息，和/或，利用人物的相互遮挡确定人物的前后位置信息；其中，所述深度分析具体包括：位于图像下方的人脸对应的人物位置在前，位于图像上方的人脸对应的人物位置在后；所述利用人物的相互遮挡确定人物的前后位置信息具体包括：根据边缘连续性确定人物之间的遮挡关系，被遮挡的人物位置在后，没有被遮挡的人物位置在前；依据提取的身份信息和相应的位置信息，生成解说文字信息。