发明名称 一种分析影像以形成行为语句之方法与架构
摘要
申请公布号 申请公布日期 2011.07.21
申请号 TW097100767 申请日期 2008.01.09
申请人 国立台湾大学 发明人 张靖莹;张毓麟;陈良基
分类号 G06K9/62;G06F17/00 主分类号 G06K9/62
代理机构 代理人 崔百庆 台北市大安区敦化南路1段190巷19号3楼
主权项 一种分析影像以形成行为语句之架构,包括:一物件辨识单元,输入一影像,提供一人物关键词与一物件关键词;一事件辨识单元,该物件辨识单元耦接该事件辨识单元,提供一事件关键词、一时间关键词与一地点关键词;以及,一语句形成单元,该语句形成单元耦接该事件辨识单元,输出一行为语句;其中,该语句形成单元实现一语句形成程序,藉由该人物关键词、该物件关键词、该事件关键词、该时间关键词与该地点关键词,比对一资料库与使用一特定句型之其一,以形成该行为语句。如申请专利范围第1项所述之分析影像以形成行为语句之架构,其中,该物件辨识单元设置于一网路摄影机内。如申请专利范围第1项所述之分析影像以形成行为语句之架构,其中,该物件辨识单元包括:一背景侦测模组,输入该影像;一区块化模组,该区块化模组耦接该背景侦测模组;一追踪模组,该追踪模组耦接该该区块化模组;一特征取出模组,该特征取出模组耦接该追踪模组;以及,一识别模组,该识别模组耦接该特征取出模组。如申请专利范围第1项所述之分析影像以形成行为语句之架构,其中,该事件辨识单元包括:一多视角一致编号模组耦接一识别模组;以及,一资料分享模组,该资料分享模组耦接多视角一致编号模组。如申请专利范围第1项所述之分析影像以形成行为语句之架构,其中,该事件辨识单元包括:一单一物件行为模组,该单一物件行为模组耦接一资料分享模组与该语句形成单元;一多重物件行为模组,该多重物件行为模组耦接一资料分享模组与该语句形成单元;以及,一统计模组,该统计模组耦接该物件辨识单元与该语句形成单元。如申请专利范围第5项所述之分析影像以形成行为语句之架构,其中,该多重物件行为模组包括:一接触侦测模组;以及,一事件直译模组,该事件直译模组耦接该接触侦测模组。如申请专利范围第1项所述之分析影像以形成行为语句之架构,其中,语句形成程序包括下列步骤:设定该资料库为一网路搜寻引擎;取得该人物关键词、该物件关键词、该事件关键词、该时间关键词与该地点关键词;根据该人物关键词、该物件关键词、该事件关键词、该时间关键词与该地点关键词,执行一计分程序,取得一原始分数;根据该人物关键词、该物件关键词、该事件关键词、该时间关键词与该地点关键词,设定复数个替代词;将该些替代词输入该资料库,以进行比对与搜寻,取得复数个可能句子;根据该些可能句子所对应之该人物关键词、该物件关键词、该事件关键词、该时间关键词与该地点关键词,执行该计分程序,以取得一可信度分数;以及,根据该原始分数与该可信度分数,从该些可能句子中选择该行为语句。如申请专利范围第7项所述之分析影像以形成行为语句之架构,其中,该语句形成程序更包括下列步骤:判断该些可能句子是否具有至少一非关键词;以及,若该些可能句子具有至少一非关键词,则以该人物关键词、该物件关键词、该事件关键词、该时间关键词与该地点关键词置换对应之非关键词,以形成该行为语句。如申请专利范围第7项所述之分析影像以形成行为语句之架构,其中,该计分程序包括下列步骤:设定该人物关键词与对应之替代词A分;设定物件关键词为与对应之替代词B分;设定事件关键词为与对应之替代词C分;设定时间关键词为与对应之替代词D分;以及,设定地点关键词为与对应之替代词E分;其中,计分之结果为A+B+C+D+E,且A、B、C>D、E。如申请专利范围第7项所述之分析影像以形成行为语句之架构,其中,该语句形成程序更包括下列步骤:计算一词句距离,该词句距离为X/Y;以及,根据该词句距离,从该些可能句子中选择该行为语句;其中,X为对应之可能句子中之该人物关键词、该物件关键词、该事件关键词、该时间关键词、该地点关键词与对应之替代词之总字数,Y为对应之可能句子之总字数。如申请专利范围第1项所述之分析影像以形成行为语句之架构,其中,语句形成程序包括下列步骤:取得该人物关键词、该物件关键词、该事件关键词、该时间关键词与该地点关键词;根据该人物关键词、该物件关键词、该事件关键词、该时间关键词与该地点关键词,执行一计分程序,取得一原始分数;将该人物关键词、该物件关键词与该事件关键词输入该资料库,以进行比对与搜寻,取得复数个可能句子;根据该些可能句子所对应之该人物关键词、该物件关键词、该事件关键词、该时间关键词与该地点关键词,执行该计分程序,以取得对应之可信度分数;以及,根据该原始分数与该可信度分数,从该些可能句子中选择该行为语句。如申请专利范围第11项所述之分析影像以形成行为语句之架构,其中,语句形成程序更包括下列步骤:录制一电视台之新闻节目;以及,利用一语音辨识技术建立该资料库。如申请专利范围第11项所述之分析影像以形成行为语句之架构,其中,该计分程序包括下列步骤:设定该人物关键词与对应之替代词A分;设定物件关键词为与对应之替代词B分;设定事件关键词为与对应之替代词C分;设定时间关键词为与对应之替代词D分;以及,设定地点关键词为与对应之替代词E分;其中,计分之结果为A+B+C+D+E,且A、B、C>D、E。如申请专利范围第1项所述之分析影像以形成行为语句之架构,其中,语句形成程序包括下列步骤:设定至少一事件模型与至少一特定句型;取得该人物关键词、该物件关键词、该事件关键词、该时间关键词与该地点关键词;根据该人物关键词、该物件关键词、该事件关键词、该时间关键词与该地点关键词,以决定该事件模型,并选择对应之特定句型;以及,将该物件关键词、该事件关键词、该时间关键词与该地点关键词塡入对应之特定句型,以形成该行为语句。如申请专利范围第14项所述之分析影像以形成行为语句之架构,其中,该特定句型包含对应于该事件模型之动词,对应之动词为「接触」、「造成」、「离开」、「遗留」、「进入」、「开启」与「发生」之其一。如申请专利范围第14项所述之分析影像以形成行为语句之架构,其中,该特定句型包含对应于该事件模型之复数个警示文字。如申请专利范围第16项所述之分析影像以形成行为语句之架构,其中,该些警示文字包含「管制」、「不正常」与「权限」之其一。如申请专利范围第14项所述之分析影像以形成行为语句之架构,其中,该事件模型包含一物品侦测模型、一保全模型与一交通违规模型。如申请专利范围第18项所述之分析影像以形成行为语句之架构,其中,若该事件模型为该物品侦测模型,则该特定句型为:该时间关键词+,+该人物关键词+,+在+该地点关键词+对应之动词+该物件关键词+一距离关键词+以外+达+该时间关键词。如申请专利范围第18项所述之分析影像以形成行为语句之架构,其中,若该事件模型为该物品侦测模型,则该特定句型为:该人物关键词+于+该时间关键词+,将+该物件关键词+对应之动词+该地点关键词+达+该时间关键词。如申请专利范围第18项所述之分析影像以形成行为语句之架构,其中,若该事件模型为该保全模型,则该特定句型为:该人物关键词+于+该时间关键词+对应之警示文字+对应之警示文字+对应之动词+该地点关键词。如申请专利范围第18项所述之分析影像以形成行为语句之架构,其中,若该事件模型为该保全模型,则该特定句型为:该人物关键词+于+该时间关键词+对应之警示文字+对应之动词+该地点关键词与该物件关键词之其一+对应之警示文字。如申请专利范围第18项所述之分析影像以形成行为语句之架构,其中,若该事件模型为该交通违规模型,则该特定句型为:该人物关键词+于+该时间关键词+对应之警示文字+在+该地点关键词+该事件关键词。如申请专利范围第18项所述之分析影像以形成行为语句之架构,其中,若该事件模型为该交通违规模型,则该特定句型为:该人物关键词+于+该时间关键词+在+该地点关键词+与+该人物关键词与该物件关键词之其一+对应之动词+该事件关键词。一种分析影像以形成行为语句之方法,适用于电子装置,该电子装置提供一人物关键词、一物件关键词、一事件关键词、一时间关键词与一地点关键词,本方法包括下列步骤:根据该人物关键词、该物件关键词、该事件关键词、该时间关键词与该地点关键词,执行一计分程序,取得一原始分数;根据该人物关键词、该物件关键词、该事件关键词、该时间关键词与该地点关键词,设定复数个替代词;将该些替代词输入一网路搜寻引擎,以进行比对与搜寻,取得复数个可能句子;根据该些可能句子所对应之该人物关键词、该物件关键词、该事件关键词、该时间关键词与该地点关键词,执行该计分程序,以取得一可信度分数;以及,根据该原始分数与该可信度分数,从该些可能句子中选择该行为语句。如申请专利范围第25项所述之分析影像以形成行为语句之方法,其中,该方法更包括下列步骤:判断该些可能句子是否具有至少一非关键词;以及,若该些可能句子具有至少一非关键词,则以该人物关键词、该物件关键词、该事件关键词、该时间关键词与该地点关键词置换对应之非关键词,以形成该行为语句。如申请专利范围第25项所述之分析影像以形成行为语句之方法,其中,该计分程序包括下列步骤:设定该人物关键词与对应之替代词A分;设定物件关键词为与对应之替代词B分;设定事件关键词为与对应之替代词C分;设定时间关键词为与对应之替代词D分;以及,设定地点关键词为与对应之替代词E分;其中,计分之结果为A+B+C+D+E,且A、B、C>D、E。如申请专利范围第25项所述之分析影像以形成行为语句之方法,其中,该方法更包括下列步骤:计算一词句距离,该词句距离为X/Y;以及,根据该词句距离,从该些可能句子中选择该行为语句;其中,X为对应之可能句子中之该人物关键词、该物件关键词、该事件关键词、该时间关键词、该地点关键词与对应之替代词之总字数,Y为对应之可能句子之总字数。一种分析影像以形成行为语句之方法,适用于电子装置,该电子装置提供一人物关键词、一物件关键词、一事件关键词、一时间关键词与一地点关键词,本方法包括下列步骤:根据该人物关键词、该物件关键词、该事件关键词、该时间关键词与该地点关键词,执行一计分程序,取得一原始分数;将该人物关键词、该物件关键词与该事件关键词输入一资料库,以进行比对与搜寻,取得复数个可能句子;根据该些可能句子所对应之该人物关键词、该物件关键词、该事件关键词、该时间关键词与该地点关键词,执行该计分程序,以取得一可信度分数;以及,根据该原始分数与该可信度分数,从该些可能句子中选择一行为语句。如申请专利范围第29项所述之分析影像以形成行为语句之方法,其中,该方法更包括下列步骤:录制一电视台之新闻节目;以及,利用一语音辨识技术建立该资料库。如申请专利范围第29项所述之分析影像以形成行为语句之方法,其中,该计分程序包括下列步骤:设定该人物关键词与对应之替代词A分;设定物件关键词为与对应之替代词B分;设定事件关键词为与对应之替代词C分;设定时间关键词为与对应之替代词D分;以及,设定地点关键词为与对应之替代词E分;其中,计分之结果为A+B+C+D+E,且A、B、C>D、E。一种分析影像以形成行为语句之方法,适用于电子装置,该电子装置提供一人物关键词、一物件关键词、一事件关键词、一时间关键词与一地点关键词,本方法包括下列步骤:设定至少一事件模型与至少一特定句型;根据该人物关键词、该物件关键词、该事件关键词、该时间关键词与该地点关键词,以决定该事件模型,并选择对应之特定句型;以及,将该物件关键词、该事件关键词、该时间关键词与该地点关键词塡入对应之特定句型,以形成一行为语句。如申请专利范围第32项所述之分析影像以形成行为语句之方法,其中,该特定句型包含对应于该事件模型之动词,对应之动词为「接触」、「造成」、「离开」、「遗留」、「进入」、「开启」与「发生」之其一。如申请专利范围第32项所述之分析影像以形成行为语句之方法,其中,该特定句型包含对应于该事件模型之警示文字。如申请专利范围第32项所述之分析影像以形成行为语句之方法,其中,该警示文字包含「管制」、「不正常」与「权限」之其一。如申请专利范围第32项所述之分析影像以形成行为语句之方法,其中,该事件模型包含一物品侦测模型、一保全模型与一交通违规模型。如申请专利范围第36项所述之分析影像以形成行为语句之方法,其中,若该事件模型为该物品侦测模型,则该特定句型为:该时间关键词+,+该人物关键词+,+在+该地点关键词+对应之动词+该物件关键词+一距离关键词+以外+达+该时间关键词。如申请专利范围第36项所述之分析影像以形成行为语句之方法,其中,若该事件模型为该物品侦测模型,则该特定句型为:该人物关键词+于+该时间关键词+,将+该物件关键词+对应之动词+该地点关键词+达+该时间关键词。如申请专利范围第36项所述之分析影像以形成行为语句之方法,其中,若该事件模型为该保全模型,则该特定句型为:该人物关键词+于+该时间关键词+对应之警示文字+对应之警示文字+对应之动词+该地点关键词。如申请专利范围第36项所述之分析影像以形成行为语句之方法,其中,若该事件模型为该保全模型,则该特定句型为:该人物关键词+于+该时间关键词+对应之警示文字+对应之动词+该地点关键词与该物件关键词之其一+对应之警示文字。如申请专利范围第36项所述之分析影像以形成行为语句之方法,其中,若该事件模型为该交通违规模型,则该特定句型为:该人物关键词+于+该时间关键词+对应之警示文字+在+该地点关键词+该事件关键词。如申请专利范围第36项所述之分析影像以形成行为语句之方法,其中,若该事件模型为该交通违规模型,则该特定句型为:该人物关键词+于+该时间关键词+在+该地点关键词+与+该人物关键词与该物件关键词之其一+对应之动词+该事件关键词。
地址 台北市大安区罗斯福路4段1号