发明名称 一种基于连续最小能量与表观模型的多目标关联跟踪方法
摘要 本发明公开了一种基于连续最小能量与表观模型的多目标关联跟踪方法,该方法首先在目标检测和初始轨迹提取基础上,利用在线判别表观模型和AdBoost方法实现目标的初步关联,得到零散、且不连续的跟踪轨迹;然后,利用匈牙利方法对初次关联得到的短小、可靠的跟踪片段进行二关联;二次关联虽然可以得到连续的跟踪轨迹,但是不适合长时间目标跟踪的过程;最后采用基于最小能量的智能探测方法来弥补二次关联的缺陷,得到最终的更加平滑、连续的跟踪轨迹。
申请公布号 CN103955947A 申请公布日期 2014.07.30
申请号 CN201410108136.4 申请日期 2014.03.21
申请人 南京邮电大学 发明人 朱松豪;胡娟娟;李向向;陈玲玲
分类号 G06T7/20(2006.01)I 主分类号 G06T7/20(2006.01)I
代理机构 南京知识律师事务所 32207 代理人 汪旭东
主权项 一种基于连续最小能量与表观模型的多目标关联跟踪方法,其特征在于,所述方法包括如下步骤:步骤1:输入给定的训练视频图像数据,将检测对象的集合记为<img file="FDA0000480173810000011.GIF" wi="210" he="77" />每帧中的检测对象表示为r<sub>i</sub>=(x<sub>i</sub>,y<sub>i</sub>,s<sub>i</sub>,t<sub>i</sub>,a<sub>i</sub>);(x<sub>i</sub>,y<sub>i</sub>)表示目标i的位置坐标信息,s<sub>i</sub>代表目标的大小,t<sub>i</sub>为目标出现的帧序号,a<sub>i</sub>目标i的颜色直方图;跟踪片段T<sub>k</sub>表示为<img file="FDA0000480173810000012.GIF" wi="500" he="79" />轨迹集合记为T={T<sub>k</sub>};T<sup>L</sup>,T<sup>M</sup>,T<sup>H</sup>分别对应着一级、二级和高级关联跟踪结果;二级关联跟踪是一个迭代过程:每一轮都将上一轮的输出作为下一轮的输入,继续关联;步骤2:改进的在线学习表观模型方法,所述方法包括如下步骤:首先,输入训练样本集;然后,分别提取正负样本集,其中正样本集表示为:S<sup>+</sup>={x<sub>i</sub>,+1}负样本集表示为:S‑={x<sub>i</sub>,‑1},特征池表示为:F={h(x<sub>i</sub>)};接下来,初始化样本的权重值,包括:1)得到样本的初始权值<maths num="0001" id="cmaths0001"><math><![CDATA[<mrow><msub><mi>&omega;</mi><mi>i</mi></msub><mo>=</mo><mfrac><mn>1</mn><mrow><mo>|</mo><msup><mi>S</mi><mo>+</mo></msup><mo>|</mo></mrow></mfrac><mo>,</mo><mi>if</mi><msub><mi>x</mi><mi>i</mi></msub><mo>&Element;</mo><msup><mi>S</mi><mo>+</mo></msup><mi>or</mi><msub><mi>&omega;</mi><mi>i</mi></msub><mo>=</mo><mfrac><mn>1</mn><mrow><mo>|</mo><msup><mi>S</mi><mo>-</mo></msup><mo>|</mo></mrow></mfrac><mo>,</mo><mi>if</mi><msub><mi>x</mi><mi>i</mi></msub><mo>&Element;</mo><msup><mi>S</mi><mo>-</mo></msup><mo>;</mo></mrow>]]></math><img file="FDA0000480173810000013.GIF" wi="875" he="158" /></maths>2)在t=1to T内循环计算在k=1,2,…,n内循环计算<maths num="0002" id="cmaths0002"><math><![CDATA[<mrow><mi>r</mi><mo>=</mo><munder><mi>&Sigma;</mi><mi>i</mi></munder><msub><mi>&omega;</mi><mi>i</mi></msub><msub><mi>y</mi><mi>i</mi></msub><msub><mi>h</mi><mi>k</mi></msub><mrow><mo>(</mo><msub><mi>x</mi><mi>i</mi></msub><mo>)</mo></mrow><msub><mi>v</mi><mi>k</mi></msub><mrow><mo>(</mo><msub><mi>x</mi><mi>i</mi></msub><mo>)</mo></mrow><mo>;</mo></mrow>]]></math><img file="FDA0000480173810000014.GIF" wi="507" he="115" /></maths><maths num="0003" id="cmaths0003"><math><![CDATA[<mrow><msub><mi>&alpha;</mi><mi>k</mi></msub><mo>=</mo><mfrac><mn>1</mn><mn>2</mn></mfrac><mi>ln</mi><mfrac><mrow><mn>1</mn><mo>+</mo><mi>r</mi></mrow><mrow><mn>1</mn><mo>-</mo><mi>r</mi></mrow></mfrac><mo>;</mo></mrow>]]></math><img file="FDA0000480173810000015.GIF" wi="314" he="127" /></maths>结束循环选择使<maths num="0004" id="cmaths0004"><math><![CDATA[<mrow><munder><mi>&Sigma;</mi><mi>i</mi></munder><msub><mi>&omega;</mi><mi>i</mi></msub><mi>exp</mi><mrow><mo>(</mo><mo>-</mo><msub><mi>&alpha;</mi><mi>k</mi></msub><msub><mi>y</mi><mi>i</mi></msub><msub><mi>h</mi><mi>k</mi></msub><mrow><mo>(</mo><msub><mi>x</mi><mi>i</mi></msub><mo>)</mo></mrow><msub><mi>v</mi><mi>k</mi></msub><mrow><mo>(</mo><msub><mi>x</mi><mi>i</mi></msub><mo>)</mo></mrow><mo>)</mo></mrow></mrow>]]></math><img file="FDA0000480173810000016.GIF" wi="616" he="116" /></maths>最小的k<sup>*</sup>同时更新α<sub>t</sub>、h<sub>t</sub>、v<sub>t</sub>的值:<maths num="0005" id="cmaths0005"><math><![CDATA[<mrow><msub><mi>&alpha;</mi><mi>t</mi></msub><mo>=</mo><msubsup><mi>&alpha;</mi><mi>k</mi><mo>*</mo></msubsup><mo>,</mo><msub><mi>h</mi><mi>t</mi></msub><mo>=</mo><msubsup><mi>h</mi><mi>k</mi><mo>*</mo></msubsup><mo>,</mo><msub><mi>v</mi><mi>t</mi></msub><mo>=</mo><msubsup><mi>v</mi><mi>k</mi><mo>*</mo></msubsup></mrow>]]></math><img file="FDA0000480173810000017.GIF" wi="465" he="82" /></maths>再然后,更新样本的权重值:ω<sub>i</sub>=ω<sub>i</sub>exp(‑α<sub>k</sub>y<sub>i</sub>h<sub>k</sub>(x<sub>i</sub>)v<sub>k</sub>(x<sub>i</sub>));归一化样本的权重值ω<sub>i</sub>.结束循环3)最后输出学习结果:<img file="FDA0000480173810000021.GIF" wi="416" he="140" />步骤3:通过构建MAP方程,将初始关联得到的可靠跟踪轨迹继续关联;首先定义一个最优分配矩阵<img file="FDA0000480173810000022.GIF" wi="314" he="86" />采用匈牙利方法都能得到关联矩阵C的最优匹配;对于任意<img file="FDA0000480173810000023.GIF" wi="161" he="87" />包括:1)如果i=j≤n,则<img file="FDA0000480173810000024.GIF" wi="72" he="83" />是一个虚警;2)如果i,j≤n并且i≠j,则将<img file="FDA0000480173810000025.GIF" wi="78" he="78" />的首、尾相连;3)如果i=j+n,则将<img file="FDA0000480173810000026.GIF" wi="62" he="77" />初始化为关联跟踪轨迹的头;4)如果i+n=j,则将<img file="FDA0000480173810000027.GIF" wi="71" he="78" />初始化为关联跟踪轨迹的尾;最终,计算得到最优的关联L<sup>*</sup>以及相对应的跟踪片段集合T<sup>M</sup>;步骤4:采用智能探测外推法,将二次关联所得的跟踪片段进行再次关联;智能探测策略推演法包括目标增长与收缩策略、目标轨迹拆分与合并策略和轨迹删除与添加策略。
地址 210023 江苏省南京市亚东新城区文苑路9号