发明名称 基于显著性特征和迁移增量学的多摄像机目标识别方法
摘要 本发明公开了一种基于显著特征和迁移增量学的多摄像机目标识别方法,包括如下步骤:步骤1提取灰度直方图特征并归一化,步骤2提取显著性特征,步骤3特征融合,步骤4分类识别。本发明融合显著性特征和灰度直方图特征构造目标的外观特征模型,采用基于迁移增量学的方法作为分类器,在摄像机之间时空关联信息未知,无需摄像机标定的情况下,解决了摄像机视野不重叠时的目标识别问题。本发明的特点主要有一下两点:1)仅需要少量的训练样本,就能得到一个高效、鲁棒的目标识别模型;2)能够准确地识别新的目标。本发明适用于实时的无重叠域多摄像机长距离目标跟踪。
申请公布号 CN103984955B 申请公布日期 2017.02.22
申请号 CN201410165717.1 申请日期 2014.04.23
申请人 浙江工商大学 发明人 王慧燕;刘日积;王勋
分类号 G06K9/62(2006.01)I;H04N7/18(2006.01)I 主分类号 G06K9/62(2006.01)I
代理机构 杭州天正专利事务所有限公司 33201 代理人 王兵;黄美娟
主权项 基于显著特征和迁移增量学习的多摄像机目标识别方法,包括以下步:步骤1提取灰度直方图特征并归一化:p(r<sub>k</sub>)=n<sub>k</sub>/MN其中r<sub>k</sub>是第k级灰度级,n<sub>k</sub>是图像中灰度为r<sub>k</sub>的像素个数,M和N分别为图像的行和列的维数,p(r<sub>k</sub>)是灰度级r<sub>k</sub>在图像中出现的概率;灰度直方图特征:<maths num="0001"><math><![CDATA[<mrow><mover><msub><mi>F</mi><mi>h</mi></msub><mo>&RightArrow;</mo></mover><mo>=</mo><mrow><mo>(</mo><mi>p</mi><mo>(</mo><msub><mi>r</mi><mn>0</mn></msub><mo>)</mo><mo>,</mo><mi>p</mi><mo>(</mo><msub><mi>r</mi><mn>1</mn></msub><mo>)</mo><mo>,</mo><mo>...</mo><mo>,</mo><mi>p</mi><mo>(</mo><msub><mi>r</mi><mn>255</mn></msub><mo>)</mo><mo>)</mo></mrow></mrow>]]></math><img file="FDA0001116543220000011.GIF" wi="750" he="79" /></maths>步骤2提取显著性特征:显著性特征是基于区域对比度的视觉显著性区域检测算法,同时考虑了全局对比度和空间相干性;其步骤如下,(2.1)计算图像像素显著值,得到显著图像;这里采用带权值的区域对比度方法,来增强区域的空间影响效果,简单地说,就是近邻的区域影响增大,较远的区域影响减小,对于任意区域r<sub>k</sub>,显著性值定义为:<maths num="0002"><math><![CDATA[<mfenced open = "" close = ""><mtable><mtr><mtd><mrow><mi>S</mi><mrow><mo>(</mo><msub><mi>r</mi><mi>k</mi></msub><mo>)</mo></mrow><mo>=</mo></mrow></mtd></mtr><mtr><mtd><mrow><msub><mi>&Sigma;</mi><mrow><msub><mi>r</mi><mi>k</mi></msub><mo>&NotEqual;</mo><msub><mi>r</mi><mi>i</mi></msub></mrow></msub><mi>exp</mi><mrow><mo>(</mo><mo>-</mo><msub><mi>D</mi><mi>s</mi></msub><mo>(</mo><mrow><msub><mi>r</mi><mi>k</mi></msub><mo>,</mo><msub><mi>r</mi><mi>i</mi></msub></mrow><mo>)</mo><mo>/</mo><msubsup><mi>&sigma;</mi><mi>s</mi><mn>2</mn></msubsup><mo>)</mo></mrow><mi>&omega;</mi><mrow><mo>(</mo><msub><mi>r</mi><mi>i</mi></msub><mo>)</mo></mrow><msub><mi>D</mi><mi>r</mi></msub><mrow><mo>(</mo><msub><mi>r</mi><mi>k</mi></msub><mo>,</mo><msub><mi>r</mi><mi>i</mi></msub><mo>)</mo></mrow></mrow></mtd></mtr></mtable></mfenced>]]></math><img file="FDA0001116543220000012.GIF" wi="1110" he="183" /></maths>其中,ω(r<sub>i</sub>)为区域ri的权值,D<sub>s</sub>(r<sub>k</sub>,r<sub>i</sub>)为区域r<sub>k</sub>和r<sub>i</sub>的空间距离,D<sub>r</sub>(r<sub>k</sub>,r<sub>i</sub>)为两个区域r<sub>k</sub>和r<sub>i</sub>的颜色距离:<maths num="0003"><math><![CDATA[<mrow><msub><mi>D</mi><mi>r</mi></msub><mrow><mo>(</mo><msub><mi>r</mi><mn>1</mn></msub><mo>,</mo><msub><mi>r</mi><mn>2</mn></msub><mo>)</mo></mrow><mo>=</mo><msubsup><mi>&Sigma;</mi><mrow><mi>i</mi><mo>=</mo><mn>1</mn></mrow><msub><mi>n</mi><mn>1</mn></msub></msubsup><msubsup><mi>&Sigma;</mi><mrow><mi>j</mi><mo>=</mo><mn>1</mn></mrow><msub><mi>n</mi><mn>2</mn></msub></msubsup><mi>f</mi><mrow><mo>(</mo><msub><mi>c</mi><mrow><mn>1</mn><mo>,</mo><mi>i</mi></mrow></msub><mo>)</mo></mrow><mi>f</mi><mrow><mo>(</mo><msub><mi>c</mi><mrow><mn>2</mn><mo>,</mo><mi>j</mi></mrow></msub><mo>)</mo></mrow><mi>D</mi><mrow><mo>(</mo><msub><mi>c</mi><mrow><mn>1</mn><mo>,</mo><mi>i</mi></mrow></msub><mo>,</mo><msub><mi>c</mi><mrow><mn>2</mn><mo>,</mo><mi>j</mi></mrow></msub><mo>)</mo></mrow></mrow>]]></math><img file="FDA0001116543220000013.GIF" wi="1158" he="94" /></maths>其中,f(c<sub>k,i</sub>)为第i个颜色c<sub>k,i</sub>在第k个区域r<sub>k</sub>的所有n<sub>k</sub>种颜色中出现的概率;(2.2)将显著性图像转换为特征向量;用p<sub>i,j</sub>表示(2.1)中显著性图像的第i行,第j列的像素;显著性特征向量:<maths num="0004"><math><![CDATA[<mrow><mover><msub><mi>F</mi><mi>s</mi></msub><mo>&RightArrow;</mo></mover><mo>=</mo><mrow><mo>(</mo><msub><mi>p</mi><mrow><mn>0</mn><mo>,</mo><mn>0</mn></mrow></msub><mo>,</mo><msub><mi>p</mi><mrow><mn>0</mn><mo>,</mo><mn>1</mn></mrow></msub><mo>,</mo><mo>...</mo><mo>,</mo><msub><mi>p</mi><mrow><mi>i</mi><mo>,</mo><mi>j</mi></mrow></msub><mo>,</mo><mo>...</mo><mo>,</mo><msub><mi>p</mi><mrow><mi>M</mi><mo>-</mo><mn>1</mn><mo>,</mo><mi>N</mi><mo>-</mo><mn>1</mn></mrow></msub><mo>)</mo></mrow></mrow>]]></math><img file="FDA0001116543220000014.GIF" wi="925" he="87" /></maths>其中,M和N分别表示为显著性图行和列的维数;(2.3)显著性特征向量归一化;步骤3特征融合:将上述步骤(2.1)(2.2)得到的两个特征向量合并在一起,得到:<maths num="0005"><math><![CDATA[<mrow><mover><mi>F</mi><mo>&RightArrow;</mo></mover><mo>=</mo><mrow><mo>(</mo><mover><msub><mi>F</mi><mi>s</mi></msub><mo>&RightArrow;</mo></mover><mo>,</mo><mover><msub><mi>F</mi><mi>h</mi></msub><mo>&RightArrow;</mo></mover><mo>)</mo></mrow></mrow>]]></math><img file="FDA0001116543220000021.GIF" wi="310" he="79" /></maths>步骤4分类识别:采用迁移增量学习的方法,基于LSSVM算法的改进,其核心是求解:<maths num="0006"><math><![CDATA[<mfenced open = "" close = ""><mtable><mtr><mtd><mrow><msub><mi>min</mi><mrow><mi>W</mi><mo>,</mo><msub><mi>w</mi><mrow><mi>N</mi><mo>+</mo><mn>1</mn></mrow></msub><mo>,</mo><mi>b</mi></mrow></msub><mfrac><mn>1</mn><mn>2</mn></mfrac><mo>|</mo><mo>|</mo><mi>W</mi><mo>-</mo><msup><mi>W</mi><mo>&prime;</mo></msup><mo>|</mo><msubsup><mo>|</mo><mi>F</mi><mn>2</mn></msubsup><mo>+</mo><mfrac><mn>1</mn><mn>2</mn></mfrac><mo>|</mo><mo>|</mo><msub><mi>W</mi><mrow><mi>N</mi><mo>+</mo><mn>1</mn></mrow></msub><mo>-</mo><msup><mi>W</mi><mo>&prime;</mo></msup><mi>&beta;</mi><mo>|</mo><msubsup><mo>|</mo><mi>F</mi><mn>2</mn></msubsup></mrow></mtd></mtr><mtr><mtd><mrow><mo>+</mo><mfrac><mi>C</mi><mn>2</mn></mfrac><msubsup><mi>&Sigma;</mi><mrow><mi>i</mi><mo>=</mo><mn>1</mn></mrow><mi>M</mi></msubsup><msubsup><mi>&Sigma;</mi><mrow><mi>n</mi><mo>=</mo><mn>1</mn></mrow><mrow><mi>N</mi><mo>+</mo><mn>1</mn></mrow></msubsup><msup><mrow><mo>(</mo><mrow><msubsup><mi>W</mi><mi>n</mi><mi>T</mi></msubsup><mover><mi>F</mi><mo>&RightArrow;</mo></mover><mo>+</mo><msub><mi>b</mi><mi>n</mi></msub><mo>-</mo><msub><mi>Y</mi><mrow><mi>i</mi><mi>n</mi></mrow></msub></mrow><mo>)</mo></mrow><mn>2</mn></msup></mrow></mtd></mtr></mtable></mfenced>]]></math><img file="FDA0001116543220000022.GIF" wi="1212" he="227" /></maths>其中,W′=[w′<sub>1</sub>,…w′<sub>N</sub>]表示是由源样本经过LSSVM方法得到的超平面,W=[w<sub>1</sub>,…,w<sub>N</sub>]表示由训练样本经过上面公式得到的超平面;w<sub>N</sub>,w′<sub>N</sub>表示从N个类别里面分离出一个来的超平面;β是每个源模型的权重系数;Y是类别标签矩阵,b<sub>n</sub>是常量,||*||<sub>F</sub>表示弗罗宾尼斯范数。
地址 310018 浙江省杭州市下沙高教园区学正街18号