发明名称 |
一种神经网络剪枝方法及装置 |
摘要 |
本发明公开了一种神经网络剪枝方法及装置,以解决现有技术中网络剪枝不能兼顾压缩、加速和精度的技术问题。该方法:根据待剪枝网络层中神经元的激活值,确定神经元的重要度值;根据所述待剪枝网络层中神经元与下一个网络层中神经元的连接权重,确定神经元的多样性值;根据所述待剪枝网络层中的神经元的重要度值和多样性值,采用体积最大化神经元选取策略从所述待剪枝网络层中选取保留的神经元;将所述待剪枝网络层中的其他神经元剪掉,得到剪枝网络层。本发明技术方案能够在确保神经网络精度的同时取得了较好的压缩和加速效果。 |
申请公布号 |
CN106548234A |
申请公布日期 |
2017.03.29 |
申请号 |
CN201611026107.9 |
申请日期 |
2016.11.17 |
申请人 |
北京图森互联科技有限责任公司 |
发明人 |
王乃岩 |
分类号 |
G06N3/08(2006.01)I |
主分类号 |
G06N3/08(2006.01)I |
代理机构 |
|
代理人 |
|
主权项 |
一种神经网络剪枝方法,其特征在于,所述方法包括:根据待剪枝网络层中神经元的激活值,确定神经元的重要度值;根据所述待剪枝网络层中神经元与下一个网络层中神经元的连接权重,确定神经元的多样性值;根据所述待剪枝网络层中的神经元的重要度值和多样性值,采用体积最大化神经元选取策略从所述待剪枝网络层中选取保留的神经元;将所述待剪枝网络层中的其他神经元剪掉,得到剪枝网络层。 |
地址 |
100020 北京市朝阳区光华路甲9号世贸商务楼6层 |