典型文献
基于稀疏约束滤波器剪枝策略的模型压缩方法
文献摘要:
针对现有滤波器剪枝逐层固定比率修剪导致的模型性能及自适应能力不足,提出一种基于稀疏约束的滤波器剪枝方法.将批归一化(batch normalization,BN)层的比例因子作为特征图及滤波器重要性权重,对其进行稀疏正则化训练,经排序计算出全局最优阈值,修剪出最优子网络;通过提出全局-局部阈值策略,解决剪枝率过大导致的断层现象;采用过参数化卷积方法,在保持模型大小的前提下,提升剪枝模型性能.实验结果表明,提出方法在压缩性能及自适应性上优于现有剪枝方法.
文献关键词:
滤波器剪枝;轻量化;BN层;稀疏约束;全局-局部阈值策略;过参数化卷积
中图分类号:
作者姓名:
董燕;刘小辉;汤水利;刘洲峰;李春雷
作者机构:
中原工学院 电子信息学院,河南 郑州 450007;恒天重工股份有限公司 技术开发中心,河南 郑州 450000
文献出处:
引用格式:
[1]董燕;刘小辉;汤水利;刘洲峰;李春雷-.基于稀疏约束滤波器剪枝策略的模型压缩方法)[J].计算机工程与设计,2022(09):2542-2548
A类:
过参数化卷积
B类:
稀疏约束,滤波器剪枝,模型压缩,压缩方法,逐层,定比,修剪,模型性能,自适应能力,剪枝方法,批归一化,batch,normalization,BN,比例因子,特征图,器重,稀疏正则化,全局最优,最优阈值,剪出,子网络,局部阈值,阈值策略,压缩性能,自适应性
AB值:
0.351119
相似文献
机标中图分类号,由域田数据科技根据网络公开资料自动分析生成,仅供学习研究参考。