典型文献
深度神经网络Softmax函数定点算法设计
文献摘要:
由于Softmax函数涉及高精度自然指数和浮点除法计算,深度神经网络推理计算占用大量硬件资源,导致神经网络部署难题.本文提出一种浮点数量化和定点计算方法,只用定点加法、移位操作即可实现精度高的Softmax函数值计算,满足高效推理需求.借助本文算法深度神经网络将易于部署到各种定点硬件平台,减少硬件资源占用,对神经网络部署应用启到促进作用.
文献关键词:
深度神经网络;Softmax函数;激活函数;定点;量化
中图分类号:
作者姓名:
黄光红;林广栋;吴尔杰;赵旭东;宋亮亮
作者机构:
安徽芯纪元科技有限公司;中国电子科技集团公司第三十八研究所
文献出处:
引用格式:
[1]黄光红;林广栋;吴尔杰;赵旭东;宋亮亮-.深度神经网络Softmax函数定点算法设计)[J].中国集成电路,2022(07):60-64
A类:
点加法
B类:
深度神经网络,Softmax,点算,算法设计,自然指数,除法,硬件资源,网络部署,浮点数,数量化,只用,移位,位操作,函数值,硬件平台,资源占用,激活函数
AB值:
0.337521
相似文献
机标中图分类号,由域田数据科技根据网络公开资料自动分析生成,仅供学习研究参考。