基于动态映射的卷积神经网络量化重训练方法

来源 :信息技术 | 被引量 : 0次 | 上传用户:youtodown1
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
伴随着神经网络实际效果的不断提升,网络的参数规模和计算量越来越大,这为神经网络的部署带来了较大的困难。文中提出了一种基于动态映射的网络量化方法,通过重新设计一些常见的神经网络计算单元,可以将网络中的参数量化到指定位数的定点数;同时在特定约束条件下,理论上支持在指定位数定点数下对该神经网络进行微调训练。文中通过相关实验证明了此量化方法和重训练方法是简洁有效的,并且优于现有的开源方法。
其他文献
本文主要是针对目前学者在分析清代陕南生态环境变迁时忽视自然因素的缺憾,通过对灾害史料的参数化分析,指出气候变化与环境变迁之间的复杂关系.我们认为,清代陕南地区生态环
文中提出一种基于卷积神经网络的PCB板缺陷检测算法,能够有效识别和分类常见的电路版缺陷。该方法进行图像预处理,对缺陷图像与参考图像采取图像配准和差分得出感兴趣区域,经过数据扩张汇总成数据集。通过对部分结构针对性添加SE模块来改进Inception-ResNet-v2模型,将Leaky ReLU作为激活函数。文中模型在测试集上对缺陷分类的正确率提升到了96.43%,提升了至少3%。
自然的山水孕育着自然的文化.植根于自然的文化无处不浸透着人类原生态的生存意指--食与色.高古苍茫的巴山、秀丽艳冶的汉水孕育出的就是这样的文化.张宣强的<美女晒羞>既展
为了进一步提高模型量化技术对卷积神经网络的压缩作用,文中介绍了一种混合精度量化方法。该方法将会把模型各层的权重量化成不同的精度,从而获得体积更小的模型。文中还介绍