文章

OREPA:阿里提出训练也很快的重参数策略,内存减半,速度加倍 | CVPR 2022

<blockquote论文提出了在线重参数方法OREPA,在训练阶段就能将复杂的结构重参数为单卷积层,从而降低大量训练的耗时。为了实现这一目标,论文用线性缩放层代替了训练时的BN层,保持了优化方向的多样性和特征表达能力。从实验结果来看,OREPA在各种任务上的准确率和效率都很不错<br/ 

已加载文章中没有匹配内容,试试其他关键词或清空搜索。