DSD: Regularizing Deep Neural Networks with Dense-Sparse-Dense 解析与实验
最近想压缩一个模型,但是网上居然没有这个文章的解析。这里,我写一下压缩神经网络的理解与实验过程。关键部分译文【原文】Thedownsideofsuchlargemodelsisthattheyarepronetocapturingthenoise,ratherthantheintendedpattern,inthetrainingdataset.Thisnoisedoesnotgeneralize