神经网络稀疏综述

神经网络稀疏综述 1. 稀疏的概念随着现代神经网络的规模不断提升，其消耗的内存，算力，能量都不断增加，这构成了在神经网络在实际应用中的瓶颈。如何尽可能的缩小网络同时又不损失其性能成为了一大神经网络方面的研究重点，目前常用的方法包括：剪枝，量化，网络结构搜索，知识蒸馏等。 a56爆大奖在线娱乐们现在讨论的神经网络稀疏