efficient dnns | BriefGPT - AI 论文速递

关键词efficient dnns

搜索结果 - 4

面向边缘设备的压缩网络对分布转移的鲁棒性
压缩网络在面对域转移和对抗扰动时的稳健性较原始网络较低，较大的网络比较小的网络更容易丧失稳健性，知识蒸馏得到的紧凑网络在面对域转移时比剪枝网络更稳健，后训练量化是一种可靠的方法，能显著提高稳健性，胜过剪枝和蒸馏模型的稳健性。
PDF5 months ago
用于高效深度神经网络的可微分广义结构矩阵学习
该论文研究了如何通过梯度下降学习结构化权重矩阵的一般化和可微分的框架，以取代常见神经网络模型中不透明的、层与层之间可能不同的密集矩阵，从而构建高性能且复杂度较低的高效深度神经网络。
PDF8 months ago
ICMLDepthShrinker：一种压缩范例，用于提高紧凑型神经网络在实际硬件中的效率
本研究提出了一种新的压缩范式：DepthShrinker，可通过将现有深度神经网络的基本构建块缩小为具有更改进的硬件利用率的密集块来开发硬件友好的紧凑网络，从而提高硬件效率并维持模型准确性，DepthShrinker 框架能够提供优于当今最
PDF2 years ago
EmBench：量化现代通用设备上深度神经网络的性能变化
该研究使用各种普通设备系统地评估了一系列最先进的 DNN，识别了每种架构的潜在瓶颈，并提供了可以帮助社区协同设计更高效的 DNN 和加速器的重要指导方针。
PDF5 years ago