MobileNets:面向移动视觉应用的高效卷积神经网络
本文提出了一种新的基本架构模块 ANTBlock,以提高网络的表征能力,同时具有较低的计算成本和参数数量。在多个数据集上进行测试结果表明,ANTNet 在性能上优于基于移动设备低成本的卷积神经网络,其利用两层卷积之间通道间的关联性,进一步优化网络的表征能力。
Apr, 2019
本文提出了 MobileFaceNets 类的 CNN 模型,其使用不到 100 万个参数,专为移动和嵌入式设备上的高准确度实时人脸验证而设计,并成功解决了普通移动网络在人脸验证方面的弱点,达到了与数百 MB 大小的最新大型 CNN 模型相媲美的高精度和更多超过 MobileNetV2 2 倍的实际加速。
Apr, 2018
本文介绍了一种利用 MobileNet 二值化来进行激活函数和模型权重处理的简单而高效的方案,同时提出了一个新的神经网络结构 MoBiNet,通过跳连接来防止信息丢失和梯度消失,以便更好地进行训练,并在 ImageNet 数据集上进行了实验。结果表明,MoBiNet 在大大减少计算成本的情况下,实现了 54.40%的 top-1 准确率和可比较的准确性。
Jul, 2019
本文介绍了使用通道卷积压缩深度模型的方法,这种方法在 CNN 中替换特征图之间的稠密连接为稀疏连接,从而构建轻量级 CNN。ChannelNets 使用三种通道卷积的实例,并通过对 ImageNet 数据集进行实验来证明了其在参数和计算成本上的显著性降低,且不影响准确性。
Sep, 2018
本文提出了一种自动化的移动神经结构搜索(MNAS)方法,该方法将模型延迟明确地纳入主要目标,以便搜索可以识别满足准确性和延迟之间良好平衡的模型, 实验结果表明,该方法在多个视觉任务中始终优于现有的移动卷积神经网络模型,并且实现了更好的 mAP 质量。
Jul, 2018
本文系统研究了模型的缩放并提出了一种基于网络深度、宽度和分辨率的平衡方法,进而使用神经架构搜索设计了一种新的基线网络并扩展成一系列模型,称为 EfficientNets,这些 EfficientNets 在多项测试中取得了更好的准确性和效率,包括在 ImageNet 数据集上达到了 84.3% 的 top-1 准确率,在成为当前最佳的 ConvNet 的推理速度比其快 6.1 倍、参数更少的情况下,这是一个领先的结果。
May, 2019
我们推出了一种名为 ShuffleNet 的极度计算效率的卷积神经网络体系结构,专门为计算能力非常有限(例如 10-150 MFLOPs)的移动设备设计。该体系结构利用了两个新操作,即逐点组卷积和通道混洗,以大大降低计算成本,同时保持准确性。在 ImageNet 分类和 MS COCO 对象检测方面的实验表明,ShuffleNet 的性能优于其他结构,在 40 MFLOPs 的计算预算下,Top-1 错误率(绝对 7.8%)低于近期 MobileNet 的 ImageNet 分类任务。在基于 ARM 的移动设备上,ShuffleNet 实现了与 AlexNet 相比约 13 倍的实际加速,同时保持可比的准确性。
Jul, 2017
本文介绍了一种名为 CondenseNet 的新型神经网络体系结构,其使用学习组卷积方法实现了稠密连接,移除了那些无用的连接,并使得此模型比类似 MobileNets 和 ShuffleNets 的最先进紧凑卷积网络更为高效。
Nov, 2017