视觉唤醒词数据集
通过介绍 Wake Vision 数据集,我们针对 TinyML 视觉感知的人员检测任务,提供了一种大规模、多样化的数据集,并在测试数据的特定段上提供了五个详细的基准集,以评估模型在挑战性现实场景中的性能,从而使得使用 Wake Vision 进行训练相对于已建立的基准可以提高 2.41%的准确性。
May, 2024
本文提出了一种名为 MCUFormer 的硬件算法协同优化方法,用于在内存极为有限的微控制器上部署视觉变换器,实现图像分类任务,通过考虑降维尺寸和补丁分辨率来扩展视觉变换器的搜索空间,并通过操作符集成、补丁嵌入分解和令牌覆写等方法来构建视觉变换器的推理操作库,实验结果表明 MCUFormer 在 STM32F746 微控制器上实现了 320KB 内存的 ImageNet 图像分类任务的 73.62%的 Top-1 准确率。
Oct, 2023
本文介绍了一种在微控制器上运行的小型模型,可用于边缘计算中的关键词检测,该模型采用卷积神经网络进行训练并针对微控制器限制中的深度学习和低延迟要求进行了简化,还评估了在微控制器上不同的修剪和量化方法对系统性能的影响。
Aug, 2022
本研究旨在针对资源受限的微控制器上运行的关键词检测(Keyword spotting,KWS)应用,对神经网络架构进行评估和探索。我们训练了各种已经在文献中发表的用于关键词检测的神经网络架构,比较了它们的准确性和存储器 / 计算要求。我们表明,我们可以优化这些神经网络架构来适应微控制器的存储器和计算限制,而不会牺牲准确性。此外,我们进一步探索了深度可分离卷积神经网络(DS-CNN),并将其与其他神经网络架构进行了比较。DS-CNN 实现了 95.4%的准确性,比具有类似参数数量的 DNN 模型高出约 10%。
Nov, 2017
本文提出了一种适用于微控制器单元 (MCUs) 的无电池 ML 推理和模型个性化管道,使用此管道在深海中进行了鱼类图像识别并比较其准确性,运行时长,功率和能源消耗等优劣,结果表明,在 MCUs 上可以实现 97.78%的精度,达到了无电池 ML 推理的可行性。
May, 2023
本文介绍了如何在内存受限的微控制器单元(MCU)上部署卷积神经网络(CNN),并提出了一种自动设计 CNN 的框架 Sparse Architecture Search,将神经架构搜索与剪枝相结合,通过在 IoT 数据集上的测试,证明了这种方法可以在满足 MCU 内存限制的同时实现更好的性能。
May, 2019
本文介绍了一个新的深度神经网络量化和部署的框架,MicroAI,并研究了在低功耗 32 位微控制器上应用该框架的优化方法和效果。通过对三个不同数据集 (UCI-HAR、Spoken MNIST 和 GTSRB) 的评估,与两种已有的嵌入式推理引擎 (TensorFlow Lite for Microcontrollers 和 STM32CubeAI) 的比较和在 ARM Cortex-M4F 微控制器 (Ambiq Apollo3 和 STM32L452RE) 上的验证,证明了 MicroAI 具有更好的内存和功耗效率。
May, 2021
本研究提出了 MCUNet 框架,该框架共同设计了高效的神经结构(TinyNAS)和轻量级推断引擎(TinyEngine),使得可以在微控制器上进行 ImageNet 规模的推理。
Jul, 2020
本文比较了四种最先进的算法在两个实际应用中的效果,其中之一是基于加速度计数据的手势识别,另一个是图像分类,结果证实了这些系统的可靠性和在微型存储器 MCUs 中部署的可行性。
Sep, 2022
研究使用检索增强模型来提高计算机视觉任务的识别能力,引入了一种基于注意力机制的记忆模块,学习从外部记忆集合中检索出的每个例子的重要性,证明了使用 10 亿个图像 - 文本对的大规模记忆数据集的好处,并在 ImageNet-LT,Places-LT 和 Webvision 数据集中取得了最先进的准确性。
Apr, 2023