ECCVAug, 2020

利用无线电信号进行居家日常生活字幕

PDF
TL;DR该论文介绍了一种通过分析家庭中的隐私保护无线电信号和楼层图来实现对日常生活进行文字描述的新模型 RF-Diary，可以穿过墙壁或障碍物，在暗条件下持续准确描绘人们的行动和物品交互，相对于传统视频字幕，具有更好的隐私保护。
daily life captioningprivacy-preserving radio signal analysismulti-modal feature alignmentfloormapocclusion
发现论文，激发创造
  • 深度日记：生活记录图像流的自动生成字幕

    提出使用深度学习技术和自动图像字幕生成算法来生成 Lifelogging 摄像机捕捉到的图片的文本表示，通过应用时间一致性约束来创建更加简洁和不含噪声的摘要，研究结果表明，自动字幕生成算法可以帮助用户管理 Lifelogging 照片集合。

    Aug, 2016

  • 利用无线电信号学习人员再认证的长期表示

    本文提出了一种新方法 (RF-ReID)，利用无线电信号 (RF signals) 替代传统 RGB 摄像头的照片 / 视频。RF 信号既可以穿透衣服，又可以反射身体，并且能捕捉身体大小和形状等更具持久性的特征，因此可以在长时间的不同天气、着装等情况下识别同一人，并且可以在存在遮挡或者光线照射不充足情况下进行识别。与照片和视频不同，RF 信号是更加隐私保护的数据，因此可以被用于在医疗保健等隐私敏感领域进行人员识别。

    Apr, 2020

  • 利用无线电信号进行人类感知的无监督学习

    本论文旨在探索无人标记的射频信号数据在无监督学习下，是否能适应基于 RGB 的表示学习，并表明这种方法在多种任务上已经超过了基于射频信号的人体感知的最新成果，为来自这种新颖方式的无监督表征学习开辟了可能性。

    Jul, 2022

  • 面向日常任务的关系型未来字幕模型，用于解释可能的碰撞

    本文提出了 Relational Future Captioning Model (RFCM) 的跨语言生成模型，用于预测将来事件的字幕，该模型可帮助家用服务机器人有效提取事件之间的关系，从而更好地判断未来事件的风险和方案，实验结果表明该模型在两个数据集上优于基线方法。

    Jul, 2022

  • 利用 RF 感应技术识别美国手语

    使用射频传感器网络获取美国手语数据用于机器学习，可在不侵入生活的情况下为聋人社区设计无创的远程手语识别的智能环境。

    Sep, 2020

  • RFMask：基于无线电信号的人体轮廓分割简单基准线

    本文提出利用毫米波雷达信号分割人体轮廓的 RFMask 框架，包括信号处理、人体检测和遮罩生成三个模块，实验结果表明该方法在低光照和遮挡等场景下仍能有出色的成果，是首个在毫米波信号基础上分割人体轮廓的研究。

    Jan, 2022

  • 自监督无线电视觉对应实现本地化

    该研究提出了 MaxRay 数据集和基准测试，以便了解通过提取无标签的自我坐标来训练无监督的无线电定位器网络如何在精确目标定位方面表现。结果表明，可以实现精确的无线电目标定位，这对于实现统一通信感知基础架构上的强大的无线电感知至关重要。

    Jun, 2022

  • 使用灵活且可扩展的软件定义无线电进行深度学习的非接触式人类活动识别

    本研究基于 Wi-Fi CSI 研究人体活动识别，提出一种使用深度学习方法的系统，并比较了卷积神经网络、长短期记忆网络和混合模型的效果，结果表明 LSTM 的平均准确率达到 95.3％，相比 CNN 和混合技术更加有效，未来需要在不同的复杂环境中研究其稳健性。

    Apr, 2023

  • 利用 Wi-Fi 信号实现人体轮廓和骨架视频合成

    本文提出了一种利用无线电信号生成可见光图像的新方法，采用双分支生成神经网络使用跨模态监督策略对视觉域内的基于信号的特征进行条件化，最终仅使用 Wi-Fi 信号成功地合成了人类轮廓和骨架视频。

    Mar, 2022

  • 通过环境无线线索在野外进行人脸识别的自主学习

    本研究提出使用智能无线设备作为监督标签，通过 AutoTune 技术学习并完善人脸识别系统，实现无需用户干预的特定环境下不断演进的面部识别系统。

    Aug, 2019