MotorEase: 移动应用程序界面中自动检测运动障碍可访问性问题
StateLens是一种能够让盲人通过逆向工程技术,辅助使用无障碍动态触摸屏的系统,其包含三个部分:基于视角视频使用混合众包-计算机视觉提取显示状态;生成对话代理协助用户操作;以及使用3D打印附件降低用户误操作风险。技术评估和用户试用表明StateLens能够精确还原接口并帮助盲用户成功地使用不易访问的动态触摸屏。
Aug, 2019
通过对RICO数据集进行标注并使用多模态输入,该论文提出可提高移动设备的可访问性和自动化功能以便于使用的方法,使用户能够更好地了解UI元素的功能,并提出了一些创新性的功能,如通过标签引用UI元素,提高图标的语义等,以使UI对每个人都更加可用。
Oct, 2022
本文利用大量自然驾驶数据和机器学习方法,预测车内触摸屏界面的可视需求和驾驶员视觉关注分配的影响因素,并提供局部和全局的解释说明,以帮助设计师评估当前设计并更好地预测和理解其对未来设计所可能产生的影响。
Jan, 2023
本文研究了使用自然语言和大型语言模型进行辅助技术控制以支持可访问性测试,并构建了一个系统,该系统使用大型语言模型和基于像素的用户界面理解模型执行测试并生成可分章节、可导航的视频,通过10名可访问性质量保证专业人员的用户研究评估,表明该工具在提高工作效率方面非常有用,并揭示了将大型语言模型应用于可访问性测试的未来工作方向。
Oct, 2023
通过使用基于大型语言模型的用户界面,以高度缩写的形式进行文本输入,提高了使用AAC设备的运动受限用户的文本输入速度。对于那些需要眼球追踪键盘等辅助和替代交流设备的人来说,这种方法可以节省大量的操作,实现更快的文本输入速度。
Dec, 2023
本论文通过全面的文献综述,提出了关于自动驾驶汽车中车内人机交互的现状,重点关注包容性和可访问性。论文的目标是检验自动驾驶汽车中包容性人机交互的用户中心设计原则,评估现有人机交互系统,并鉴定能够提升乘客体验的新兴技术。最后,提出了一个全面的车内体验设计框架,考虑了所有乘客的需求,包括残疾人或其他辅助性需求,以确保所有乘客能够安全舒适地使用这些车辆。
Jan, 2024
通过使用低成本的3D打印增强技术,我们引入了AccessLens系统,旨在识别日常物品中无法访问的接口,并推荐3D打印增强措施以提高可访问性。我们训练了一个检测器,使用AccessDB数据集来自动识别6种常见物品类别中的21种不可访问类别,同时AccessMeta提供了一个全面的词典,将这些可访问性类别与开源的3D增强设计相联系。实验证明我们的检测器在检测无法访问物品方面的性能。
Jan, 2024
通过实时修改文档对象模型和基础模型,利用较大型语言模型和提示工程技术,该论文提出了一种纠正网络可访问性违规的新方法,在我们的新基准ACCESS上,经过纠正后可将可访问性违规错误减少超过51%,展示了创造包容性网络内容的有价值方法,并为未来研究提供了探索自动化网络可访问性的高级方法的方向。
Jan, 2024
本研究评估了一种专门针对上肢障碍人群的自适应自由度控制方法,在逼真的日常任务环境中,通过24名参与者进行81次试验,使用三种不同的输入设备进行了受试间分析。研究主要关注主观定性数据,结果显示不论使用哪种输入设备,试验完成率始终高,参与者对研究过程表示赞赏,展现了积极的态度和对控制系统的快速适应能力。值得注意的是,每个参与者都能在短时间内有效地完成所给任务。
Jun, 2024
本研究解决了开发者在识别和修复移动应用程序无障碍问题时的难题,主要由于缺乏意识和有效工具。引入的FixAlly工具通过多代理大语言模型架构,为自动化扫描检测到的无障碍问题提供了代码修复建议。实证研究表明,FixAlly在生成与无障碍扫描器相符的修复建议方面有效性达到77%。
Aug, 2024