一种新的智能手机外壳可能很快就能让视力受损、震颤和痉挛的人独立使用触摸屏。由密歇根大学开发的BrushLens可以帮助用户感知、定位和点击触摸屏菜单上的按钮和按键,这些按钮和按键现在在餐馆的售货亭、自动取款机和其他公共终端上无处不在。
计算机科学与工程专业博士生陈亮(音译)表示:“我们身边的许多技术都需要对用户的能力进行一些假设,但看似直观的交互实际上对人们来说是一种挑战。”
Liang是一篇论文的第一作者,该论文被旧金山计算机协会用户界面软件与技术研讨会接受。他将在晚上7点演示BrushLens。太平洋时间10月30日上午9点提交论文。太平洋时间10月31日。
“人们必须能够在世界上操作这些难以接近的触摸屏。我们的目标是让每个人都能接触到这项技术。”
梁在密歇根大学计算机科学与工程助理教授郭安红的实验室工作。Guo与同一系的副教授Alanson Sample共同领导了BrushLens的开发。
用户可以通过将连接到BrushLens的手机放在触摸屏上,并在屏幕上拖动手机,来梳理触摸屏界面。手机通过摄像头看到屏幕上的内容,然后利用手机内置的屏幕阅读器大声读出选项。用户可以通过屏幕阅读器或BrushLens应用程序中易于点击的放大按钮来选择菜单。
当给定目标时,BrushLens将屏幕划分为网格,然后通过说出目标和设备的坐标来引导用户的手指向包含菜单选择的屏幕部分。一旦这些坐标重叠,手机壳底部的按钮或自动点击器就会为用户点击屏幕,具体取决于型号。
梁说:“用户不需要精确地定位按钮的位置,也不需要执行触摸手势。”
10名研究参与者测试了硬件和应用程序,其中6人有视觉障碍,4人有震颤或痉挛。
研究参与者山姆·劳说:“作为一个盲人,我几乎无法接触到触摸屏,除非我有一些帮助,或者我可以把耳机插到售货亭上。”“必须有人帮你点餐,或者他们必须帮助你。我不想处于一种总是需要依靠别人的好意的境地。”
劳花了一些时间才弄清楚BrushLens,但一旦他熟悉了这个设备,他就为这个工具的潜力感到兴奋。
我想。我自己走进一家帕涅拉面包店,可以从售货亭点餐,”劳说。“我真的可以看到自己完成了一些我原本认为不可能的事情。”
同样的,BrushLens也可以为那些因震颤或痉挛而在触摸屏上做出不必要选择的用户提供服务。对于一名患有脑瘫的参与者,BrushLens将准确率提高了近74%。
BrushLens的发明者最近在密歇根大学研究商业化中心创新伙伴关系的帮助下申请了专利。该团队希望将该产品作为一种价格实惠的手机配件带给用户。
“我们使用的部件相对便宜。每个点击器只要1美元。”“整个设备的价格肯定低于50美元,这是保守估计。”
该团队计划进一步简化他们的设计,使其更容易装入口袋。例如,将电池和处理过程交给手机,可以使设计更便宜,体积更小。
“它并不需要比电视遥控器复杂得多,”该研究的合著者、计算机科学与工程专业的博士生亚沙·伊拉万奇(Yasha Iravantchi)说。
梁说,配套的应用程序也可以通过允许用户通过语音命令直接与它交互来改进。
在残疾网络、密歇根大学残疾问题委员会和密歇根大学生物医学工程系詹姆斯·韦兰研究小组的帮助下,参与者被纳入了这项试验研究。
更多信息:陈亮等人,BrushLens:无障碍触摸屏界面驱动的硬件交互代理,第36届ACM用户界面软件与技术研讨会论文集(2023)。引文:新的手机壳为不可访问的触摸屏提供了解决方案(2023年,10月26日)2023年10月26日从https://techxplore.com/news/2023-10-case-workaround-inaccessible-screens.html检索此文档受版权保护。除为私人学习或研究目的而进行的任何公平交易外,未经书面许可,不得转载任何部分。内容仅供参考之用。