字号:

实用锦囊 智能“屏保膜”让盲人更好地“玩手机”

2020年05月18日 来源:盲人月刊

崔爽

拿出手机买东西、交水电费、定外卖……这些普通人看来随手可得的日常生活对于视障人士来说却遥不可及。不过为了他们不掉队,技术人员也没放弃努力。阿里巴巴自然交互体验联合实验室公布了一项人机交互研究新成果,首次打通了语音和触感两大感官系统,为盲人朋友更好地“玩手机”提供了一种新可能。

据阿里巴巴人机自然交互实验室研究员介绍,这种新的盲人触感反馈技术叫Smart Touch。具体做法是给手机贴一个新的“屏幕保护膜”,上面有支持触觉交互的“盲键”按钮,通过这个“盲键”按钮提供触觉。更重要的是根据页面的动态变化,“盲键”对应的功能也随之改变,可以有效地提升交互效率和用户体验。

弥补语音交互的不足

目前,视障用户通常使用读屏软件操作手机,用手指触摸屏幕后由读屏软件提供语音反馈。但这样的交互方式还存在很多问题,比如缺少触觉反馈,用户经常需要访问大量不需要的内容,容错率低、纠错成本高且频繁,所以视障用户使用起来的用户体验并不是很好。因此,开发者希望增加听觉、触觉等其他交互手段,以弥补单纯语音交互的不足,从而增加视障用户人机交互的便利。

Smart Touch之所以可以实现“盲键”功能在不同页面的功能变化,离不开自动理解页面信息的智能算法。该算法首先提取界面的语义和主要功能,然后以符合视障用户心理模型的方式映射到触觉“盲键”按钮上。因此,和现有的技术相比,Smart Touch不单提供语音交互,还提供基于界面内容理解的触觉“盲键”。

对于界面的主要功能按钮,视障用户也不再需要通过遍历的方式去使用,通过“盲键”可以层次化地访问界面元素,这大大改变了视障用户现在使用手机的方式,从现在的语音交互拓展到语音加触觉交互,为视障用户提供更高效更方便的用户体验。

让智能交互代替明眼人讲解

这项技术的核心主要有两部分:界面理解和界面交互。具体来说,界面理解指对界面语意的理解。目前手机界面上有很多不同的图标,大多数图标是一张图片加文字,目前的读屏软件读出来的是“未加标签”,Smart Touch 通过算法,可以自动地将图标和文本进行关联,为图标提供标签。“我们的研究发现视障用户在使用手机的时候希望有个明眼人在旁边,把界面上的内容讲解给他。Smart Touch算法的长期目标是希望可以达到像用户旁边的明眼人一样转达页面内容。目前版本上不同界面的‘盲键’是根据界面内容按规则变化的,随着算法的继续改进,以后界面的交互‘盲键’也会自动生成,这样可以支持更多的手机应用。”

低成本惠及弱势人群

视障用户去应用商店下载运行Smart Touch APP后,第一次需要先根据提示在手机界面相应位置贴上“盲键”按钮,然后就可以使用Smart Touch 提供的功能了。

“盲键”的成本非常低,目前使用的是普通的硅胶膜,很便宜成本很低,这样才可以使大多数视障用户可以用得上用得起,更重要的创新是背后的AI算法。以后开发者会对这个”盲键”进行更多的触感设计,让它有更清晰的触觉反馈,满足更多的应用程序的需要。未来可以免费发放给视障用户使用。

触觉是人与环境、人与人交互的一个重要通道,也是视障用户主要的信息通道,开发者希望通过这项技术创新可以帮助像视障用户这样的弱势群体,让他们的生活更愉快些。(责编 罗淑敏)

版权声明

  • 中国残疾人网站所有内容的版权均属于作者或页面内声明的版权人。未经中国残疾人网站许可,任何其他个人或组织均不得以任何形式将中国残疾人网站的各项资源转载、复制、编辑或发布用于其他任何场合;不得将其中任何形式的资讯散发给其他方,不可将这些信息在其他的服务器或文档中作镜像复制或保存;不得修改或再使用中国残疾人网站的任何资源。若有意转载本站信息资料,必需取得中国残疾人网站的授权。
  • 凡本网注明“来源:XXX(非中国残疾人网站)”的作品,均转载自其它媒体,转载目的在于传递更多信息,并不代表本网赞同其观点和对其真实性负责。本网转载其他媒体之稿件,意在为公众提供免费服务。如稿件版权单位或个人不想在本网发布,可与本网联系,本网视情况可立即将其撤除。
  • 若对该稿件内容有任何疑问或质疑,请即与中国残疾人网站联系,本网将迅速给您回应并做处理。
    电话:010-84639477 邮箱:chinadp08@126.com