<xmp id="cu0k8"><small id="cu0k8"></small>
<xmp id="cu0k8"><rt id="cu0k8"></rt>
<tt id="cu0k8"></tt>
<tt id="cu0k8"><tt id="cu0k8"></tt></tt>

字号:

智能“屏保膜” 让盲人朋友更好地“玩手机”

2018年11月12日 来源:新华网 百家号

拿出手机买东西、交水电费、定外卖……这些普通人看来随手可得的日常对于视障人士来说却遥不可及。不过为了他们不掉队,技术人员也没放弃努力。

最近阿里联合清华大学—阿里巴巴自然交互体验联合实验室公布了一项人机交互研究新成果:一枚AI盲键,首次打通了语音和触感两大感官系?#24120;?#20026;盲人朋友更好“玩手机”提供了一种新可能。

据阿里巴巴人机自然交互实验室研究员赵晨介绍,这种新的盲人触感反馈技术叫Smart Touch。具体做法是给手机贴一个新的“屏幕保护膜?#20445;?#19978;面有支持触觉交互的“盲键?#20445;?#36890;过低成本的屏幕盲键按钮提供触觉。更重要的是根据页面的动态变化,盲键对应的功能也随之改变,提升交互效率和?#27809;?#20307;验。

屏幕快照 2018-11-12 下午9.15.26.png

弥补语音交互的不足

目前,视障?#27809;?#36890;常使用读屏软件操作手机,用手指触摸屏幕后由读屏软件提供语音反馈。“但这样的交互方?#20132;?#23384;在很多问题,比如缺少触觉反馈,?#27809;?#32463;常需要访问大量不需要的元素,容错?#23454;汀⒕来?#25104;本高且频?#20445;?#25152;以视障?#27809;?#20351;用起来的?#27809;?#20307;验并不是很好。”清华大学计算机系教授喻纯表示。因此,他们希望增加听觉、触觉等其它交互手段,以弥补单纯语音交互的不足,从而增加视障?#27809;?#20154;机交互的便利。

Smart Touch之所以可以实现盲键功能在不同页面的功能变化,离不开自动理解页面信息的智能算法。“该算法首先提取界面的语义和主要功能,然后以符合视障?#27809;?#24515;理模型的方式?#25104;?#21040;触觉盲键按钮上。因此,和现有的技术相比,Smart Touch不单提供语音交互,还提供基于界面内容理解的触觉盲键。”喻纯说。

对于界面的主要功能按钮,视障?#27809;?#20063;不再需要通过遍历的方式去使用,通过盲键可以层次化地访?#24335;?#38754;元素,这大大改变了视障?#27809;?#29616;在使用手机的方式,从现在的语音交互拓展到语音加触觉交互,为视障?#27809;?#25552;供更高效更方便的?#27809;?#20307;验。

让智能交互代替明眼人讲解

“我们技术的核心主要有?#35762;?#20998;?#33322;?#38754;理解和界面交互。具体来说,界面理解指对界面语意的理解。?#26412;?#21947;纯介绍,界面的内容包括三层:第一层解决“未加标签”控件。目前手机界面上有很多不同的图标,大多数图标是一张图片加文字,目前的读屏软件读出来的是“未加标签?#20445;琒mart Touch 通过算法自动地将图标和文本进行关联,为图标提供标签。第二层对手机界面的逻辑区块做自动识别,形成界面元素的层级组织。第三层则对界面的交互语义做理解,将界面依据视障?#27809;?#30340;心理模型读出来。

“我们的研究发现视障?#27809;?#22312;使用手机的时候希望有个明眼人在?#21592;擼?#25226;界面上的内容讲解给他/她。Smart Touch算法的长期目标是希望可?#28304;?#21040;像?#27809;员叩拿?#30524;人一样转达页面内容。”喻纯说,“目前版本上不同界面的盲键是根据界面内容按规则变化的,随着我们算法的继续改进,以后界面的交互盲键?#19981;?#33258;动生成,这样可以支持更多的手机应用。”

低成本惠及弱势人群

“视障?#27809;?#21435;应用商店下载运行Smart Touch APP后,第一次需要先根据提示在手机界面相应位置贴上‘盲键’按钮,然后就可以使用Smart Touch 提供的功能了。”

落到实用性,赵晨表示盲键的成本非常低,“我们目前使用的是普通的硅胶膜,很便宜成本很低,这样才可以使大多数视障?#27809;?#21487;以用得上用得起,更重要的创新是背后的AI算法。以后我们会对这个盲键进行更多的触感设计,让它有更清晰的触觉反馈,满足更多的应用程序的需要。未来可以免费发放给视障?#27809;?#20351;用”。

触觉是人与环境、人与人交互的一个重要通道,也是视障?#27809;?#20027;要的信息通道,赵晨表示:“希望我们的技术创新不但服务于大众?#27809;В?#20063;可以帮助像视障?#27809;?#36825;样的弱势或少数群体,让他们的生活更愉快些。从另外一个角度,电话发明的初衷是为了帮助聋哑人,今天成为人人不可或缺的一个设备。从长远看来,我们希望为视障?#27809;?#25552;供的技术以后也能逐?#20132;?#21450;大众。”(实习记者 崔 爽)


版权声明

  • 中国残疾人网站所有内容的版权均属于作者或页面内声明的版权人。未经中国残疾人网站许可,任何其他个人或组织均不得以任何形式将中国残疾人网站的各项资源转载、复制、编辑或发布用于其他任何场合;不得将其中任何形式的资讯散发给其他方,不可将这些信息在其他的服务器或文档中作镜像复制或保存;不得修?#24149;?#20877;使用中国残疾人网站的任何资源。若有意转载本站信息资?#24076;?#24517;需取得中国残疾人网站的授权。
  • 凡本网注明“来源:XXX(非中国残疾人网站)”的作品,均转载自其它媒体,转载目的在于传递更多信息,并不代表本网赞同其观点和对其真实性负责。本网转载其他媒体之稿件,意在为公众提供免费服务。如稿件版权单位或个人不想在本网发布,可与本网联系,本网视情况可立即将其撤除。
  • 若对该稿件内容有任?#25105;?#38382;或?#23460;桑?#35831;?#20174;?#20013;国残疾人网站联系,本网将迅速给您回应并做处理。
    电话:010-84639477 邮箱:[email protected]
新疆时时彩双胆怎么买
<xmp id="cu0k8"><small id="cu0k8"></small>
<xmp id="cu0k8"><rt id="cu0k8"></rt>
<tt id="cu0k8"></tt>
<tt id="cu0k8"><tt id="cu0k8"></tt></tt>
<xmp id="cu0k8"><small id="cu0k8"></small>
<xmp id="cu0k8"><rt id="cu0k8"></rt>
<tt id="cu0k8"></tt>
<tt id="cu0k8"><tt id="cu0k8"></tt></tt>