rss 推荐阅读 wap

中国聚焦网,中国新闻网!

热门关键词:  as  xxx  自驾游  青春大学习  云南
首页 动态 地方 经济 理财 行业 人文 娱乐 科技 营销 微商

智能“屏保膜”让盲人朋友更好地用手机

发布时间:2019-01-11 17:26:14 已有: 人阅读

  拿出手机买东西、缴水电费、点外卖……这些普通人看来随手可得的日常对于视障人士来说却遥不可及。不过为了他们不掉队,技术人员也没放弃努力。

  最近阿里联合清华大学—阿里巴巴人机自然交互体验联合实验室公布了一项人机交互研究新成果:一枚AI盲键,首次打通了语音和触感两大感官系统,为盲人朋友更方便地使用手机提供了一种新可能。

  据该实验室研究员赵晨介绍,这种新的盲人触感反馈技术叫SmartTouch,具体做法是给手机贴一个新的“屏幕保护膜”,上面有支持触觉交互的“盲键”,通过低成本的屏幕盲键按钮提供触觉,更重要的是根据页面的动态变化,盲键对应的功能也随之改变,提升交互效率和用户体验。

  目前,视障用户通常使用读屏软件操作手机,用手指触摸屏幕后由读屏软件提供语音反馈。“这样的交互方式还存在很多问题,比如缺少触觉反馈,用户经常需要访问大量不需要的元素,容错率低、纠错成本高且频繁,所以视障用户使用起来的用户体验并不是很好。”清华大学计算机系教授喻纯表示。因此,他们希望增加听觉、触觉等其他交互手段,以弥补单纯语音交互的不足,从而增加视障用户人机交互的便利。

  SmartTouch之所以可以实现盲键功能在不同页面的功能变化,离不开自动理解页面信息的智能算法。“该算法首先提取界面的语义和主要功能,然后以符合视障用户心理模型的方式映射到触觉盲键按钮上。因此,和现有的技术相比,SmartTouch不单提供语音交互,还提供基于界面内容理解的触觉盲键。”喻纯说。

  对于界面的主要功能按钮,视障用户也不再需要通过遍历的方式去使用,通过盲键可以层次化地访问界面元素,这大大改变了视障用户现在使用手机的方式,从现在的语音交互拓展到语音加触觉交互,为视障用户提供更高效更方便的用户体验。

  “我们技术的核心主要有两部分:界面理解和界面交互。具体来说,界面理解指对界面语意的理解。”据喻纯介绍,界面的内容包括三层:第一层解决“未加标签”控件。目前手机界面上有很多不同的图标,大多数图标是一张图片加文字,目前的读屏软件读出来的是“未加标签”,SmartTouch通过算法自动地将图标和文本进行关联,为图标提供标签。第二层对手机界面的逻辑区块做自动识别,形成界面元素的层级组织。第三层则对界面的交互语义做理解,将界面依据视障用户的心理模型读出来。

  “我们的研究发现,视障用户在使用手机的时候希望有个明眼人在旁边,把界面上的内容讲解给他们。SmartTouch算法的长期目标是希望可以达到像用户旁边的明眼人一样转达页面内容。”喻纯说,“目前版本上不同界面的盲键是根据界面内容按规则变化的,随着我们算法的继续改进,以后界面的交互盲键也会自动生成,这样可以支持更多的手机应用。”(崔爽)

首页 | 动态 | 地方 | 经济 | 理财 | 行业 | 人文 | 娱乐 | 科技 | 营销 |免责声明

Copyright2008-2020 中国聚焦网 www.zgfocus.net 版权所有 业务QQ:121390454 Power by DedeCms 京ICP备13004639号-5

电脑版 | wap