用人工智能推进辅助技术

作者:曾卓珊

对于视力受损的人来说,在陌生的街道上行走可能是一项挑战。 即使在空旷的地方直走也很困难。 遇到障碍物、楼梯和十字路口可能会导致不安全的情况。 虽然像白手杖或导盲犬这样的辅助工具很有帮助,但它们并不能准确地告诉视障人士他们面前是什么或该去哪里。 

Professor 艾许Ohn-Bar works 在 开发能够无缝协作并帮助人类的人工智能技术。 Ohn-Bar is a Hariri Institute Junior 澳门威尼斯人注册网站 Fellow and Thrust Leader of the AI for Assistive Applicati在s and Natural Interfaces, part of the Focused Research Program 教学机器的类人智能. 他也是一个 CISE教职员,工程学院电气与计算机工程教授。

Ohn-Bar’s 最近的一篇论文, 辅助:通过条件指令生成辅助导航,” 引入一种语言生成人工智能,为视力受损的个人提供直观的、类似人类的帮助。 它的目标是让ASSISTER能够决定什么时候告诉视障人士,比如他们面临的障碍,同时通过规划路径,口头指导他们到达目的地。 

Eshed john - bar教授(ECE)致力于开发能够无缝协作并帮助人类的人工智能技术。

“There’s a grand engineering challenge of assisting individuals with visual impairments to navigate and get to their destinati在 safely and seamlessly”, Ohn-Bar said. “Individuals with disabilities often say that transportati在 and getting to places can affect their quality of life because they may want to go to restaurants or the gym. But, they may end up staying home because they feel it’s too difficult to get to these places independently.”

john - bar和他的团队希望ASSISTER AI的行为不像自动引导,而是更自然,更倾向于人们自己对方向和能力的理解。

“The goal of ASSISTER is to mimic natural human interacti在 as opposed to providing feedback similar to an autocorrect system that gives you some recommendati在 you d在’t want to use”, Ohn-Bar said.  

为了模仿更自然的互动,约翰-巴尔和他的团队聘请了方向和移动指南。 这些导游与视力受损的人一起工作,教他们如何导航到目的地。 当他们导航时,旅行者戴着相机,使澳门威尼斯人注册网站研究人员能够观察导游如何给出方向和他们的反应。 然后,他们从这些经历中获取视频和音频数据,并用它来训练ASSISTER。 使用扬声器跟随模型,ASSISTER被编程为通过可穿戴辅助系统提供会话指令。 

约翰-巴尔和他的团队首先在模拟中测试了ASSISTER,在不同的场景和环境中,然后在现实世界中对人类进行了测试。 这个模拟模拟了在看不到任何东西的情况下导航的感觉。 用户可以使用键盘按键四处移动,但他们在屏幕上看到的只是一个指示手杖位置的彩色扇形。 仅凭屏幕上风扇的视觉效果,用户就必须完成找到他们的共享车辆的任务。

用户戴着辅助系统在街道上导航。

一旦他们调整了 算法,然后他们将人工智能转移到现实世界。 约翰-巴尔和他的团队与波士顿卡罗尔盲人中心合作,用户得到指示,通过繁忙的十字路口、楼梯、路边和行人到达200英尺外的自动驾驶汽车。 循序渐进的辅助系统能够引导用户一路到达车门把手处。 

约翰-巴尔说,虽然他一直致力于辅助技术的人机交互,但与卡内基梅隆大学的一位盲人计算机科学家一起工作,向他展示了技术如何减轻盲人的困难。 他还提到他的祖母几年前失去了大部分视力。 

总的来说,今天的人工智能和计算机视觉很难理解残疾人。 在一篇题为 X-World:可访问性、愿景和自主性的结合在美国,约翰-巴尔和他的团队发现,算法检测轮椅的准确率为30%,而检测白手杖的准确率不到1%,这表明在教机器识别残疾人并与之互动方面缺乏澳门威尼斯人注册网站研究。 

john - bar和他的团队最近获得了美国国家科学基金会的资助,继续与ASSISTER进行澳门威尼斯人注册网站研究。 他们目前正在测试ASSISTER的智能手机应用程序版本,约翰-巴尔说,他希望ASSISTER变成一个完整的旅行支持系统,任何人都可以使用。 从本质上讲,这个应用程序可以引导任何人从一个目的地到另一个目的地,然后返回家园。 他希望他的工作能让残疾人更容易导航,更轻松地完成日常任务。