
【导语】上海交通大学计算机学院清源研究院顾磊磊团队研发了一款可穿戴AI导航系统,专为视障人士设计。该系统通过创新智能软硬件,利用摄像头捕捉视觉信息,结合AI算法分析,通过骨传导耳机和人造电子皮肤提供导航指导。相比传统电子辅助系统,该系统更注重用户体验与人体工程学设计,旨在提高视障人士的行动能力,并期待未来实现更加个性化与隐形的辅助设备。

上海交通大学计算机学院清源研究院顾磊磊团队为视障人士研发了可穿戴AI导航系统。 受访者供图
“墨镜、手杖、导盲犬是视障人士出行的三件套,这是他们的助手,也是他们的标记。通过创新的智能软硬件,逐渐去除这些标记,让视障人士从外观到行为都能像正常人一样生活,是我们的终极目标。”上海交通大学计算机学院清源研究院长聘教轨副教授、博士生导师顾磊磊日前在接受澎湃科技记者采访时表示。
4月14日,国际学术期刊《自然-机器智能》在线发表发布了他的一篇论文,介绍了一款可以为障碍人士提供导航辅助功能的可穿戴系统。
该系统通过摄像头拍照来获得图像等视觉信息,然后以(yǐ)AI算(suàn)法(fǎ)进(jìn)行(xíng)分(fēn)析(xī),确(què)定(dìng)目(mù)标(biāo)及(jí)障(zhàng)碍(ài)物(wù)后(hòu)等(děng)关键情(qíng)况(kuàng)后(hòu)作(zuò)出(chū)判(pàn)断(duàn),通(tōng)过(guò)骨(gǔ)传(chuán)导(dǎo)耳(ěr)机(jī)的(de)立(lì)体(tǐ)音(yīn)和(hé)腕(wàn)部(bù)皮(pí)肤(fū)的(de)触(chù)觉(jué)等(děng)信(xìn)号(hào)传(chuán)递(dì)给(gěi)使(shǐ)用(yòng)者(zhě),指(zhǐ)导(dǎo)使(shǐ)用(yòng)者(zhě)做(zuò)出(chū)前(qián)进(jìn)、左(zuǒ)移(yí)或(huò)者(zhě)右(yòu)移(yí)等(děng)安(ān)全动(dòng)作(zuò)。该(gāi)指(zhǐ)示(shì)随(suí)着(zhe)使(shǐ)用(yòng)者(zhě)移(yí)动(dòng)实(shí)时(shí)更(gèng)新(xīn),逐(zhú)步(bù)指(zhǐ)导(dǎo)使(shǐ)用(yòng)者(zhě)达(dá)到(dào)最(zuì)终(zhōng)目(mù)标(biāo)。

上(shàng)海(hǎi)交(jiāo)通(tōng)大(dà)学(xué)计(jì)算(suàn)机(jī)学(xué)院(yuàn)清(qīng)源(yuán)研(yán)究(jiū)院(yuàn)长(zhǎng)聘(pìn)教(jiào)轨(guǐ)副(fù)教(jiào)授(shòu)、博(bó)士(shì)生(shēng)导(dǎo)师(shī)顾(gù)磊(lěi)磊(lěi)(左(zuǒ)二(èr))和(hé)部(bù)分(fēn)实(shí)验(yàn)室(shì)成(chéng)员(yuán)。 记(jì)者(zhě) 吴(wú)跃(yuè)伟(wěi) 摄(shè)
顾(gù)磊(lěi)磊(lěi)表(biǎo)示(shì),以(yǐ)前(qián)为视障人士提供的类似导航系统往往把人当作一台车来处理。但人不是机器,有自己的特点,也对系统有自己独特的要求。人有大脑,完整的视觉回路需要AI和大脑中继完成,AI的输出需要和大脑的认知一致,两套系统才能良好配合,人用起AI系统才会觉得像在使用自己本来的器官一样轻松自在;行为上,人也没法像机器一样严格的遵循指令,需要AI系统平衡准确度与自由度;最后,人的承载能力也无法和机器相比,人体力有限,希望系统足够轻、薄甚至美。传统电子辅助系统在这些方面的不足使其在盲人群体中的接受率始终不高。
顾磊磊的这套系统的目标是提高视障人士的行动能力,通过系统提示可以避开障碍物。新系统总重约200克,由装载了RGB-D(红绿蓝和深度)摄像头的眼镜、两小块人造电子皮肤和一个微型单板计算机组成。新系统从拍照到响应、输出的时间是仅200-300毫秒,与人类的反应时间一致,从而可以与使用者更默契地配合。
为了解决光线不足可能给拍照系统带来的风险,该系统还集成了一个红外探测器,可以“像激光雷达一样”进行主动探测,提供距离、高低等信息。
“我们调研后发现,视障人士的基本需求有三个,第一个是明暗变化,比如眼前有没有障碍物;第二个是形状;第三是看到运动的信息,比如面前是不是有东西移动过去。他们没有爬山、游泳那么高的要求(qiú)。”“所(suǒ)以(yǐ),我(wǒ)们(men)是(shì)一直在做减法。把功能做得像车载系统一样很大很强不是我们的最终目的,我们是要它具有人们刚需使用时的合理功能,在此基础上尽力压低其在体积、重量以及能量算力等方面需求。”顾磊磊表示。
此外,该系统还提供了一双摩擦供电的智能鞋垫和VR训练平台,让使用者在正式出行前可以在虚拟系统中进行模拟、训练,降低摔倒、碰撞等风险。
对于新系统的局限性,顾磊磊表示,目前属于基础研究阶段,只是进行了少量的测试——一共有20人试用的数据,其中18人是视障人士。该产品如果要投放市场,需要更多的反馈数据,以进行优化。
“说不定我们可以把摄像头换掉(diào)。”顾(gù)磊(lěi)磊(lěi)希(xī)望(wàng)把(bǎ)摄(shè)像(xiàng)头(tóu)整(zhěng)合(hé)到(dào)隐(yǐn)形(xíng)眼镜中,取代目前系统中的镜框眼镜,代替手杖,“让使用者尽力看起来像健全人”。
此外,他表示,很重要的一点是,希望未来的类似系统是个性化的,因为每位用户关注的东西可能是不一样的。而这样的“量身定做”可以基于AI算法的优化来实现。