官方网站-首页官方网站-首页

上海交大教授为视障人士研发了可穿戴AI导航系统

2025-04-16 08:30:33 499

【导语】上海交通大学计算机学院清源研究院顾磊磊团队研发了一款可穿戴AI导航系统,专为视障人士设计。该(gāi)系(xì)统(tǒng)通过摄像头捕捉视觉信息,利用AI算法分析并传递导航指令,旨在提高视障人士的行动能力,使他们能更自如地融入日常生活。顾磊磊表示,该系统注重人性化设计,力求在功能、体积、重量等方面达到最佳平衡,未来还将进一步优化并个性化定制,以满足不同用户的需求。

上(shàng)海(hǎi)交通大学计(jì)算(suàn)机(jī)学(xué)院(yuàn)清(qīng)源(yuán)研(yán)究(jiū)院(yuàn)顾(gù)磊(lěi)磊(lěi)团(tuán)队(duì)为(wèi)视(shì)障(zhàng)人(rén)士(shì)研(yán)发(fā)了(le)可(kě)穿(chuān)戴(dài)AI导(dǎo)航(háng)系(xì)统(tǒng)。 受(shòu)访(fǎng)者(zhě)供(gōng)图(tú)

“墨(mò)镜(jìng)、手杖、导盲犬是视障人士出行的三件套,这是他们的助手,也是他们的标记。通过创新的智能软硬件,逐渐去除这些标记,让视障人士从外观到行为都能像正常人一样生活,是我们的终极目标。”上海交通大学计算机学院清源研究院长聘教轨副教授、博士生导师顾磊磊日前在接受澎湃科技记者采访时表示。

4月14日,国际学术期刊《自然-机器智能》在线发表发布了他的一篇论文,介绍了一款可以为障碍人士提供导航辅助功能的可穿戴系统。

该系统通过摄像头拍照来获得图(tú)像(xiàng)等(děng)视觉信息,然后以AI算法进行分析,确定目标及障碍物后等关键情况后作出判断,通过骨传导耳机的立体音和腕部皮肤的触觉等信号传递给使用者,指导使用者做出前进、左移或者右移等安全动作。该指示随着使用者移动实时更新,逐步指导使用者达到最终目标。

上海交通大学计算机学院清源研究院长聘教轨副教授、博士生导师顾磊磊(左二)和部分实验室成员。 记者 吴跃伟 摄

顾磊磊表示,以前为视障人士提供的类似导航系统往往把人当作一台车来处理。但人不是机器,有自己的特点,也对系统有自己独特的要求。人有大脑,完整的视觉回路需要AI和大脑中继完成,AI的输出需要和大脑的认知一致,两套系统才能良好配合,人用起AI系统才会觉得像在使用自己本来的器官一样轻松自在;行为上,人也没法像机器一样严格的遵循指令,需要AI系统平衡准确度与自由度;最后,人的承载能力也无法和机器相比,人体力有限,希望系统足够轻、薄甚至美。传统电子辅助系统在这些方面的不足使其在盲人群体中的接受率始终不高。

顾磊磊的这套系统的目标是提高视障人士的行动能力,通过系统提示可以避开障碍物。新系统总重约200克,由装载了RGB-D(红绿蓝和深度)摄像头的眼镜、两小块人造电子皮肤和一个微型单板计算机组成。新系统从拍照到响应、输出的时间是仅200-300毫秒,与人类的反应时间一致,从而可以与使用者更默契地配合。

为了解决光线不足可能给拍照系统带来的风险,该系统还集成了一个红外探测器,可以“像激光雷达一样”进行主动探测,提供距离、高低等信息。

“我们调研后发现,视障人士的基本需求有三个,第一个是明暗变化,比如眼前有没有障碍物;第二个是形状;第三是看到运动的信息,比如面前是不是有东西移动过去。他们没(méi)有(yǒu)爬(pá)山(shān)、游(yóu)泳(yǒng)那(nà)么(me)高(gāo)的(de)要(yào)求(qiú)。”“所以,我们是一直在做减法。把功能做得像车载系统一样很大很强不是我们的最终目的,我们是要它具有人们刚需使用时的合理功能,在此基础上尽力压低其在体积、重量以及能量算力等方面需求。”顾磊磊表示。

此外,该系统还提供了一双摩擦供电的智能鞋垫和VR训练平台,让使用者在正式出行前可以在虚拟系统中进行模拟、训练,降低摔倒、碰撞等风险。

对(duì)于(yú)新(xīn)系(xì)统(tǒng)的(de)局(jú)限(xiàn)性(xìng),顾(gù)磊(lěi)磊(lěi)表(biǎo)示(shì),目(mù)前(qián)属(shǔ)于(yú)基(jī)础(chǔ)研(yán)究(jiū)阶(jiē)段(duàn),只(zhǐ)是(shì)进(jìn)行(xíng)了(le)少(shǎo)量(liàng)的(de)测(cè)试(shì)——一(yī)共(gòng)有(yǒu)20人(rén)试(shì)用(yòng)的(de)数(shù)据(jù),其(qí)中(zhōng)18人(rén)是(shì)视(shì)障(zhàng)人(rén)士(shì)。该(gāi)产(chǎn)品(pǐn)如(rú)果(guǒ)要(yào)投(tóu)放(fàng)市(shì)场(chǎng),需(xū)要(yào)更(gèng)多(duō)的(de)反(fǎn)馈(kuì)数(shù)据(jù),以(yǐ)进(jìn)行(xíng)优(yōu)化(huà)。

“说(shuō)不(bù)定(dìng)我(wǒ)们(men)可(kě)以(yǐ)把(bǎ)摄(shè)像(xiàng)头(tóu)换(huàn)掉(diào)。”顾(gù)磊(lěi)磊(lěi)希(xī)望(wàng)把(bǎ)摄(shè)像(xiàng)头(tóu)整(zhěng)合(hé)到(dào)隐(yǐn)形(xíng)眼(yǎn)镜(jìng)中(zhōng),取(qǔ)代(dài)目(mù)前(qián)系(xì)统(tǒng)中(zhōng)的(de)镜(jìng)框(kuāng)眼(yǎn)镜(jìng),代(dài)替(tì)手(shǒu)杖(zhàng),“让(ràng)使(shǐ)用(yòng)者(zhě)尽(jǐn)力(lì)看(kàn)起(qǐ)来(lái)像(xiàng)健(jiàn)全人(rén)”。

此(cǐ)外(wài),他(tā)表(biǎo)示(shì),很(hěn)重(zhòng)要(yào)的(de)一(yī)点(diǎn)是(shì),希(xī)望(wàng)未(wèi)来(lái)的(de)类(lèi)似(shì)系(xì)统(tǒng)是(shì)个(gè)性(xìng)化(huà)的(de),因(yīn)为(wèi)每(měi)位(wèi)用(yòng)户关注的东西可能是不一样的。而这样的“量身定做”可以基于AI算法的优化来实现。