上海交大顾磊磊团队开发AI眼镜，帮助盲人导航

yinfuhua

Nature头条：上海交大顾磊磊团队开发AI眼镜，帮助盲人导航6 u1 N4 H4 Q8 b) W% J. a$ C- s! T
1.        人工智能/ R5 E4 {& C0 D8 G5 z7 ?, O, `; ]
来源：生物世界 2025-04-17 09:350 J) K9 U) }+ z
研究结果表明，整合视觉、听觉和触觉能增强视力辅助系统的可用性和功能性，为用户友好型视觉辅助系统铺平了道路，为改善视力障碍人士的生活质量提供了新的途径。
; i/ ?2 M7 R; |+ I8 C$ H; ~上海交通大学电子信息与电气工程学院清源研究院、上海人工智能实验室顾磊磊团队在 Nature 子刊 Nature Machine Intelligence 上发表了题为：Human-centred design and fabrication of a wearable multimodal visual assistance system 的研究论文，还研究登上了今天的 Nature 头条。
: Z+ C2 a' V3 m3 H2 R该研究开发了一款面向盲人和部分视力障碍者的可穿戴多模态视觉辅助系统，该系统利用人工智能（AI）解读安装在眼镜上的摄像头所拍摄的画面以勘测周围环境，在佩戴者接近障碍物或物体时会通过骨传导耳机进行语音提示，以及通过贴在手腕的可伸展“人造皮肤”进行震动提醒，指导佩戴者移动方向，避开两侧的物体，为其选择一条无障碍路线。
1 |* z; m* f  ^& G
( f# s6 i  B& R8 b  r& [该研究提出了一种以人为本的多模态可穿戴系统，通过融合软件和硬件创新来提高可用性。该系统本质上是一副配有摄像头的智能眼镜，可以捕捉佩戴者周围环境的实时图像，该系统还通过一台微型计算机使用经过训练的机器学习算法来处理这些图像，从而检测周围环境中其他人以及门、墙和家具等物体的存在。该系统每 250 毫秒就会向用户提供关于周围环境的音频提示，并在左侧或右侧耳机上发出“哔哔”声，引导用户朝正确的方向前进。 研究团队还开发了一种灵活的可伸展“人造皮肤”贴片，可以贴在手腕和手指上，用于额外的导航辅助，其配备了自己的摄像头系统，当障碍物在 40 厘米到 5 厘米之间时，会震动提醒佩戴者。当用户伸手去拿东西时，它们也会震动，提醒他们何时该抓东西了。 该设备通过自供电的摩擦起电智能鞋垫将真实用户与虚拟化身对齐，在精心设计的场景中支持有效的 VR 训练。* z0 _1 }8 |1 d' c5 v& ~& Y

. s. a3 \9 V3 {3 l4 Q
- q* [3 Q+ i% A, n4 r/ U为了验证该系统的效果，研究团队招募了 20 名盲人或部分视力障碍者进行测试，在室内迷宫测试中，12 名参与者能够在室内迷宫中避开障碍物。在真实世界测试中，8 名参与者能够在城市街道上行走以及穿过摆满家具的会议室。" I# ]5 o# f( M* ?! J

! n) O' K3 x9 U! _' ^  l这些研究结果表明，整合视觉、听觉和触觉能增强视力辅助系统的可用性和功能性，为用户友好型视觉辅助系统铺平了道路，为改善视力障碍人士的生活质量提供了新的途径。9 {! W$ E. y6 d: j/ U. ^
论文通讯作者、上海交通大学人工智能研究员顾磊磊表示，这个系统可以部分取代眼睛。目前，这个装置还只是一个原型机，为了使它在实际层面上更有用，研究团队需要确保它非常可靠，并且对用户是安全的。
/ e8 O6 J+ F: x/ `& c; ?7 H: t5 I* M8 P