上海交通大学团队研发的“AI眼镜”通过结合人工智能、声音提示和触觉反馈，显著提升了盲人和视力障碍人士的导航效率。该可穿戴系统利用眼镜上的摄像头捕捉环境信息，AI算法进行解读，并通过骨传导耳机和可伸展“人造皮肤”提供语音和震动提示，帮助佩戴者避开障碍物，规划无障碍路线。实验结果表明，该技术在虚拟和真实环境中均能有效辅助视障人士，为提升他们的生活质量提供了新途径。

👓 **多模态感知系统：** 该“AI眼镜”系统结合了视觉、听觉和触觉三种感官模式，通过安装在眼镜上的摄像头捕捉周围环境信息，利用AI算法进行分析。

🗣️ **语音和触觉反馈：** 系统通过骨传导耳机提供语音提示，告知佩戴者周围环境和障碍物信息。同时，通过贴在手腕的可伸展“人造皮肤”进行震动提醒，引导佩戴者避开障碍物。

🚶 **导航效率提升：** 实验结果表明，佩戴“AI眼镜”的盲人在室内迷宫和城市街道上的导航能力均得到显著提升，能够有效避开障碍物，更安全、高效地完成移动任务。

👨‍🔬 **用户友好设计：** 研究团队特别关注用户体验，定制了AI算法以匹配应用场景和人类行为的需求，并通过开发可拉伸的感官-运动人工皮肤来提高穿戴舒适性。

👟 **自供电智能鞋垫：** 系统还配备了自供电的摩擦电智能鞋垫，用于将真实用户与虚拟化身对齐，支持在精心设计的场景中进行有效的训练。

IT之家 4 月 16 日消息，上海交通大学团队近期为盲人开发了专用“AI 眼镜”，利用声音和触觉刺激，显著提升了视觉障碍人士的导航效率，成果于 4 月 14 日在 Nature 子刊 Nature Machine Intelligence 上发表，且获得 Nature 头条推荐。

该研究开发了一款面向盲人和部分视力障碍者的可穿戴多模态视觉辅助系统，该系统利用人工智能（AI）解读安装在眼镜上的摄像头所拍摄的画面以勘测周围环境，在佩戴者接近障碍物或物体时会通过骨传导耳机进行语音提示，以及通过贴在手腕的可伸展“人造皮肤”进行震动提醒，指导佩戴者移动方向，避开两侧的物体，为其选择一条无障碍路线。

软件方面，研究团队定制了 AI 算法以匹配应用场景和人类行为的需求。硬件方面，团队通过开发可拉伸的感官-运动人工皮肤来提高穿戴性，以补充音频反馈和视觉任务。

此外，自供电的摩擦电智能鞋垫将真实用户与虚拟化身对齐，支持在精心设计的场景中进行有效的训练。

视觉、听觉和触觉感官的结合，使导航和后导航任务得到显著改善，这在虚拟和真实环境中的人形机器人和视力障碍参与者中通过实验得到证实。

上海交通大学团队表示，这项研究为用户友好的视觉辅助系统铺平了道路，为视障人士提高生活质量提供了新的途径。

研究团队还招募了 20 名盲人或部分视力障碍者进行测试，在室内迷宫测试中，12 名参与者能够在室内迷宫中避开障碍物。在真实世界测试中，8 名参与者能够在城市街道上行走以及穿过摆满家具的会议室。

IT之家附论文链接：

https://www.nature.com/articles/s42256-025-01018-6