你是我的眼 帶我領略四季的變換 ...

[mtr]

https://www.bilibili.com/video/BV1THstzuEZ9/
https://github.com/AI-FanGe/OpenAIglass ... Navigation
https://x.com/aigclink/status/1985545070326792201

强，人民币不到150元手搓了一套AI导盲眼镜，可以盲道导航、过马路辅助、物品识别、实时语音交互，方案开源

基于ESP32，加AI模型+硬件，实现“帮我过马路”，系统就会实时播报“前方3米有斑马线，现在绿灯，可以通行”

功能可以扩展，比如新增“找公交站”功能，在 workflow_blindpath.py加代码即可

其他人也能同时用手机或电脑以第一视角实时看，远程协助

盲道导航，基于YOLO实时识别盲道、智能语音引导、识别障碍物并规划避障路线、识别急转弯并提前提醒

过马路辅助，实时检测斑马线位置方向、识别红绿灯、引导用户对准斑马线中心、绿灯时语音提示可以通行

物品识别与查找，智能物品搜索、使用YOLO-E开放词汇检测+ByteTrack 追踪、结合MediaPipe手部检测引导手部靠近物品、检测手部握持动作确认已拿到

实时语音交互，基于阿里云DashScope Paraformer实时语音识别、多模态对话

项目来自B站AI研究室-帆哥

[joe]