놀랍네요! 150위안도 안 되는 가격으로 AI 기반 안내 안경을 직접 만들었습니다. 사각지대를 탐색하고, 길을 건너는 것을 돕고, 사물을 인식하고, 실시간 음성 상호 작용을 제공할 수 있습니다. 이 솔루션은 오픈 소스입니다. ESP32를 기반으로 AI 모델과 하드웨어를 결합한 이 시스템은 "3미터 앞에 횡단보도가 있습니다. 신호등이 녹색입니다. 건널 수 있습니다."와 같은 실시간 안내를 제공하여 "도로를 건너는 데 도움을 줄 수 있습니다." 기능을 확장할 수 있습니다. 예를 들어, workflow_blindpath.py에 코드를 추가하면 "버스 정류장 찾기" 기능을 추가할 수 있습니다. 다른 사람들도 모바일이나 컴퓨터를 사용해 1인칭 시점에서 실시간으로 비디오를 동시에 볼 수 있어 원격 지원이 가능합니다. YOLO를 기반으로 한 사각지대 포장 내비게이션은 사각지대 경로를 실시간으로 식별하고, 지능형 음성 안내, 장애물 식별 및 장애물 회피 경로 계획, 급회전 식별 및 사전 경고 기능을 제공합니다. 횡단 지원 기능은 횡단보도 위치와 방향을 실시간으로 감지하고, 신호등을 인식하고, 사용자가 횡단보도 중앙에 정렬하도록 안내하고, 신호등이 녹색으로 바뀌면 안전하게 횡단할 수 있음을 음성으로 알려줍니다. 품목 인식 및 검색: YOLO-E 개방형 어휘 감지 + ByteTrack 추적을 사용한 지능형 품목 검색, MediaPipe 손 감지와 결합하여 손을 품목 쪽으로 유도하고, 손의 움켜쥐기 동작을 감지하여 수령을 확인합니다. Alibaba Cloud DashScope Paraformer 실시간 음성 인식 및 다중 모달 대화를 기반으로 한 실시간 음성 상호작용입니다. 이 프로젝트는 Bilibili AI Research Lab - Fan Ge에서 시작되었습니다. #AI 가이드 안경 #AI 가이드
깃허브: https://t.co/SBKv8O2qx2
