StreetReaderAI:讓盲人也能自由享受Google 街景服務 Google Research 推出無障礙街景原型系統 它透過一個結合視覺理解、地理資訊和即時對話的多模態AI系統,實現語音可導航、可對話的虛擬街景探索 可以讓盲人或低視力用戶,也能以互動方式理解和探索街景環境。 StreetReaderAI 的主要功能包括: 即時語音描述- 系統能自動用語音描述你周圍的街道、路口和建築; 智慧對話功能- 你可以直接和AI聊天,詢問當前場景或附近地理訊息,例如「前面是什麼建築?」; 無障礙導航- 你可以用語音或鍵盤來轉動視角、前進或切換位置,就像在虛擬世界中自由行走一樣。
它由兩大核心AI子系統組成: AI Describer(場景描述器) AI Chat(互動式問答助理) AI Describer 的職責是自動產生對目前街景畫面的語音描述 AI Chat 基於Google 的Multimodal Live API,讓使用者與街景系統進行自然語言交互 詳細xiaohu.ai/c/xiaohu-ai/st…A